- \n
- \nDesaf\u00edo<\/div>\nAplicaci\u00f3n de cocina manos libres controlada por voz<\/div>\n<\/li>\n
- \n
Soluci\u00f3n<\/div>\nAplicaci\u00f3n de asistente de voz con inteligencia artificial para cocinar sin manos<\/div>\n<\/li>\n- \n
Tecnolog\u00edas y herramientas<\/div>\nCustom Speech2Text (wav2vec2 fine-tuning), Google Cloud speech API, Apple Speech Kit, speech data augmentation, AI Voice Assistant, Voice Activation, Voice Intent Classification, Recipes Text Parsing (Named Entity Recognition for recipes), Entities Dependency Parsing (understanding relations between ingredients, their values and units using Stanza package), Automatic Punctuation Restoring, AWS, AWS SageMaker<\/div>\n<\/li>\n<\/ul>\n<\/div>\nCliente<\/h2>\n
Para realizar el proyecto de desarrollo del asistente de cocina inteligente AI, el cliente necesitaba un equipo experimentado capaz de desarrollo full stack y Consultor\u00eda de IA<\/a> con un alto nivel de experiencia en Ciencia de Datos.<\/p>\n
El cliente buscaba un equipo con profesionalidad, amplios conocimientos en Machine Learning, trayectoria positiva, gran comunicaci\u00f3n e ilusi\u00f3n por emprender un proyecto como el suyo. Ellos han mencionado<\/a> que, tras entrevistar a m\u00e1s de dos docenas de empresas de todo el mundo, ESSID Solutions destac\u00f3 inmediatamente desde el principio del proceso.<\/p>\n
El cliente acudi\u00f3 a nosotros con un prototipo de aplicaci\u00f3n que ya contaba con un back-end, un front-end, una aplicaci\u00f3n para iOS y algo de IA que necesitaba m\u00e1s desarrollo. La principal preocupaci\u00f3n del cliente era que la funcionalidad de reconocimiento de voz no funcionaba correctamente.<\/p>\n
Reto: aplicaci\u00f3n de cocina manos libres controlada por voz<\/h2>\n
ESSID Solutions se enfrent\u00f3 al reto de desarrollar un sistema de inteligencia artificial robusto, tanto para los aspectos frontales y de backend (y la aplicaci\u00f3n IOS) de la aplicaci\u00f3n como para el sistema de gesti\u00f3n de la informaci\u00f3n. Integraci\u00f3n de algoritmos de IA<\/a>.<\/p>\n
La idea de la aplicaci\u00f3n es desarrollar un asistente de cocina con inteligencia artificial que permita a las personas cocinar con las manos libres (porque las manos pueden estar ocupadas preparando la comida). Mientras cocinas, puedes dictar tu receta a la aplicaci\u00f3n, que la graba y la guarda. O puedes pedirle a la aplicaci\u00f3n que te dicte algunas de las recetas mientras preparas la comida. Con la ayuda del asistente de cocina, el usuario puede cocinar sin tener que ir y venir entre el recetario o el tel\u00e9fono y los fogones. La aplicaci\u00f3n permite disfrutar de experiencias culinarias agradables.<\/p>\n
El equipo que trabaj\u00f3 en el proyecto inclu\u00eda un gestor de proyectos, un cient\u00edfico de datos, un desarrollador full-stack, un desarrollador de iOS y un ingeniero de control de calidad.<\/p>\n
Soluci\u00f3n: Aplicaci\u00f3n de asistente de voz con inteligencia artificial para cocinar sin manos<\/h2>\n
El equipo de ESSID Solutions realiz\u00f3 una nueva implementaci\u00f3n de IA para todos los componentes de la aplicaci\u00f3n. Desde entonces, la aplicaci\u00f3n se puede controlar por voz. La activaci\u00f3n por voz de la aplicaci\u00f3n y el reconocimiento de los comandos del usuario funcionan muy bien, as\u00ed como la transcripci\u00f3n del texto de las recetas.<\/p>\n
A petici\u00f3n del cliente, desarrollamos un sistema de Algoritmo de IA<\/a> para la funci\u00f3n pertinente de la aplicaci\u00f3n: un asistente de cocina con inteligencia artificial.<\/p>\n
En primer lugar, nuestros ingenieros realizaron una revisi\u00f3n y refactorizaci\u00f3n del resto de partes de la aplicaci\u00f3n (back-end, front-end, iOS).<\/p>\n
La siguiente tarea consisti\u00f3 en desarrollar un gran n\u00famero de funciones adicionales (como la extracci\u00f3n autom\u00e1tica de ingredientes, la suma automatizada de ingredientes, el intercambio de recetas a trav\u00e9s de las redes sociales, las notificaciones push, la recopilaci\u00f3n de datos, etc.). Revisamos y reconfiguramos el sistema del cliente. arquitectura de nube en AWS<\/a> para optimizar los costes y mejorar la disponibilidad y la sostenibilidad.<\/p>\n
Arquitectura de aplicaciones de alto nivel:<\/p>\n
![\"asistente](\"https:\/\/essidsolutions.com\/wp-content\/uploads\/2022\/11\/intelligent-ai-cooking-assistant-scheme.png\")
<\/p>\nAs\u00ed, puesto que el cliente solicit\u00f3 el servicios de desarrollo full-stack<\/a>El proyecto se planific\u00f3 en dos fases:<\/p>\n
Fase I.<\/strong> Desarrollar las partes back-end y front-end de la aplicaci\u00f3n.<\/p>\n
Fase II.<\/strong> Desarrollar un algoritmo de IA que permitiera cocinar de forma digitalizada y sin esfuerzo, sin tel\u00e9fonos grasientos alrededor ni desplazamientos hacia delante y hacia atr\u00e1s entre listas de ingredientes y pasos.<\/p>\n
Para hacerlo posible, nuestro equipo utiliz\u00f3 tecnolog\u00eda de reconocimiento de voz a texto que ayuda a convertir la voz en un libro de recetas escrito en el tel\u00e9fono del usuario. La tecnolog\u00eda permite grabar y dictar la voz sin problemas.<\/p>\n
Las caracter\u00edsticas que hemos implementado en el asistente de cocina AI:<\/p>\n
- \n
- Activaci\u00f3n por voz, control por voz de la aplicaci\u00f3n, creaci\u00f3n y edici\u00f3n de recetas por voz, escucha de recetas<\/li>\n
- Notas de voz a\u00f1adiendo<\/li>\n
- B\u00fasqueda de recetas utilizando el t\u00edtulo de la receta y los nombres de los ingredientes<\/li>\n
- Edici\u00f3n y reordenaci\u00f3n de los pasos de la receta<\/li>\n
- Extracci\u00f3n autom\u00e1tica de los ingredientes, sus valores y unidades<\/li>\n
- Suma autom\u00e1tica de ingredientes (en funci\u00f3n de sus valores y unidades)<\/li>\n
- Compartir recetas (incluidas las redes sociales).<\/li>\n<\/ul>\n
Con el registro de recetas, el libro de cocina y el planificador de comidas en un solo lugar, el usuario podr\u00e1 cocinar de forma f\u00e1cil y divertida.<\/p>\n
Resultado: aplicaci\u00f3n m\u00f3vil para preparar recetas con facilidad<\/h2>\n
Comprensi\u00f3n de las necesidades del cliente y experiencia en ciencia de datos<\/a> y la IA, ESSID Solutions ayud\u00f3 al cliente a materializar la idea e introducir la aplicaci\u00f3n funcional. El equipo de ingenier\u00eda ha desarrollado una app escalable impulsada por IA y ha implementado todas las funciones solicitadas.<\/p>\n
- \n