- \n
- \nD\u00e9fi<\/div>\nApplication de cuisine mains libres \u00e0 commande vocale<\/div>\n<\/li>\n
- \n
Solution<\/div>\nL'assistant vocal intelligent pour cuisiner les mains libres<\/div>\n<\/li>\n- \n
Technologies et outils<\/div>\nCustom Speech2Text (wav2vec2 fine-tuning), Google Cloud speech API, Apple Speech Kit, speech data augmentation, AI Voice Assistant, Voice Activation, Voice Intent Classification, Recipes Text Parsing (Named Entity Recognition for recipes), Entities Dependency Parsing (compr\u00e9hension des relations entre les ingr\u00e9dients, leurs valeurs et leurs unit\u00e9s en utilisant le package Stanza), Automatic Punctuation Restoring, AWS, AWS SageMaker<\/div>\n<\/li>\n<\/ul>\n<\/div>\nClient<\/h2>\n
Pour r\u00e9aliser le projet de d\u00e9veloppement d'un assistant culinaire intelligent, le client avait besoin d'une \u00e9quipe exp\u00e9riment\u00e9e capable de d\u00e9velopper une pile compl\u00e8te de logiciels et d'en assurer la maintenance. Conseil en IA<\/a> avec un haut niveau d'expertise en science des donn\u00e9es.<\/p>\n
Le client recherchait une \u00e9quipe faisant preuve de professionnalisme, poss\u00e9dant des connaissances approfondies en Machine Learning, un bilan positif, une excellente communication et un enthousiasme pour un projet tel que le leur. Les membres de l'\u00e9quipe ont mentionn\u00e9<\/a> qu'apr\u00e8s avoir interrog\u00e9 plus de deux douzaines d'entreprises dans le monde, ESSID Solutions s'est imm\u00e9diatement distingu\u00e9e d\u00e8s le d\u00e9but du processus.<\/p>\n
Le client est venu nous voir avec un prototype d'application qui avait d\u00e9j\u00e0 un back-end, un front-end, une application iOS et une partie de l'IA qui avait besoin d'\u00eatre d\u00e9velopp\u00e9e. La principale pr\u00e9occupation du client \u00e9tait que la fonctionnalit\u00e9 de reconnaissance vocale ne fonctionnait pas correctement.<\/p>\n
D\u00e9fi : application de cuisine mains libres \u00e0 commande vocale<\/h2>\n
ESSID Solutions a \u00e9t\u00e9 charg\u00e9 de d\u00e9velopper un syst\u00e8me d'intelligence artificielle robuste - \u00e0 la fois les aspects frontaux et dorsaux (et l'application IOS) de l'application et le syst\u00e8me de gestion de l'information de l'entreprise. Int\u00e9gration d'algorithmes d'IA<\/a>.<\/p>\n
L'id\u00e9e de l'application est de d\u00e9velopper un assistant culinaire IA qui permette aux gens de cuisiner les mains libres (parce que leurs mains peuvent \u00eatre occup\u00e9es \u00e0 pr\u00e9parer les aliments). Lorsque vous cuisinez, vous pouvez dicter votre recette \u00e0 l'application, qui l'enregistre et la sauvegarde. Vous pouvez \u00e9galement demander \u00e0 l'application de vous dicter certaines recettes pendant que vous pr\u00e9parez le repas. Avec l'aide de l'assistant culinaire, l'utilisateur peut cuisiner sans faire d'allers-retours entre le livre de recettes ou le t\u00e9l\u00e9phone et la cuisini\u00e8re. L'application permet de vivre des exp\u00e9riences culinaires agr\u00e9ables.<\/p>\n
L'\u00e9quipe travaillant sur le projet comprenait un chef de projet, un scientifique des donn\u00e9es, un d\u00e9veloppeur full-stack, un d\u00e9veloppeur iOS et un ing\u00e9nieur QA.<\/p>\n
Solution : Une application d'assistant vocal pour cuisiner les mains libres<\/h2>\n
L'\u00e9quipe d'ESSID Solutions a proc\u00e9d\u00e9 \u00e0 une nouvelle impl\u00e9mentation de l'IA pour tous les composants de l'application. Depuis lors, l'application peut \u00eatre contr\u00f4l\u00e9e par la voix. L'activation vocale de l'application et la reconnaissance des commandes de l'utilisateur fonctionnent tr\u00e8s bien, de m\u00eame que la transcription du texte des recettes.<\/p>\n
A la demande du client, nous avons d\u00e9velopp\u00e9 une solution personnalis\u00e9e. Algorithme d'IA<\/a> pour la fonction la plus importante de l'application : un assistant culinaire intelligent.<\/p>\n
Tout d'abord, nos ing\u00e9nieurs ont proc\u00e9d\u00e9 \u00e0 une r\u00e9vision et \u00e0 un remaniement des autres parties de l'application (back-end, front-end, iOS).<\/p>\n
La t\u00e2che suivante consistait \u00e0 d\u00e9velopper un grand nombre de fonctionnalit\u00e9s suppl\u00e9mentaires (telles que l'extraction automatique des ingr\u00e9dients, l'automatisation de la somme des ingr\u00e9dients, le partage des recettes via les m\u00e9dias sociaux, les notifications push, la collecte de donn\u00e9es, etc.) Nous avons revu et reconfigur\u00e9 le syst\u00e8me d'information du client. architecture en nuage sur AWS<\/a> afin d'optimiser les co\u00fbts et d'am\u00e9liorer la disponibilit\u00e9 et la durabilit\u00e9.<\/p>\n
Architecture de haut niveau de l'application :<\/p>\n
![\"assistant](\"https:\/\/essidsolutions.com\/wp-content\/uploads\/2022\/11\/intelligent-ai-cooking-assistant-scheme.png\")
<\/p>\nAinsi, puisque le client a demand\u00e9 le services de d\u00e9veloppement complets<\/a>Le projet a \u00e9t\u00e9 planifi\u00e9 en deux phases :<\/p>\n
Phase I.<\/strong> D\u00e9velopper les parties back-end et front-end de l'application.<\/p>\n
Phase II.<\/strong> D\u00e9velopper un algorithme d'IA qui rende la cuisine num\u00e9ris\u00e9e et sans effort, sans t\u00e9l\u00e9phone gras et sans faire d\u00e9filer les listes d'ingr\u00e9dients et les \u00e9tapes.<\/p>\n
Pour ce faire, notre \u00e9quipe a utilis\u00e9 une technologie de reconnaissance de la voix en texte qui permet de convertir la parole en un livre de cuisine \u00e9crit dans le t\u00e9l\u00e9phone de l'utilisateur. Cette technologie permet d'enregistrer et de dicter la voix en douceur.<\/p>\n
Les fonctionnalit\u00e9s que nous avons int\u00e9gr\u00e9es \u00e0 l'assistant culinaire IA :<\/p>\n
- \n
- Activation vocale, contr\u00f4le vocal de l'application, cr\u00e9ation et \u00e9dition de recettes vocales, \u00e9coute de recettes<\/li>\n
- Notes vocales ajoutant<\/li>\n
- Recherche de recettes \u00e0 l'aide du titre de la recette et du nom des ingr\u00e9dients<\/li>\n
- \u00c9dition et r\u00e9arrangement des \u00e9tapes de la recette<\/li>\n
- Extraction automatique des ingr\u00e9dients, de leurs valeurs et de leurs unit\u00e9s<\/li>\n
- Les ingr\u00e9dients s'additionnent automatiquement (en fonction de leur valeur et de leur unit\u00e9).<\/li>\n
- Partage de recettes (y compris dans les m\u00e9dias sociaux).<\/li>\n<\/ul>\n
Avec l'enregistrement des recettes, le livre de cuisine et le planificateur de repas en un seul endroit, il est facile pour l'utilisateur de rendre la cuisine amusante et facile.<\/p>\n
R\u00e9sultat : une application mobile pour pr\u00e9parer des recettes en toute simplicit\u00e9<\/h2>\n
Compr\u00e9hension des besoins du client et expertise en science des donn\u00e9es<\/a> ESSID Solutions a aid\u00e9 le client \u00e0 concr\u00e9tiser son id\u00e9e et \u00e0 mettre en place une application fonctionnelle. L'\u00e9quipe d'ing\u00e9nieurs a d\u00e9velopp\u00e9 une application \u00e9volutive aliment\u00e9e par l'IA et a mis en \u0153uvre toutes les fonctionnalit\u00e9s demand\u00e9es.<\/p>\n
- \n