Microsoft Research construit un assistant virtuel intelligent avec son projet d'interaction située

Icône de temps de lecture 3 minute. lis


Les lecteurs aident à prendre en charge MSpoweruser. Nous pouvons recevoir une commission si vous achetez via nos liens. Icône d'info-bulle

Lisez notre page de divulgation pour savoir comment vous pouvez aider MSPoweruser à soutenir l'équipe éditoriale En savoir plus

Assistant virtuel Microsoft Monica

Alors que nous attendons tous d'essayer l'assistant numérique Cortana sur Windows Phone 8.1, Microsoft Research travaille sur des assistants virtuels capables de gérer votre travail dans la vie réelle avec d'autres personnes et plus encore. L'objectif à long terme de Microsoft Research de Interaction située projet est de permettre une nouvelle génération de systèmes interactifs qui intègrent l'interaction et le calcul profondément dans le flux naturel des tâches, activités et collaborations quotidiennes. Les exemples de scénarios incluent l'interaction homme-robot, l'e-home, les panneaux d'affichage interactifs, les systèmes qui surveillent, assistent et coordonnent des équipes d'experts à travers des tâches et des procédures complexes, etc.

Un tel assistant pourrait se coordonner avec les assistants d'autres personnes, aidant à planifier des engagements sociaux, des engagements professionnels et des voyages. Il pourrait anticiper vos besoins en fonction des activités passées, comme l'endroit où vous avez apprécié vos repas, et se coordonner avec les entreprises qui proposent des offres spéciales. Cela pourrait vous aider à sélectionner un film en fonction de ceux que vos amis ont aimés.

"Des assistants intelligents et solidaires qui assistent et complètent les gens sont une aspiration clé en informatique", déclare Horvitz, "et la recherche fondamentale dans cet espace comprend la collecte de données et l'observation des personnes qui conversent, collaborent et s'entraident afin que nous puissions apprendre comment mieux développer des systèmes qui peuvent jouer ce rôle.

L'assistant virtuel Monica actuel de Microsoft possède les fonctionnalités d'interaction suivantes.

Interaction de base: illustre une interaction de base d'un seul participant avec le système. Remarquez les différentes couches d'analyse de la scène (le système suit le visage et la pose de l'utilisateur, déduit des informations sur les vêtements, l'affiliation, les objectifs de la tâche, etc.) et le modèle d'engagement naturel (le système s'engage à mesure que l'utilisateur s'approche)
Inférences de scène et mise à la terre : les systèmes déduisent les objectifs de l'utilisateur à partir de l'analyse de la scène (l'utilisateur est habillé de manière formelle, donc très probablement externe, et veut donc probablement s'enregistrer), mais fonde ces informations sur le dialogue. Remarquez également la mise à la terre du numéro de bâtiment.
Modélisation de l'attention et engagement: les systèmes surveillent l'attention de l'utilisateur (en utilisant les informations du détecteur de visage et du traqueur de pose) et engage l'utilisateur en conséquence.
Gestion des personnes en file d'attente: le système surveille plusieurs utilisateurs dans la scène et reconnaît la présence d'un utilisateur en attente d'un coup d'œil rapide (le point rouge montre le regard du système) et en les engageant temporairement vers la fin de la conversation
Réengagement : comme ci-dessus, sauf que lorsque le système revient en arrière, l'utilisateur initial ne fait plus attention. Sachant qu'une personne fait la queue, le système attire l'attention de l'utilisateur et le réengage en lui disant « Excuse me ! »
Dialogue multi-participants: le système déduit de la scène (et confirme par le dialogue) que les deux participants sont dans un groupe ensemble. Le système poursuit alors une conversation multi-participants. Remarquez le modèle de regard (point rouge) qui est une information sur qui est le participant parlant et aussi certains éléments de la structure du discours.
Dialogue multi-participants avec conversation parallèle: similaire à l'interaction précédente ; à la fin, les utilisateurs s'engagent dans une conversation parallèle. Le système comprend que les paroles ne lui sont pas adressées et, au bout d'un moment, interrompt les deux utilisateurs pour transmettre l'information navette. Notez également l'interaction de l'écran tactile qui est utilisée comme solution de repli en cas d'échec de la reconnaissance vocale.
Dialogue multi-participants avec une tierce personne en attente: qui illustre également comment le système gère un participant en attente tout en interagissant avec un groupe de deux utilisateurs.

En savoir plus sur ce projet sur Microsoft Research.

En savoir plus sur les sujets : microsoft, un article, Collaboratif, Interaction située, smart, Assistant virtuel

Soyez sympa! Laissez un commentaire

Votre adresse email n'apparaitra pas. Les champs obligatoires sont marqués *