Microsoft Research bygger en smart virtuel assistent med sit situerede interaktionsprojekt

Ikon for læsetid 3 min. Læs


Læsere hjælper med at understøtte MSpoweruser. Vi får muligvis en kommission, hvis du køber via vores links. Værktøjstip-ikon

Læs vores oplysningsside for at finde ud af, hvordan du kan hjælpe MSPoweruser med at opretholde redaktionen Læs mere

Microsoft Monica Virtual Assistant

Mens vi alle venter på at prøve Cortana digital assistent på Windows Phone 8.1, arbejder Microsoft Research på virtuelle assistenter, der kan håndtere dit arbejde i det virkelige liv med andre mennesker og mere. Microsoft Researchs langsigtede mål om Situeret interaktion Projektet skal muliggøre en ny generation af interaktive systemer, der integrerer interaktion og beregning dybt i det naturlige flow af hverdagens opgaver, aktiviteter og samarbejder. Eksempler på scenarier omfatter menneske-robot-interaktion, e-hjem, interaktive billboards, systemer, der overvåger, assisterer og koordinerer teams af eksperter gennem komplekse opgaver og procedurer osv.

En sådan assistent kunne koordinere med andre menneskers assistenter og hjælpe med at planlægge sociale engagementer, arbejdsforpligtelser og rejser. Det kunne forudse dine behov baseret på tidligere aktiviteter - såsom hvor du har nydt at spise - og koordinere med virksomheder, der tilbyder særlige tilbud. Det kan hjælpe dig med at vælge en film baseret på, hvilken film dine venner kunne lide.

"Intelligente, støttende assistenter, der assisterer og komplementerer mennesker er en nøgleambition inden for datalogi," siger Horvitz, "og grundforskning på dette område omfatter indsamling af data og observation af mennesker, der samtaler, samarbejder og hjælper hinanden, så vi kan lære, hvordan vi bedst udvikle systemer, der kan tjene i denne rolle."

Microsofts nuværende Monica Virtual-assistent har følgende interaktionsfunktioner.

Grundlæggende interaktion: illustrerer en grundlæggende en-deltagers interaktion med systemet. Læg mærke til de forskellige lag af sceneanalyse (systemet sporer brugerens ansigt og positur, udleder information om tøj, tilknytning, opgavemål osv.) og den naturlige engagementsmodel (systemet engagerer sig, når brugeren nærmer sig)
Sceneslutninger og jordforbindelse: Systemer udleder brugermål fra sceneanalyse (brugeren er formelt klædt på, derfor højst sandsynligt ekstern, og ønsker derfor sandsynligvis registrering), men begrunder denne information gennem dialog. Bemærk også jordforbindelsen af ​​bygningsnummeret.
Opmærksomhedsmodellering og engagement: Systemer overvåger brugerens opmærksomhed (ved hjælp af information fra ansigtsdetektoren og posetracker) og engagerer brugeren i overensstemmelse hermed.
Håndtering af folk, der står i kø: systemet overvåger flere brugere i scenen og anerkender tilstedeværelsen af ​​en ventende bruger med et hurtigt blik (rød prik viser systemets blik) og ved at engagere dem midlertidigt mod slutningen af ​​samtalen
Geninddragelse: samme som ovenfor, kun at når systemet vender tilbage, er den første bruger ikke længere opmærksom. Ved at vide, at en person står i kø, tiltrækker systemet brugerens opmærksomhed og engagerer sig igen ved at sige "Undskyld!"
Dialog med flere deltagere: systemet udleder fra scenen (og bekræfter gennem dialog), at de to deltagere er i en gruppe sammen. Systemet fører derefter en samtale med flere deltagere. Læg mærke til blikmodellen (rød prik), der er information om hvem der er den talende deltager og også visse elementer i diskursstrukturen.
Dialog med flere deltagere med sidesamtale: ligner den tidligere interaktion; til sidst indgår brugerne i en sidesamtale. Systemet forstår, at ytringerne ikke er rettet til det, og efter et stykke tid afbryder de to brugere for at formidle shuttleinformationen. Læg også mærke til interaktionen med berøringsskærmen, der bruges som en reserve i tilfælde, hvor talegenkendelse mislykkes.
Dialog med flere deltagere med en tredje person, der venter: der også illustrerer, hvordan systemet håndterer en ventende deltager, mens det interagerer med en gruppe på to brugere.

Læs mere om dette projekt fra Microsoft Research.

Mere om emnerne: microsoft, forskning, robotter, Situeret interaktion, Smart, Virtual Assistant

Giv en kommentar

Din e-mail adresse vil ikke blive offentliggjort. Krævede felter er markeret *