Microsoft Research bygger en smart virtuell assistent med sitt lokaliserte interaksjonsprosjekt

Ikon for lesetid 3 min. lese


Lesere hjelper til med å støtte MSpoweruser. Vi kan få provisjon hvis du kjøper gjennom lenkene våre. Verktøytipsikon

Les vår avsløringsside for å finne ut hvordan du kan hjelpe MSPoweruser opprettholde redaksjonen Les mer

Microsoft Monica Virtual Assistant

Mens vi alle venter på å prøve Cortana digital assistent på Windows Phone 8.1, jobber Microsoft Research med virtuelle assistenter som kan håndtere arbeidet ditt i det virkelige liv med andre mennesker og mer. Microsoft Researchs langsiktige mål om Lokalisert interaksjon prosjektet er å muliggjøre en ny generasjon interaktive systemer som integrerer interaksjon og beregning dypt inn i den naturlige flyten av hverdagslige oppgaver, aktiviteter og samarbeid. Eksempler på scenarier inkluderer menneske-robot-interaksjon, e-hjem, interaktive reklametavler, systemer som overvåker, assisterer og koordinerer team av eksperter gjennom komplekse oppgaver og prosedyrer, etc.

En slik assistent kan koordinere med assistentene til andre mennesker, hjelpe til med å planlegge sosiale engasjementer, arbeidsforpliktelser og reiser. Den kan forutse dine behov basert på tidligere aktiviteter – for eksempel hvor du har likt å spise – og koordinere med virksomheter som tilbyr spesialtilbud. Det kan hjelpe deg å velge en film basert på hvilke vennene dine likte.

"Intelligente, støttende assistenter som hjelper og utfyller mennesker er en nøkkelambisjon innen informatikk," sier Horvitz, "og grunnleggende forskning på dette området inkluderer å samle data og observere folk som snakker, samarbeider og hjelper hverandre slik at vi kan lære hvordan vi best kan utvikle systemer som kan tjene i denne rollen."

Microsofts nåværende Monica Virtual-assistent har følgende interaksjonsfunksjoner.

Grunnleggende samhandling: illustrerer en grunnleggende enkeltdeltakers interaksjon med systemet. Legg merke til de ulike lagene med sceneanalyse (systemet sporer brukerens ansikt og positur, utleder informasjon om klær, tilknytning, oppgavemål osv.) og den naturlige engasjementsmodellen (systemet engasjerer seg når brukeren nærmer seg)
Sceneslutninger og jording: systemer utleder brukermål fra sceneanalyse (brukeren er formelt kledd, derfor mest sannsynlig ekstern, og ønsker derfor sannsynligvis registrering), men begrunner denne informasjonen gjennom dialog. Legg også merke til jordingen av byggenummeret.
Oppmerksomhetsmodellering og engasjement: systemer overvåker brukerens oppmerksomhet (ved hjelp av informasjon fra ansiktsdetektoren og poseringssporingen) og engasjerer brukeren deretter.
Håndtere folk som står i kø: systemet overvåker flere brukere i scenen og erkjenner tilstedeværelsen av en ventende bruker med et raskt blikk (rød prikk viser systemets blikk) og ved å engasjere dem midlertidig mot slutten av samtalen
Reengasjement: samme som ovenfor, bare at når systemet snur tilbake, er den første brukeren ikke lenger oppmerksom. Når du vet at en person står i kø, trekker systemet brukerens oppmerksomhet og engasjerer seg på nytt ved å si "Unnskyld!"
Dialog med flere deltakere: systemet slutter fra scenen (og bekrefter gjennom dialog) at de to deltakerne er i en gruppe sammen. Systemet fører deretter en samtale med flere deltakere. Legg merke til blikkmodellen (rød prikk) som er informasjon om hvem som er den talende deltakeren og også enkelte elementer i diskursstrukturen.
Dialog med flere deltakere med sidesamtale: ligner på forrige interaksjon; på slutten deltar brukerne i en sidesamtale. Systemet forstår at ytringene ikke er adressert til det, og etter en stund avbryter de to brukerne for å formidle skyttelinformasjonen. Legg også merke til interaksjonen med berøringsskjermen som brukes som en reserve for tilfeller der talegjenkjenning mislykkes.
Dialog med flere deltakere med en tredje person som venter: som også illustrerer hvordan systemet håndterer en ventende deltaker mens han samhandler med en gruppe på to brukere.

Les mer om dette prosjektet fra Microsoft Research.

Mer om temaene: microsoft, forskning, roboter, Lokalisert interaksjon, Smart, Virtual Assistant

Legg igjen en kommentar

Din e-postadresse vil ikke bli publisert. Obligatoriske felt er merket *