Microsoft Research bouwt een slimme virtuele assistent met zijn locatie-interactieproject

Pictogram voor leestijd 3 minuut. lezen


Lezers helpen MSpoweruser ondersteunen. We kunnen een commissie krijgen als u via onze links koopt. Tooltip-pictogram

Lees onze openbaarmakingspagina om erachter te komen hoe u MSPoweruser kunt helpen het redactieteam te ondersteunen Lees meer

Microsoft Monica virtuele assistent

Terwijl we allemaal wachten om de digitale assistent van Cortana op Windows Phone 8.1 uit te proberen, werkt Microsoft Research aan virtuele assistenten die uw werk in het echte leven aankunnen, omgaan met andere mensen en meer. Microsoft Research's langetermijndoel van de Gelegen Interactie project is om een ​​nieuwe generatie interactieve systemen mogelijk te maken die interactie en berekening diep verankeren in de natuurlijke stroom van dagelijkse taken, activiteiten en samenwerkingen. Voorbeelden van scenario's zijn mens-robot interactie, e-home, interactieve billboards, systemen die teams van experts monitoren, assisteren en coördineren door middel van complexe taken en procedures, enz.

Zo'n assistent kan coördineren met de assistenten van andere mensen en helpen bij het plannen van sociale afspraken, werkverplichtingen en reizen. Het kan anticiperen op uw behoeften op basis van eerdere activiteiten, zoals waar u heeft gegeten, en afstemmen met bedrijven die speciale aanbiedingen aanbieden. Het kan je helpen een film te selecteren op basis van de films die je vrienden leuk vonden.

"Intelligente, ondersteunende assistenten die mensen helpen en aanvullen, zijn een belangrijk streven in de informatica", zegt Horvitz, "en fundamenteel onderzoek in deze ruimte omvat het verzamelen van gegevens en het observeren van mensen die praten, samenwerken en elkaar helpen, zodat we kunnen leren hoe we het beste kunnen systemen ontwikkelen die in deze rol kunnen dienen.”

De huidige Monica Virtual Assistant van Microsoft heeft de volgende interactiefuncties.

Basis interactie: illustreert een elementaire interactie met één deelnemer met het systeem. Let op de verschillende lagen van scène-analyse (systeem volgt het gezicht en de pose van de gebruiker, leidt informatie af over kleding, verwantschap, taakdoelen, enz.) en het natuurlijke betrokkenheidsmodel (systeem grijpt in wanneer de gebruiker nadert)
Scène-inferenties en aarding: systemen leiden gebruikersdoelen af ​​uit scèneanalyse (gebruiker is formeel gekleed, dus hoogstwaarschijnlijk extern, dus wil waarschijnlijk registratie), maar baseert deze informatie op dialoog. Let ook op de aarding van het gebouwnummer.
Aandacht modellering en betrokkenheid: systemen houden de aandacht van de gebruiker in de gaten (met behulp van informatie van de gezichtsdetector en pose-tracker) en betrekken de gebruiker dienovereenkomstig.
Omgaan met wachtende mensen in de rij: systeem monitort meerdere gebruikers in de scene en herkent de aanwezigheid van een wachtende gebruiker met een snelle blik (rode stip toont de blik van het systeem) en door ze tijdelijk in te schakelen tegen het einde van het gesprek
Re-betrokkenheid: hetzelfde als hierboven, alleen dat wanneer het systeem terugkeert, de eerste gebruiker niet langer oplet. Omdat het systeem weet dat er een persoon in de rij staat te wachten, trekt het de aandacht van de gebruiker en reageert het opnieuw door te zeggen: "Neem me niet kwalijk!"
Dialoogvenster met meerdere deelnemers: systeem leidt uit de scène af (en bevestigt via dialoog) dat de twee deelnemers samen in een groep zitten. Het systeem voert vervolgens een gesprek met meerdere deelnemers. Let op het blikmodel (rode stip) dat informatie geeft door wie de sprekende deelnemer is en ook bepaalde elementen in de discoursstructuur.
Dialoogvenster voor meerdere deelnemers met zijgesprek: vergelijkbaar met de vorige interactie; aan het eind voeren de gebruikers een zijgesprek. Het systeem begrijpt dat de uitingen niet aan hem zijn gericht en onderbreekt na een tijdje de twee gebruikers om de shuttle-informatie over te brengen. Let ook op de interactie via het aanraakscherm die wordt gebruikt als uitwijkmogelijkheid voor gevallen waarin spraakherkenning faalt.
Dialoogvenster met meerdere deelnemers waarbij een derde persoon wacht: dat illustreert ook hoe het systeem omgaat met een wachtende deelnemer tijdens interactie met een groep van twee gebruikers.

Lees meer over dit project van Microsoft Research.

Meer over de onderwerpen: microsoft, onderzoek, robots, Gelegen Interactie, slim, Virtuele assistent

Laat een reactie achter

Uw e-mailadres wordt niet gepubliceerd. Verplichte velden zijn gemarkeerd *