Microsoft Research rakentaa älykästä virtuaaliavustajaa vuorovaikutusprojektillaan

Lukuajan kuvake 3 min. lukea


Lukijat auttavat tukemaan MSpoweruseria. Saatamme saada palkkion, jos ostat linkkien kautta. Työkaluvihje-kuvake

Lue ilmoitussivumme saadaksesi selville, kuinka voit auttaa MSPoweruseria ylläpitämään toimitustiimiä Lue lisää

Microsoft Monica Virtual Assistant

Odotamme kaikki Cortana Digital Assistantin kokeilemista Windows Phone 8.1:ssä, mutta Microsoft Research kehittää virtuaalisia avustajia, jotka voivat hoitaa työsi tosielämässä muiden ihmisten kanssa ja paljon muuta. Microsoft Researchin pitkän aikavälin tavoitteena Situoitu vuorovaikutus -projektin tarkoituksena on mahdollistaa uuden sukupolven interaktiivisia järjestelmiä, jotka upottavat vuorovaikutuksen ja laskennan syvälle arjen tehtävien, toimintojen ja yhteistyön luonnolliseen virtaukseen. Esimerkkejä skenaarioista ovat ihmisen ja robotin välinen vuorovaikutus, sähköinen koti, interaktiiviset mainostaulut, järjestelmät, jotka valvovat, avustavat ja koordinoivat asiantuntijaryhmiä monimutkaisten tehtävien ja menettelyjen kautta jne.

Tällainen avustaja voisi koordinoida muiden ihmisten avustajien kanssa ja auttaa aikatauluttamaan sosiaalisia sitoumuksia, työsitoumuksia ja matkoja. Se voi ennakoida tarpeitasi aiempien toimintojen perusteella – kuten missä olet nauttinut ruokailusta – ja koordinoida erikoistarjouksia tarjoavien yritysten kanssa. Se voi auttaa sinua valitsemaan elokuvan sen perusteella, mistä ystäväsi pitivät.

"Älykkäät, tukevat avustajat, jotka auttavat ja täydentävät ihmisiä, ovat tietojenkäsittelytieteen keskeinen tavoite", Horvitz sanoo, "ja tämän alueen perustutkimukseen kuuluu tietojen kerääminen ja ihmisten tarkkaileminen keskustelemassa, yhteistyössä ja toistensa avustamisessa, jotta voimme oppia kehittää järjestelmiä, jotka voivat palvella tätä roolia."

Microsoftin nykyisessä Monica Virtual -avustajassa on seuraavat vuorovaikutusominaisuudet.

Perusvuorovaikutus: havainnollistaa yhden osallistujan perusvuorovaikutusta järjestelmän kanssa. Huomaa kohtausanalyysin eri tasot (järjestelmä seuraa käyttäjän kasvoja ja asentoa, päättelee tietoja pukeutumisesta, kuulumisesta, tehtävän tavoitteista jne.) ja luonnollinen sitoutumismalli (järjestelmä sitoutuu käyttäjän lähestyessä)
Kohtauspäätelmät ja maadoitus: järjestelmät päättelevät käyttäjän tavoitteet kohtausanalyysin perusteella (käyttäjä on pukeutunut muodollisesti, joten todennäköisesti ulkoinen, joten hän todennäköisesti haluaa rekisteröityä), mutta perustelee nämä tiedot dialogin avulla. Huomioi myös rakennusnumeron maadoitus.
Huomiomallinnus ja sitoutuminen: järjestelmät tarkkailevat käyttäjän huomiota (käyttämällä kasvontunnistimen ja asennonseurantalaitteen tietoja) ja aktivoivat käyttäjän sen mukaisesti.
Jonossa odottavien ihmisten käsittely: järjestelmä tarkkailee useita paikalla olevia käyttäjiä ja tunnistaa odottavan käyttäjän läsnäolon nopealla vilkaisulla (punainen piste näyttää järjestelmän katseen) ja kytkemällä heidät väliaikaisesti keskustelun loppua kohti
Uudelleen sitoutuminen: sama kuin yllä, vain että kun järjestelmä kääntyy takaisin, alkuperäinen käyttäjä ei enää kiinnitä huomiota. Tietäen, että henkilö odottaa jonossa, järjestelmä kiinnittää käyttäjän huomion ja aktivoituu uudelleen sanomalla "Anteeksi!"
Monen osallistujan dialogi: järjestelmä päättelee kohtauksen perusteella (ja vahvistaa dialogin kautta), että kaksi osallistujaa ovat yhdessä ryhmässä. Järjestelmä jatkaa sitten usean osallistujan keskustelua. Huomioi katsemalli (punainen piste), joka on tietoa puhuvan osallistujan mukaan ja myös tiettyjä diskurssirakenteen elementtejä.
Monen osallistujan dialogi sivukeskustelulla: samanlainen kuin edellinen vuorovaikutus; lopussa käyttäjät osallistuvat sivukeskusteluun. Järjestelmä ymmärtää, että puheita ei ole osoitettu sille ja keskeyttää hetken kuluttua kaksi käyttäjää välittämään sukkulan tiedot. Huomaa myös kosketusnäytön vuorovaikutus, jota käytetään varapuheenjohtajana tapauksissa, joissa puheentunnistus epäonnistuu.
Monen osallistujan dialogi kolmannen odottavan henkilön kanssa: joka myös havainnollistaa, kuinka järjestelmä käsittelee odottavaa osallistujaa ollessaan vuorovaikutuksessa kahden käyttäjän ryhmän kanssa.

Lue lisää tästä projektista osoitteesta Microsoft Research.

Lisää aiheista: microsoft, tutkimus, robotit, Situoitu vuorovaikutus, fiksu, Virtual Assistant

Jätä vastaus

Sähköpostiosoitettasi ei julkaista. Pakolliset kentät on merkitty *