Poboljšanje Google asistenta: "Gledaj i govori", više brzih fraza, poboljšano prepoznavanje tona kože i budući razvoj

U posljednje vrijeme vidimo velika poboljšanja u Google asistentu. Jedna od najboljih stvari za istaknuti je službena osoba tvrtke objava nove značajke softverske aplikacije pod nazivom "Pogledaj i pričaj" tijekom svog Google I/O uvodnog izlaganja. Ipak, postoje i drugi detalji vrijedni spomena i poštovanja, pogotovo ako se u svojim svakodnevnim aktivnostima uvelike oslanjate na Asistenta. To uključuje poboljšanje Google Assitanta u smislu prepoznavanja nijansi kože i proširenje njegove biblioteke brzih fraza.

Nedavno je nova značajka Look and talk koju je uveo Google široko dostupna svima Hub gnijezda Max korisnika u SAD-u. Glavna ideja iza toga je jednostavna: učinite interakciju korisnika s uređajem jednostavnijom i, prije svega, prirodnijom. To pojednostavljuje isporuku naredbi Google Assitantu uklanjanjem fraze "Hey Google" svaki put kada osoba treba aktivirati Nest Hub Max. Značajka funkcionira kroz koordinaciju različitih tehnologija koje je integrirao Google. Točnije, Look and Talk koristi Face Match i Voice Match mogućnosti sustava, pomažući mu da odredi kada treba odgovoriti.

Koristeći značajku Look and Talk, korisnik samo treba stajati ne više od 5 stopa od Nest Hub Maxa, buljiti i zapovijedati Google pomoćnik. “Recimo da moram popraviti moj kuhinjski sudoper koji curi,” kaže potpredsjednica Google Assistant Sissie Hsiao, pokušavajući objasniti kako Look and Talk funkcionira u postu na blogu. "Dok ulazim u sobu, mogu samo pogledati svoj Nest Hub Max i reći 'Pokaži vodoinstalatere u mojoj blizini' - bez potrebe da prvo kažem 'Hej Google'."

Hsiao također dodaje da se videozapis interakcija koje analizira Asistent "u potpunosti obrađuje na uređaju", čime se osigurava da se vaši podaci ne dijele s Googleom ili bilo kojom drugom aplikacijom treće strane. Hsiao također naglašava da nova značajka poštuje privatnost, tako da imate mogućnost uključiti se ili isključiti bilo kada. U početku je deaktiviran, a morate ga uključiti putem aplikacije Google Home. Samo idite na postavku uređaja Nest Hub Max, zatim na "Prepoznavanje i dijeljenje", a zatim na izbornik "Face match" i uključite postavku.

“Puno se događa iza kulisa kako bi se prepoznalo da li zapravo uspostavljate kontakt očima sa svojim uređajem, a ne da ga samo usputno pogledate”, napominje Hsiao. "Zapravo, potrebno je šest modela strojnog učenja za obradu više od 100 signala iz kamere i mikrofona - poput blizine, orijentacije glave, smjera pogleda, pokreta usana, svijesti o kontekstu i klasifikacije namjere - sve u stvarnom vremenu."

S druge strane, s obzirom na to da Look and Talk funkcionira putem Face Matcha, važno je napomenuti da se Google pobrinuo da bude učinkovit za različite korisnike uključivši tehnologiju Real Tone koju je lansirao prošle godine. To omogućuje kameri Nest Hub Max učinkovit rad na različitim tonovima kože. Osim toga, tvrtka obećava da će pomaknuti stvari dalje korištenjem "Skale tona kože monaha" kako bi pomogla stroju da učinkovitije razumije slike.

Štoviše, u nadi da će umanjiti potrebu da se rečeni izraz "Hey Google" više izgovara, Google također uključuje više brze fraze u Nest Hub Maxu. To korisnicima čini stvari jednostavnijim bez potrebe da bulje u kameru uređaja ili da stoje ispred nje. Poput Look and Talk, Voice Match koji upravlja radom brzih fraza također se može isključiti i uključiti.

Iako poboljšanja koja je otkrio Google čine Asistenta ovaj put zadovoljnijim, Google kaže da još uvijek ima više planova za softver u budućnosti. To uključuje davanje boljih govornih i jezičnih modela kako bi “razumijeli nijanse ljudskog govora”. Od sada, tvrtka radi na prilagođenom Tensor čipu kako bi se Asistentu omogućio da na najbrži mogući način rješava zadatke strojnog učenja na uređaju. Kada bude uspješan, Google kaže da će ova obećavajuća tehnologija pomoći Asistentu da bolje razumije ljudski govor čak i uz prisutnost nepotrebnih punila (poput "uhm" ili "ahh") i pauziranja kada netko govori.