Google Assistantin parantaminen: "Katso ja puhu", lisää nopeita lauseita, parannettu ihonvärin tunnistus ja tuleva kehitys

Google Assistantissa on viime aikoina tapahtunut paljon parannuksia. Yksi parhaimmista asioista on yhtiön virkamies ilmoitus ohjelmistosovelluksen uudesta ominaisuudesta nimeltä "Look and Talk" Google I/O -puheenvuoron aikana. Siitä huolimatta on myös muita mainitsemisen ja arvostamisen arvoisia yksityiskohtia, varsinkin jos luotat suuresti Assistantiin päivittäisissä toimissasi. Näitä ovat Google Assistantin parannus ihonvärien tunnistamisessa ja sen pikalausekirjaston laajentaminen.

Googlen äskettäin esittelemä uusi Look and talk -ominaisuus on otettu laajalti käyttöön Nest Hub Max käyttäjiä Yhdysvalloissa. Sen perusidea on yksinkertainen: tehdä käyttäjien vuorovaikutuksesta laitteen kanssa selkeämpää ja ennen kaikkea luonnollisempaa. Tämä yksinkertaistaa komentojen toimittamista Google Assistantille poistamalla vihjelauseen "Hei Google" aina, kun henkilön on aktivoitava Nest Hub Max. Ominaisuus toimii koordinoimalla eri Googlen integroimia teknologioita. Tarkemmin sanottuna Look and Talk käyttää järjestelmän Face Match- ja Voice Match -ominaisuuksia, mikä auttaa sitä määrittämään, milloin vastata.

Look and Talk -ominaisuuden avulla käyttäjän tarvitsee vain seistä enintään 5 metrin päässä Nest Hub Maxista, tuijottaa ja käskeä google Assistant. "Sanotaan, että minun on korjattava vuotava tiskiallasni", sanoo Google Assistant Vice President Sissie Hsiao yrittäessään selittää, miten Look and Talk toimii blogiviestissä. "Kun kävelen huoneeseen, voin vain katsoa Nest Hub Maxiani ja sanoa "Näytä putkimiehet lähelläni" ilman, että minun tarvitsee ensin sanoa "Hei Google".

Hsiao lisää myös, että video Assistantin analysoimista vuorovaikutuksista on "käsitelty kokonaan laitteella", mikä varmistaa, että tietojasi ei jaeta Googlen tai muiden kolmannen osapuolen sovellusten kanssa. Hsiao korostaa myös, että uusi ominaisuus kunnioittaa yksityisyyttä, joten voit ottaa sen käyttöön tai poistaa sen käytöstä milloin tahansa. Se on aluksi deaktivoitu, ja sinun on kytkettävä se päälle Google Home -sovelluksen kautta. Siirry vain Nest Hub Maxin laiteasetuksiin, sitten kohtaan Tunnistus ja jakaminen ja sitten Face Match -valikko ja ota asetus käyttöön.

"Kuissien takana tapahtuu paljon sen tunnistamiseksi, muodostatko todella katsekontaktin laitteeseen sen sijaan, että katsoisit sitä ohimennen", Hsiao huomauttaa. "Itse asiassa tarvitaan kuusi koneoppimismallia käsittelemään yli 100 signaalia sekä kamerasta että mikrofonista – kuten läheisyys, pään suunta, katseen suunta, huulten liike, kontekstitietoisuus ja aikomusten luokittelu – kaikki reaaliajassa."

Toisaalta, koska Look and Talk toimii Face Matchin kautta, on tärkeää huomata, että Google teki siitä tehokkaan monille käyttäjille sisällyttämällä viime vuonna lanseeraamansa Real Tone -tekniikan. Tämän ansiosta Nest Hub Max -kamera toimii tehokkaasti eri ihosävyillä. Lisäksi yritys lupaa viedä asioita eteenpäin hyödyntämällä "Monk Skin Tone Scalea" auttaakseen konetta ymmärtämään kuvia tehokkaammin.

Lisäksi, toivoen vähentävänsä tarvetta sanoa "Hei Google" enemmän, Google sisällyttää myös enemmän nopeita lauseita Nest Hub Maxissa. Tämä tekee asioista yksinkertaisempia käyttäjille ilman, että heidän tarvitsee tuijottaa laitteen kameraa tai seisoa sen edessä. Kuten Look and Talk, myös nopeita lauseita hallitseva Voice Match voidaan kytkeä pois päältä ja päälle.

Vaikka Googlen paljastamat parannukset tekevät Assistantista tällä kertaa tyydyttävämmän, Google sanoo, että sillä on vielä enemmän suunnitelmia ohjelmiston suhteen tulevaisuudessa. Siihen sisältyy parempien puhe- ja kielimallien antaminen "ihmisen puheen vivahteiden ymmärtämiseksi". Toistaiseksi yritys työskentelee räätälöidyn Tensor-sirun parissa, jotta Assistant pystyy käsittelemään koneen oppimistehtäviä laitteella nopeimmalla mahdollisella tavalla. Menestyessään Google sanoo, että tämä lupaava tekniikka auttaa Assistantia ymmärtämään paremmin ihmisen puhetta, vaikka siinä olisikin tarpeettomia täyteaineita (kuten "uhm" tai "ahh") ja pysähtyy, kun joku puhuu.