改進 Google 助理：“看和說”、更快速的短語、改進的膚色識別和未來發展

最近，我們看到 Google Assistant 有了很大的改進。 最值得強調的事情之一是公司的官方 公告 在其 Google I/O 主題演講中，該軟件應用程序的新功能稱為“Look and Talk”。 儘管如此，還有其他細節值得一提和欣賞，特別是如果您在日常活動中非常依賴助手。 其中包括 Google Assitant 在識別膚色和擴展其快速短語庫方面的改進。

最近，谷歌推出的新 Look and talk 功能被廣泛推廣到所有人 Nest Hub Max 美國的用戶。 它背後的主要思想很簡單：讓用戶與設備的交互更直接，最重要的是，更自然。 每次有人需要激活 Nest Hub Max 時，都會刪除提示短語“Hey Google”，從而簡化了向 Google 助理髮送命令的過程。 該功能通過谷歌集成的不同技術的協調工作。 具體來說，Look and Talk 使用系統的面部匹配和語音匹配功能，幫助它確定何時響應。

使用 Look and Talk 功能，用戶只需站在距離 Nest Hub Max 不超過 5 英尺的地方，凝視並指揮 谷歌助理. “假設我需要修理漏水的廚房水槽，”Google 助理副總裁 Sissie Hsiao 說，試圖在博客文章中解釋 Look and Talk 的工作原理。 “當我走進房間時，我可以看著我的 Nest Hub Max 並說‘顯示我附近的管道工’——而不必先說‘嘿谷歌’。”

Hsiao 還補充說，助手分析的交互視頻“完全在設備上處理”，確保您的數據不會與穀歌或任何其他第三方應用程序共享。 Hsiao 還強調，新功能尊重隱私，因此您可以隨時選擇加入或退出。 它最初是停用的，您需要通過 Google Home 應用程序將其打開。 只需轉到 Nest Hub Max 的設備設置，然後轉到“識別和共享”，然後轉到“面部匹配”菜單，然後打開設置。

Hsiao 指出：“在幕後進行了很多工作，以識別您是否真的在與您的設備進行眼神交流，而不僅僅是瞥一眼。” “事實上，需要六個機器學習模型來實時處理來自攝像頭和麥克風的 100 多個信號——比如接近度、頭部方向、注視方向、嘴唇運動、上下文感知和意圖分類——所有這些都是實時的。”

另一方面，鑑於 Look and Talk 通過 Face Match 工作，重要的是要注意谷歌通過包括去年推出的 Real Tone 技術確保它對各種用戶有效。 這使得 Nest Hub Max 相機可以在不同的膚色上高效工作。 此外，該公司承諾通過利用“僧侶膚色量表”進一步推動事情，以幫助機器更有效地理解圖像。

此外，為了減少說“嘿谷歌”提示短語的需要，谷歌還包括更多 快速短語 在 Nest Hub Max 中。 這使用戶不必盯著設備的攝像頭或站在它前面，事情就變得更簡單了。 與 Look and Talk 一樣，管理快速短語工作的 Voice Match 也可以關閉和打開。

雖然谷歌透露的改進讓這次的智能助理更加令人滿意，但谷歌表示它未來還有更多的軟件計劃。 它包括為其提供更好的語音和語言模型，以“理解人類語音的細微差別”。 截至目前，該公司正在開發一種定制設計的 Tensor 芯片，以使 Assistant 能夠以最快的方式處理設備上的機器學習任務。 一旦成功，谷歌表示，這項有前途的技術將幫助智能助理更好地理解人類語音，即使存在不必要的填充物（如“嗯”或“啊”）並在有人說話時暫停。