ปรับปรุง Google Assistant: 'Look and Talk' วลีที่เร็วขึ้น การจดจำโทนสีผิวที่ดีขึ้น และการพัฒนาในอนาคต

เราเห็นการปรับปรุงมากมายใน Google Assistant เมื่อเร็ว ๆ นี้ หนึ่งในสิ่งที่ดีที่สุดที่จะเน้นคือความเป็นทางการของบริษัท การประกาศ ของคุณลักษณะใหม่ของแอปพลิเคชันซอฟต์แวร์ที่เรียกว่า “Look and Talk” ระหว่างประเด็นสำคัญของ Google I/O อย่างไรก็ตาม ยังมีรายละเอียดอื่นๆ ที่ควรค่าแก่การกล่าวถึงและชื่นชม โดยเฉพาะอย่างยิ่งหากคุณพึ่งพาผู้ช่วยในกิจกรรมประจำวันของคุณเป็นอย่างมาก ซึ่งรวมถึงการปรับปรุงของ Google Assistant ในแง่ของการจดจำโทนสีผิวและการขยายคลังวลีด่วน

เมื่อเร็วๆ นี้ ฟีเจอร์ Look and talk ใหม่ที่ Google นำเสนอนั้นเปิดตัวในวงกว้างสำหรับทุกคน Nest Hub Max ผู้ใช้ในสหรัฐอเมริกา แนวคิดหลักที่อยู่เบื้องหลังนั้นเรียบง่าย: ทำให้การโต้ตอบของผู้ใช้กับอุปกรณ์ตรงไปตรงมายิ่งขึ้น และที่สำคัญที่สุดคือ เป็นธรรมชาติมากขึ้น วิธีนี้ช่วยลดความยุ่งยากในการส่งคำสั่งไปยัง Google Assitant โดยนำวลีสัญลักษณ์ "Ok Google" ออกทุกครั้งที่ผู้ใช้ต้องเปิดใช้งาน Nest Hub Max คุณลักษณะนี้ทำงานผ่านการประสานงานของเทคโนโลยีต่างๆ ที่ Google ผสานรวมไว้ โดยเฉพาะอย่างยิ่ง Look and Talk ใช้ความสามารถ Face Match และ Voice Match ของระบบ ช่วยในการกำหนดว่าจะตอบสนองเมื่อใด

เมื่อใช้ฟีเจอร์ Look and Talk ผู้ใช้เพียงแค่ต้องยืนห่างจาก Nest Hub Max ไม่เกิน 5 ฟุต จ้องมองและสั่งการ Google ช่วย. “สมมติว่าฉันต้องแก้ไขอ่างในครัวที่รั่ว” ผู้ช่วยรองประธาน Google Sissie Hsiao กล่าว พยายามอธิบายว่า Look and Talk ทำงานอย่างไรในบล็อกโพสต์ “เมื่อฉันเดินเข้าไปในห้อง ฉันสามารถมอง Nest Hub Max แล้วพูดว่า 'แสดงช่างประปาที่อยู่ใกล้ฉัน' ได้โดยไม่ต้องพูดว่า 'Ok Google' ก่อน”

Hsiao ยังเสริมอีกว่าวิดีโอของการโต้ตอบที่ Assistant วิเคราะห์นั้น “ประมวลผลบนอุปกรณ์ทั้งหมด” รับรองว่าข้อมูลของคุณจะไม่ถูกแชร์กับ Google หรือแอปของบุคคลที่สามอื่นๆ Hsiao ยังเน้นว่าคุณลักษณะใหม่นี้เคารพในความเป็นส่วนตัว ดังนั้นคุณจึงมีตัวเลือกที่จะเข้าร่วมหรือเลิกใช้งานได้ตลอดเวลา มันถูกปิดใช้งานในขั้นต้น และคุณต้องเปิดใช้งานผ่านแอป Google Home เพียงไปที่การตั้งค่าอุปกรณ์ของ Nest Hub Max จากนั้นไปที่ "การจดจำและการแชร์" จากนั้นไปที่เมนู "การจับคู่ใบหน้า" และเปิดการตั้งค่า

“เบื้องหลังการถ่ายทำมีหลายสิ่งหลายอย่างที่ต้องจดจำว่าคุณกำลังสบตากับอุปกรณ์ของคุณจริง ๆ หรือไม่ แทนที่จะเพียงชำเลืองมอง” Hsiao กล่าว “อันที่จริง โมเดลการเรียนรู้ของเครื่องต้องใช้ 100 โมเดลในการประมวลผลสัญญาณมากกว่า XNUMX สัญญาณจากทั้งกล้องและไมโครโฟน — เช่น ความใกล้ชิด การวางศีรษะ ทิศทางการจ้องมอง การเคลื่อนไหวของริมฝีปาก การรับรู้บริบท และการจัดหมวดหมู่เจตนา — ทั้งหมดนี้ในแบบเรียลไทม์”

ในทางกลับกัน เนื่องจาก Look and Talk ทำงานผ่าน Face Match จึงเป็นสิ่งสำคัญที่จะต้องทราบว่า Google ได้ตรวจสอบให้แน่ใจว่าได้ทำให้คุณลักษณะนี้มีประสิทธิภาพต่อผู้ใช้ที่หลากหลาย โดยรวมเทคโนโลยี Real Tone ที่เปิดตัวเมื่อปีที่แล้ว ซึ่งช่วยให้กล้อง Nest Hub Max ทำงานได้อย่างมีประสิทธิภาพในโทนสีผิวต่างๆ นอกจากนี้ บริษัทสัญญาว่าจะผลักดันสิ่งต่าง ๆ ต่อไปโดยใช้ "มาตราส่วนโทนสีผิวของพระ" เพื่อช่วยให้เครื่องเข้าใจภาพได้อย่างมีประสิทธิภาพมากขึ้น

นอกจากนี้ ด้วยความหวังว่าจะลดความจำเป็นในการพูดวลี "Ok Google" ให้น้อยลง Google ก็รวมสิ่งต่างๆ มากขึ้นด้วย ประโยคสั้นๆ ใน Nest Hub Max ซึ่งทำให้สิ่งต่างๆ ง่ายขึ้นสำหรับผู้ใช้โดยไม่ต้องจ้องที่กล้องของอุปกรณ์หรือยืนอยู่ข้างหน้าอุปกรณ์ เช่นเดียวกับ Look and Talk คุณสามารถปิดและเปิด Voice Match ที่จัดการการทำงานของวลีด่วนได้

ในขณะที่การปรับปรุงที่เปิดเผยโดย Google ทำให้ผู้ช่วยครั้งนี้มีความพึงพอใจมากขึ้น Google กล่าวว่ายังคงมีแผนเพิ่มเติมสำหรับซอฟต์แวร์ในอนาคต รวมถึงการให้รูปแบบคำพูดและภาษาที่ดีขึ้นเพื่อ "เข้าใจความแตกต่างของคำพูดของมนุษย์" ณ ตอนนี้ บริษัทกำลังทำงานเกี่ยวกับชิป Tensor ที่ออกแบบเป็นพิเศษเพื่อให้ Assistant จัดการงานการเรียนรู้ของเครื่องในอุปกรณ์ด้วยวิธีที่รวดเร็วที่สุด เมื่อประสบความสำเร็จ Google กล่าวว่าเทคโนโลยีที่น่าสนใจนี้จะช่วยให้ Assistant เข้าใจคำพูดของมนุษย์ได้ดีขึ้น แม้ว่าจะมีสารเติมแต่งที่ไม่จำเป็น (เช่น "อืม" หรือ "อ่า") และหยุดชั่วคราวเมื่อมีคนพูด