Новий автономний AI LINGO-2 від Wayve може взаємодіяти з пасажирами та приймати замовлення
2 хв. читати
Опубліковано
Поділитися цією статтею
Удосконалити цей посібник
Прочитайте нашу сторінку розкриття інформації, щоб дізнатися, як ви можете допомогти MSPoweruser підтримувати редакційну команду Читати далі
Основні нотатки
- LINGO-2 від Wayve — це перша модель безпілотного автомобіля, яка одночасно керує і пояснює свої дії в режимі реального часу.
- Ця модель бачення-мова-дія (VLAM) використовує камери та мовну обробку, щоб зрозуміти навколишнє середовище.
- Пасажири можуть взаємодіяти з LINGO-2, ставлячи запитання або надаючи прості інструкції.
Wayve представила LINGO-2, нову модель vision-language-action (VLAM), розроблену для використання на дорогах загального користування. LINGO-2 об’єднує візуальне сприйняття, обробку мови та можливості прийняття рішень у реальному часі для навігації навколо. LINGO-2 діє як мозок безпілотного автомобіля. Він використовує камери, щоб сприймати навколишнє (зір), а потім використовує мовну обробку, щоб зрозуміти сцену.
На відміну від своїх попередників, LINGO-2 має все необхідне для надання пояснень своїх дій у режимі реального часу, одночасно контролюючи рух транспортного засобу.
«ЛІНГО-2 орієнтується в автобусі. Ми можемо помітити, що LINGO-2 може слідувати інструкціям або затриматись і «зупинитися позаду автобуса», або «прискоритися та обігнати автобус».
Ця функція дозволяє моделі розповідати про процес прийняття рішень, підвищуючи довіру до автономних транспортних засобів. Наприклад, LINGO-2 може з’ясовувати причини таких дій, як зниження швидкості для пішоходів, сприяючи глибшому розумінню його поведінки.
«Ми просимо LINGO-2 описати «Яка погода?» Він може правильно визначити, що погода коливається від «дуже хмарно, немає жодних ознак сонця» до «сонячно» до «погода ясна з блакитним небом і розрізненими хмарами».
Крім того, LINGO-2 відкриває можливості для взаємодії між пасажирами та транспортним засобом. Користувачі можуть видавати прості інструкції за допомогою природної мови, наприклад запитувати поворот, у той час як пасажири можуть запитувати про оточення автомобіля, включаючи стан світлофора чи потенційну небезпеку.
«Коли ми запитуємо модель: «Якого кольору світлофор?» він правильно відповідає: «Світлофор зелений».
Незважаючи на свої можливості, Wayve визнає певні обмеження. Точність пояснень і здатність моделі безпечно виконувати голосові інструкції в різноманітних сценаріях реального світу потребують подальшого вдосконалення.
Дебют LINGO-2 може стати великим кроком у розвитку технологій автономних автомобілів. Він пропонує майбутнє, де безпілотні автомобілі зможуть чітко пояснювати свої дії. Автономне водіння створює потенціал для прозорості та взаємодії з пасажирами, незважаючи на проблеми, що залишаються.
більше тут.
