Новый автономный AI LINGO-2 от Wayve может взаимодействовать с пассажирами и принимать заказы
2 минута. читать
Опубликовано
Поделиться этой статьей
Улучшите это руководство
Прочтите нашу страницу раскрытия информации, чтобы узнать, как вы можете помочь MSPoweruser поддержать редакционную команду. Читать далее
Ключевые заметки
- LINGO-2 от Wayve — первая модель беспилотного автомобиля, способная одновременно ориентироваться и объяснять свои действия в режиме реального времени.
- Эта модель «видение-язык-действие» (VLAM) использует камеры и языковую обработку для понимания своего окружения.
- Пассажиры могут взаимодействовать с LINGO-2, задавая вопросы или предоставляя простые инструкции.
Wayve представила LINGO-2, новую модель «видение-язык-действие» (VLAM), предназначенную для использования на дорогах общего пользования. LINGO-2 объединяет визуальное восприятие, языковую обработку и возможности принятия решений в реальном времени для навигации по окружающей среде. ЛИНГО-2 действует как мозг беспилотного автомобиля. Он использует камеры для восприятия окружения (зрение), а затем использует языковую обработку для понимания сцены.
В отличие от своих предшественников, LINGO-2 имеет все необходимое, чтобы в режиме реального времени объяснять свои действия, одновременно контролируя движения транспортного средства.
«ЛИНГО-2 перемещается вокруг автобуса. Мы можем наблюдать, что ЛИНГО-2 может следовать инструкциям: либо сдержаться и «остановиться позади автобуса», либо «ускориться и обогнать автобус».
Эта функция позволяет модели рассказывать о процессе принятия решений, повышая доверие к автономным транспортным средствам. Например, LINGO-2 может объяснить причины таких действий, как замедление движения пешеходов, способствуя более глубокому пониманию их поведения.
«Мы просим ЛИНГО-2 описать: «Какая погода?» Он может правильно определить, что погода варьируется от «очень облачно, нет никаких признаков солнца» до «солнечно» и «ясная погода с голубым небом и рассеянными облаками».
Более того, LINGO-2 открывает возможности для взаимодействия пассажиров и автомобиля. Пользователи могут давать простые инструкции на естественном языке, например, просить повернуть, а пассажиры могут спрашивать о том, где находится автомобиль, в том числе о состоянии светофоров или потенциальных опасностях.
«Когда мы спрашиваем модель: «Какого цвета светофоры?» он правильно отвечает: «Светофоры зеленые».
Несмотря на свои возможности, Wayve признает определенные ограничения. Точность объяснений и способность модели безопасно выполнять устные инструкции в различных сценариях реального мира требуют дальнейшего совершенствования.
Дебют ЛИНГО-2 может стать большим шагом в технологии беспилотных транспортных средств. Оно предлагает будущее, в котором беспилотные автомобили смогут давать четкие объяснения своим действиям. Автономное вождение открывает потенциал для прозрачности и взаимодействия с пассажирами, несмотря на сохраняющиеся проблемы.
Больше здесь.
