Wayves nya autonoma AI LINGO-2 kan interagera med passagerare och ta emot beställningar

Lästid ikon 2 min. läsa


Läsare hjälper till att stödja MSpoweruser. Vi kan få en provision om du köper via våra länkar. Verktygstipsikon

Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer

Viktiga anteckningar

  • Wayves LINGO-2 är den första självkörande bilmodellen som både navigerar och förklarar dess handlingar i realtid.
  • Denna vision-language-action-modell (VLAM) använder kameror och språkbehandling för att förstå sin omgivning.
  • Passagerare kan interagera med LINGO-2 genom att ställa frågor eller ge enkla instruktioner.

Wayve har presenterat LINGO-2, en ny vision-language-action-modell (VLAM) designad för användning på allmänna vägar. LINGO-2 integrerar visuell perception, språkbehandling och beslutsfattande i realtid för att navigera i sin omgivning. LINGO-2 fungerar som hjärnan i en självkörande bil. Den använder kameror för att uppfatta sin omgivning (seende) och använder sedan språkbehandling för att förstå scenen.

Till skillnad från sina föregångare har LINGO-2 vad som krävs för att ge realtidsförklaringar till sina handlingar samtidigt som den kontrollerar fordonets rörelser.

”LINGO-2 navigerar runt en buss. Vi kan observera att LINGO-2 kan följa instruktionerna för att antingen hålla tillbaka och "stoppa bakom bussen" eller "accelerera och köra om bussen."

Denna funktion gör att modellen kan berätta om sin beslutsprocess, vilket ökar förtroendet för autonoma fordon. Till exempel kan LINGO-2 belysa orsaker till åtgärder som att sakta ner för fotgängare, vilket främjar en djupare förståelse för dess beteende.

"Vi ber LINGO-2 att beskriva "Hur är vädret?" Det kan korrekt identifiera att vädret sträcker sig från "mycket molnigt, det finns inga tecken på solen" till "soligt" till "vädret är klart med en blå himmel och spridda moln."

Dessutom öppnar LINGO-2 vägar för interaktion mellan passagerare och fordon. Användare kanske kan ge enkla instruktioner med naturligt språk, som att begära en sväng, medan passagerare kan fråga om bilens omgivning, inklusive status för trafikljus eller potentiella faror.

"När vi frågar modellen: "Vilken färg har trafikljusen?" den svarar korrekt: "Trafikljusen är gröna."

Trots sina möjligheter erkänner Wayve vissa begränsningar. Förklaringarnas noggrannhet och modellens förmåga att säkert utföra talade instruktioner i olika verkliga scenarier kräver ytterligare förfining.

LINGO-2:s debut kan vara ett stort steg inom autonom fordonsteknologi. Det erbjuder en framtid där självkörande bilar kan ge tydliga förklaringar till sina handlingar. Autonom körning ger potential för transparens och interaktion med passagerare trots återstående utmaningar.

Snarare här..