GPT4 spelar DOOM, glömmer bort fiender i spelet och tar gärna en pistol och börjar spränga
2 min. läsa
Publicerad den
Dela den här artikeln
Förbättra den här guiden
Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer
Viktiga anteckningar
-
GPT-4V, en multimodal variant av GPT-4, kan spela DOOM utan föregående träning.
-
Systemet använder skärmdumpar för att förstå speltillståndet och en agentmodell för att fatta beslut.
-
GPT-4 kämpar med objektets beständighet och förklarar dess handlingar, och tillhandahåller ibland felaktig information.
En färsk forskningsartikel av Adrian de Wynter, en forskare vid University of York i England, har utforskat kapaciteten hos GPT4 för att spela det klassiska förstapersonsskjutspelet DOOM.
Papperet med titeln "Kommer GPT-4 att köra DOOM?” tar reda på om GPT4 kan spela spelet utan föregående träning. För att testa detta designade de Wynter ett system som använder GPT-4V, en multimodal variant av GPT4 som kan acceptera bilder som input, för att fånga skärmdumpar från spelmotorn och returnera strukturerade beskrivningar av spelets tillstånd.
Denna information matas sedan in i en agentmodell som fattar beslut baserat på den visuella inmatningen och tidigare historik, och översätter dess svar till tangentkommandon som spelmotorn kan förstå.
Med enklare ord tar systemet skärmdumpar av spelet och använder dem för att ta reda på vad som händer. Sedan använder den en annan del av systemet, kallad agentmodellen, för att fatta beslut om vad som ska göras härnäst i spelet. Agentmodellen förvandlar sina beslut till kommandon som spelet kan förstå, som vilka tangenter som ska tryckas på.
Även om systemet visade lovande när det spelade DOOM, avslöjade det också vissa begränsningar. En av huvudfrågorna var
- GPT4:s brist på objektbeständighet betyder att den glömmer bort fiender i spelet när de går utanför skärmen.
- Dessutom kämpade GPT4 för att resonera och ge tydliga förklaringar till sina handlingar, ofta med felaktig information.
Trots dessa begränsningar anser de Wynter att det är anmärkningsvärt att GPT4 kan spela DOOM utan föregående utbildning.
