Gemini Ultra vs GPT 4: Kuinka Google Gemini voittaa OpenAI GPT-4:n useimmissa vertailuissa

Googlen uusi kielimalli, GeminiYrityksen huippumalli Gemini Ultra on ylittänyt OpenAI:n GPT-4:n kattavissa vertailutesteissä. Tekstipohjaisista tehtävistä monimutkaiseen multimedian ymmärtämiseen Gemini osoitti jatkuvasti ylivoimaista suorituskykyä.

Tekstipohjainen suorituskyky:

• Monivaiheinen päättely (Big-Bench Hard): Gemini Ultra ohitti GPT-4:n ja osoitti sen kykyä seurata monimutkaisia ​​ohjeita ja ratkaista monivaiheisia ongelmia.
• Luetun ymmärtäminen (DROP): Kaksoset ymmärsivät erinomaisesti tekstin vivahteita, ylittivät GPT-4:n tiedon tarkassa poimimisessa ja kysymyksiin vastaamisessa lukukohtien perusteella.
• Terve järki arjen tehtäviin (HellaSwag): Vaikka GPT-4 päihitti Kaksoset tässä kategoriassa, molemmat mallit osoittivat merkittäviä kykyjä soveltaa maalaisjärkeä jokapäiväisiin tilanteisiin.

Multimedian käsittely:

• Kuvaan liittyvät tehtävät: Gemini läpäisi kaikki kuvankäsittelyyn liittyvät testit osoittaen ylivertaisia ​​kykyjä korkeakoulutason päättelyssä, luonnollisessa kuvan ymmärtämisessä, tekstintunnistusta, dokumenttien ymmärtämisessä, infografiikka-analyysissä ja matemaattisessa päättelyssä visuaalisissa yhteyksissä.
• Videon käsittely: Gemini voitti kahdessa videoon liittyvässä testissä, loistaen englanninkielisessä tekstityksessä ja videokysymyksiin vastaamisessa.
• Äänenkäsittely: Gemini pyyhkäisi äänitestit ja osoitti erinomaisen automaattisen puheen käännös- ja tunnistussuorituskyvyn.

Kaiken kaikkiaan Gemini suoritti GPT4:n paitsi tervejärkisen päättelyn arjen tehtäviin (HellaSwag).

Kuva on selvä: Googlen Gemini Ultra on vakiinnuttanut asemansa johtavana suurena kielimallina, joka ylittää kilpailijansa GPT-4:n useissa tehtävissä. 

Lisätietoja tätä.