Gemini Ultra vs GPT 4: Πώς το Google Gemini κερδίζει το OpenAI GPT-4 στα περισσότερα σημεία αναφοράς

Το νέο γλωσσικό μοντέλο της Google, GeminiΤο κορυφαίο μοντέλο της, Gemini Ultra, έχει ξεπεράσει το GPT-4 του OpenAI σε ολοκληρωμένες δοκιμές αναφοράς. Από εργασίες που βασίζονται σε κείμενο έως πολύπλοκη κατανόηση πολυμέσων, το Gemini επιδεικνύει σταθερά ανώτερη απόδοση.

Απόδοση βάσει κειμένου:

• Συλλογισμός πολλαπλών βημάτων (Big-Bench Hard): Το Gemini Ultra ξεπέρασε το GPT-4, επιδεικνύοντας την ικανότητά του να ακολουθεί περίπλοκες οδηγίες και να επιλύει προβλήματα πολλαπλών βημάτων.
• Κατανόηση ανάγνωσης (DROP): Οι Δίδυμοι διέπρεψαν στην κατανόηση των αποχρώσεων του κειμένου, υπερβαίνοντας το GPT-4 στην ακριβή εξαγωγή πληροφοριών και απαντώντας σε ερωτήσεις με βάση την ανάγνωση αποσπασμάτων.
• Συλλογισμός κοινής λογικής για καθημερινές εργασίες (HellaSwag): Ενώ το GPT-4 ξεπέρασε το Gemini σε αυτήν την κατηγορία, και τα δύο μοντέλα επέδειξαν αξιοσημείωτες ικανότητες στην εφαρμογή της γνώσης της κοινής λογικής σε καθημερινές καταστάσεις.

Επεξεργασία πολυμέσων:

• Εργασίες που σχετίζονται με την εικόνα: Ο Gemini συμμετείχε σε όλα τα τεστ που αφορούσαν την επεξεργασία εικόνας, επιδεικνύοντας ανώτερες ικανότητες στη συλλογιστική σε επίπεδο πανεπιστημίου, στην κατανόηση φυσικής εικόνας, στο OCR, στην κατανόηση εγγράφων, στην ανάλυση infographic και στη μαθηματική λογική σε οπτικά πλαίσια.
• Επεξεργασία βίντεο: Ο Δίδυμος θριάμβευσε σε δύο τεστ που σχετίζονται με βίντεο, διακρίνοντας στη λήψη αγγλικών λεζάντας και στην απάντηση σε ερωτήσεις βίντεο.
• Επεξεργασία ήχου: Το Gemini σάρωσε τις δοκιμές ήχου, επιδεικνύοντας ανώτερη απόδοση αυτόματης μετάφρασης και αναγνώρισης ομιλίας.

Συνολικά, οι Gemini ξεπέρασαν το GPT4 εκτός από την κοινή λογική για καθημερινές εργασίες (HellaSwag).

Η εικόνα είναι ξεκάθαρη: το Gemini Ultra της Google έχει καθιερωθεί ως το κορυφαίο μοντέλο μεγάλων γλωσσών, ξεπερνώντας τον ανταγωνιστή του, το GPT-4, σε διάφορες εργασίες. 

Πληροφορίες εδώ.