Google'ın insanüstü yapay zekası, okuduğunu anlama testinde Microsoft Research'ü tahtından indirdi

In Çarşamba günü OpenReview.net'te yayınlanan bir makale, Google AI ve Chicago Toyota Teknoloji Enstitüsü, yeni AI'ları ALBERT'in çeşitli doğal dil okuduğunu anlama testlerinde en üst sırada yer aldığını ve SQuAD 2.0, GLUE ve yüksek RACE performans puanında ilk sırada yer aldığını duyurdu.

ALBERT, Genel Dil Anlama Değerlendirmesi (GLUE) karşılaştırmasında 89.4, Stanford Soru Yanıtlama Veri Kümesi karşılaştırmasında (SQUAD), 92.2 ve İngilizce Sınavlarından (RACE) Okuduğunu Anlama (RACE) karşılaştırmasında %89.4 puan almaktadır.

SQUAD 2.0 için ortalama insan performansı 89.452'dir.

SQuAD2.0, SQuAD100,000'deki 1.1 soruyu, yanıtlanabilir sorulara benzer görünmek için kitle çalışanları tarafından düşmanca yazılmış 50,000'den fazla yeni, yanıtlanamaz soruyla birleştirir. SQuAD2.0'da başarılı olmak için, sistemler yalnızca mümkün olduğunda soruları yanıtlamakla kalmamalı, aynı zamanda paragraf tarafından hiçbir yanıtın desteklenmediğini belirlemeli ve yanıtlamaktan kaçınmalıdır.

ALBERT "bellek tüketimini azaltmak ve BERT'nin eğitim hızını artırmak için parametre azaltma tekniklerini kullanır"

"Önerilen yöntemlerimiz, orijinal BERT'ye kıyasla çok daha iyi ölçeklenen modellere yol açıyor. Ayrıca, cümleler arası tutarlılığı modellemeye odaklanan kendi kendini denetleyen bir kayıp kullanıyoruz ve bunun sürekli olarak çoklu cümle girdileriyle aşağı akış görevlerine yardımcı olduğunu gösteriyoruz, ”diyor makale.

En iyi AI şirketleri bir yarışmada en üst sıra için yarışıyor. Temmuz ayı sonlarında, Facebook AI Research, en gelişmiş sonuçlara ulaşan bir model olan RoBERTa'yı tanıttı ve Mayıs ayında, Microsoft AI araştırmacıları, en yüksek notları alan bir model olan Çok Görevli Derin Sinir Ağı'nı (MT-DNN) tanıttı. 7 GLUE kriterinden 9'si.

Teknolojinin internetteki hacimli metinleri okumak ve tutarlı cevaplar sağlamak için bariz uygulamaları var, bu arama motorları için bariz bir fayda.

Üzerinden VentureBeat