Nadlidská umělá inteligence od Googlu sesadila z trůnu Microsoft Research, více v testu porozumění čtení
2 min. číst
Publikované dne
Sdílejte tento článek
Vylepšete tuto příručku
Přečtěte si naši informační stránku a zjistěte, jak můžete pomoci MSPoweruser udržet redakční tým Dozvědět se více
In článek publikovaný ve středu na OpenReview.net, Google AI a Toyota Technologický institut v Chicagu oznámily, že jejich nová umělá inteligence ALBERT obsadila první místo v několika testech porozumění čtení přirozeného jazyka a obsadila první místo v SQuAD 2.0, GLUE a ve vysokém skóre výkonu RACE.
V benchmarku General Language Understanding Evaluation (GLUE) dosahuje ALBERT skóre 89.4, v benchmarku Stanford Question Answering Dataset (SQUAD) 92.2 a v benchmarku ReAding Comprehension from English Examinations (RACE) 89.4 %.
Pro SQUAD 2.0 je průměrný lidský výkon 89.452.
SQuAD2.0 kombinuje 100,000 1.1 otázek v SQuAD50,000 s více než 2.0 XNUMX novými, nezodpověditelnými otázkami napsanými nepříznivě lidmi z davu, aby vypadaly podobně jako ty, na které lze odpovědět. Aby systém fungoval dobře na SQuADXNUMX, musí nejen odpovídat na otázky, je-li to možné, ale také určit, kdy žádná odpověď není podporována odstavcem, a zdržet se odpovědi.
ALBERT „používá techniky snižování parametrů ke snížení spotřeby paměti a zvýšení rychlosti tréninku BERT,“
„Naše navrhované metody vedou k modelům, které se mnohem lépe škálují ve srovnání s původním BERT. Využíváme také samokontrolovanou ztrátu, která se zaměřuje na modelování koherence mezi větami a ukazuje, že důsledně pomáhá následným úkolům se vstupy s více větami,“ píše se v novinách.
Nejlepší společnosti s umělou inteligencí soupeří o nejlepší pozici v soutěži. Koncem července představil Facebook AI Research RoBERTa, model, který dosahoval nejmodernějších výsledků, a v květnu představili výzkumníci Microsoft AI Multi-Task Deep Neural Network (MT-DNN), model, který dosáhl nejvyšších známek v 7 z 9 benchmarků GLUE.
Tato technologie má zřejmé aplikace pro čtení velkého množství textu na internetu a poskytování ucelených odpovědí, což je zřejmá výhoda pro vyhledávače.
Přes Venturebeat
