Co je GPT-3 a jak to ovlivní vaši současnou práci

Domů » AI

Ikona času čtení 3 min. číst

Ikona kalendáře Aktualizováno dne

by Surur Davids 

aktualizováno

Sdílejte tento článek

Čtenáři pomáhají podporovat MSpoweruser. Pokud nakoupíte prostřednictvím našich odkazů, můžeme získat provizi. Ikona popisku

Přečtěte si naši informační stránku a zjistěte, jak můžete pomoci MSPoweruser udržet redakční tým Více informací

GPT-3

GPT je zkratka pro Generative Pre-training Transformer (GPT), jazykový model napsaný Alecem Radfordem a publikovaný v roce 2018 OpenAI, laboratoří Elona Muskse pro výzkum umělé inteligence. Využívá generativní model jazyka (kde se dvě neuronové sítě navzájem zdokonalují konkurencí) a je schopen získat znalosti o světě a zpracovávat dlouhodobé závislosti předtrénováním na různorodých souborech psaného materiálu s dlouhými úseky souvislého textu.

GPT-2 (Generative Pretrained Transformer 2) byl oznámen v únoru 2019 a jedná se o jazykový model transformátoru bez dozoru vyškolený na 8 milionech dokumentů pro celkem 40 GB textu z článků sdílených prostřednictvím příspěvků na Redditu. Elon Musk se skvěle zdráhal ji vydat, protože se obával, že by mohla být použita k spamování sociálních sítí falešnými zprávami.

V květnu 2020 OpenAI oznámila GPT-3 (Generative Pretrained Transformer 3), model, který obsahuje o dva řády více parametrů než GPT-2 (175 miliard vs. 1.5 miliardy parametrů) a který nabízí dramatické zlepšení oproti GPT-2.

Po zadání jakékoli textové výzvy GPT-3 vrátí dokončení textu a pokusí se odpovídat vzoru, který jste mu zadali. Můžete jej „naprogramovat“ tak, že mu ukážete jen několik příkladů toho, co byste chtěli, aby dělal, a poskytne vám kompletní článek nebo příběh, jako je text níže, napsaný výhradně GPT-3.

Obraz

GPT-3 dosahuje vysokého výkonu u mnoha datových sad NLP, včetně úloh překladu, odpovídání na otázky a zavírání, a také u několika úloh, které vyžadují uvažování za běhu nebo přizpůsobení domény, jako je dekódování slov, pomocí nového slova v věta nebo provádění 3místné aritmetiky. GPT-3 může generovat vzorky zpravodajských článků, které lidští hodnotitelé jen obtížně odlišují od článků napsaných lidmi.

Poslední aplikace vždy dělala starosti OpenAI. GPT-3 je v současné době k dispozici jako otevřená beta, přičemž se očekává, že nakonec bude k dispozici placená soukromá beta. OpenAI uvedla, že ukončí přístup k API pro zjevně škodlivé případy použití, jako je obtěžování, spam, radikalizace nebo astroturfing.

Zatímco nejzjevněji ohroženou populací jsou ti, kteří vytvářejí písemnou práci, jako jsou scénáristé, vývojáři AI již našli překvapivé aplikace, jako je použití GPT-3 k psaní kódu.

Sharif Shameem například napsal generátor rozložení, kde popíšete prostým textem, co chcete, a model vygeneruje příslušný kód.

Jordan Singer podobně vytvořil plugin Figma, který umožňuje vytvářet aplikace pomocí prostého textového popisu.

Může být dokonce použit k diagnostice astmatu a předepisování léků.

Jiné aplikace jsou jako vyhledávač nebo orákulum a lze je dokonce použít k vysvětlení a rozšíření obtížných pojmů.

I když se zdá, že tento přístup může vést přímo k obecné umělé inteligenci, která dokáže chápat, uvažovat a konverzovat jako člověk, OpenAI varuje, že mohou narazit na zásadní problémy se škálováním, protože GPT-3 vyžaduje několik tisíc petaflop/s-dnů výpočtu. ve srovnání s desítkami petaflop/s-dny pro plnou GPT-2. Zdá se, že i když jsme blíž, průlom, který způsobí, že všechna naše zaměstnání budou zastaralá, je stále ještě daleko.

Přečtěte si více o GPT-3 na GitHubu zde.

Surur Davids

Surur Davids Štít

Expert na chytré telefony

Surur Davids je zakladatelem WMPoweruser, který se později stal MSPoweruser.com. Je to odborník na chytré telefony s více než desetiletými zkušenostmi.

Uživatelské fórum

0 zprávy