Microsoft vyvíjí vlastní velký jazykový model s 500 miliardami parametrů

Ikona času čtení 1 min. číst


Čtenáři pomáhají podporovat MSpoweruser. Pokud nakoupíte prostřednictvím našich odkazů, můžeme získat provizi. Ikona popisku

Přečtěte si naši informační stránku a zjistěte, jak můžete pomoci MSPoweruser udržet redakční tým Dozvědět se více

Klíčové poznámky

  • Vytvoření MAI-1 signalizuje odhodlání Microsoftu omezit svou závislost na OpenAI pro modely AI.
Microsoft

Prostřednictvím svého silného partnerství s OpenAI již Microsoft využívá jeden z nejlepších velkých jazykových modelů (LLM) v oboru. Kromě nabídky OpenAI společnost Microsoft Research neustále vydává menší jazykové modely (SLM), aby zůstala konkurenceschopná se startupy s umělou inteligencí a open source projekty. Nyní, Informace Zprávy že Microsoft vytváří svůj vlastní LLM s kódovým označením MAI-1.

zatímco Modelová rodina Phi byl trénován s maximálně 14 miliardami parametrů, MAI-1 využije přibližně 500 miliard parametrů. Tím se MAI-1 přímo vyrovná předním LLM, jako jsou Google Gemini a Amazon Titan.

Mustafa Suleyman, který nedávno připojeno Microsoft stojí v čele úsilí o vývoj MAI-1. Kromě najmutí Mustafy a klíčových členů z Inflection AI Microsoft také podepsal přístup k technologii Inflection. Microsoft tedy možná využívá některé technologie získané od Inflection k vývoji MAI-1.

Tato vývojová zpráva MAI-1 naznačuje, že Microsoft zjevně nechce zcela záviset na OpenAI pro modely AI. Chce mít přístup k nejmodernějším modelům AI OpenAI, vlastním vyvinutým MAI-1, které budou mít schopnosti ekvivalentní nejmodernějším modelům OpenAI a rodině malých modelů Phi pro scénáře na zařízení. .