Microsoft pakt de kroon door 4 AI-klassementen te overtreffen

Hoewel Microsoft niets zo flitsends heeft gedaan als Google's Deepmind die Go verslaat, doen de AI-onderzoekers van Microsoft het nog steeds erg goed.

In een blogpost schepte Steve Guggenheimer, Corporate Vice President van Developer Platform, op over de prestaties van Microsoft in het veld, waarbij hij opmerkte dat het bedrijf de leider is in vier onafhankelijke AI-benchmarks met oplossingen die zeer geschikt zouden zijn voor het aanpakken van complexe business intelligence-uitdagingen en het leveren van actiegerichte inzichten voor zakelijke klanten.

De 4 klassementen omvatten:

1. Ploeg 1.1 (Stanford Question Answer Dataset): De SQUAD-tests vragen een AI om een ​​document te lezen en vragen hierover te beantwoorden. In deze machine begrijpend lezen (MRC)-test kan de AI van Microsoft nu zowel vragen als een mens lezen en beantwoorden.
2. Stanford SQuAD 2.0 Begrijpend lezen-test: in juni 2018 werd SQuAD versie 2.0 uitgebracht om "de ontwikkeling van begrijpend lezen-systemen die weten wat ze niet weten aan te moedigen." Microsoft bezet momenteel de #1-positie op SQuAD 2.0 en drie van de top vijf overall rankings, terwijl het tegelijkertijd de #1-positie op SQuAD 1.1 handhaaft.
3. Salesforce WikiSQL-uitdaging: Dit maakt gebruik van een grote crowd-sourced dataset op basis van Wikipedia, genaamd WikiSQL, met de AI die nodig is om natuurlijke taalvragen uit de dataset te beantwoorden. Meestal geleid door Salesforce, nam Microsoft eerder deze maand de toppositie op het Salesforce-klassement in met een nieuwe aanpak, IncSQL genaamd. De significante verbetering (van 81.4% naar 87.1%) in testuitvoering is het resultaat van samenwerking tussen wetenschappers in Microsoft Research en in de Business Application Group.
4. Allen Institute for AI's Reasoning Challenge (ARC): De ARC-uitdaging voor het beantwoorden van vragen biedt een dataset van 7,787 meerkeuzevragen met open domein op basisschoolniveau die zijn ontworpen om benaderingen bij het beantwoorden van vragen te testen. De beste aanpak, essentiële term bewust - retriever reader (ET-RR) is gezamenlijk ontwikkeld door het Microsoft Dynamics 365 + AI-onderzoeksteam in samenwerking met stagiaires van de Universiteit van San Diego. De #3-positie op het leaderboard is een apart onderzoeksteam bestaande uit onderzoekers van Sun Yat-Sen University en Microsoft Research Asia.

Microsoft merkt op dat technologieën die zijn ontwikkeld door deel te nemen aan deze uitdagingen al hun weg vinden naar producten die al in oktober worden verzonden.

Lees meer over de tests en de prestaties van Microsoft in Steve's blogpost hier.