Microsoft dient een golf van patenten in op computer mind control

Er is een zekere revolutie geweest in hersen-computerinterfaces als gevolg van nieuwe technieken voor machinaal leren, die nu in staat zijn om: reconstrueer beelden waar je aan denkt vanuit je visuele cortex bijvoorbeeld door direct uw neurologische activiteit af te lezen.

Microsoft is Microsoft en heeft manieren bedacht waarop deze niet-invasieve technieken kunnen worden gebruikt om een ​​computer te besturen. Ze hebben een aantal patenten gepost die dit punt aanpakken, waaronder:

EEN TOEPASSINGSSTAAT WIJZIGEN MET BEHULP VAN NEUROLOGISCHE GEGEVENS

 Computersystemen, methoden en opslagmedia voor het wijzigen van de status van een applicatie door het detecteren van neurologische gebruikersintentiegegevens die verband houden met een bepaalde operatie van een bepaalde applicatiestatus, en het veranderen van de applicatiestatus om uitvoering van de specifieke operatie mogelijk te maken zoals bedoeld door de gebruiker. De applicatiestatus wordt automatisch gewijzigd om af te stemmen op de beoogde operatie, zoals bepaald door ontvangen neurologische gebruikersintentiegegevens, zodat de beoogde operatie wordt uitgevoerd. Sommige uitvoeringsvormen hebben betrekking op een computersysteem dat een toestandsmachine creëert of bijwerkt, door middel van een trainingsproces, om de toestand van een applicatie te veranderen in overeenstemming met gedetecteerde neurologische gegevens.

Het patent suggereert dat door het lezen van de hersenactiviteit van een gebruiker, een applicatie automatisch de beoogde actie van de gebruiker kan uitvoeren.

Iets minder ambitieus suggereert het volgende patent dat gebruikers uw neurologische activiteit kunnen gebruiken als een analoge besturing voor een pc, zoals het regelen van het volume van de pc of het bewegen van een muis.

CONTINU BEWEGINGSBEDIENINGEN DIE WERKEN MET NEUROLOGISCHE GEGEVENS

Computersystemen, methoden en opslagmedia voor het genereren van een continue bewegingsbesturing met gebruikmaking van neurologische gegevens en voor het associëren van de continue bewegingsbesturing met een continue gebruikersinterfacebesturing om analoge besturing van de gebruikersinterfacebesturing mogelijk te maken. De besturing van de gebruikersinterface wordt gemoduleerd door de fysieke bewegingen van een gebruiker binnen een continu bewegingsbereik dat is gekoppeld aan de continue bewegingsbesturing. De continue bewegingsbesturing maakt nauwkeurig afgestelde en continue besturing van de bijbehorende gebruikersinterfacebesturing mogelijk, in tegenstelling tot een besturing die beperkt is tot een klein aantal discrete instellingen.

Microsoft suggereert ook dat de hersenactiviteit eenvoudig de modus van een pc kan veranderen (bijvoorbeeld overschakelen naar tabletmodus of hersencontrolemodus).

DE MODALITEIT VAN EEN COMPUTERAPPARAAT WIJZIGEN OP BASIS VAN DE HERSENACTIVITEIT VAN EEN GEBRUIKER

Hierin worden technologieën beschreven voor het wijzigen van de modaliteit van een computerapparaat op basis van de hersenactiviteit van een gebruiker. Een machine learning classifier wordt getraind met behulp van gegevens die een modaliteit identificeren voor het bedienen van een computerapparaat en gegevens die de hersenactiviteit van een gebruiker van het computerapparaat identificeren. Eenmaal getraind, kan de machine learning classifier een werkingsmodus voor het computerapparaat selecteren op basis van de huidige hersenactiviteit van een gebruiker en, mogelijk, andere biologische gegevens. De rekeninrichting kan dan worden bediend in overeenstemming met de gekozen modaliteit. Een applicatieprogrammeerinterface kan ook een interface blootleggen waardoor een besturingssysteem en applicatieprogramma's die op het computerapparaat worden uitgevoerd, gegevens kunnen verkrijgen die de modaliteit identificeren die is geselecteerd door de machine learning-classificator. Door het gebruik van deze gegevens kunnen het besturingssysteem en de applicatieprogramma's hun werkingsmodus aanpassen om het meest geschikt te zijn voor de huidige mentale toestand van de gebruiker.

Het meest interessante is dat Microsoft suggereert dat hersenactiviteit kan worden gebruikt om items van belang in het gezichtsveld van de gebruiker te onderscheiden bij gebruik van een op het hoofd gemonteerd beeldscherm zoals de Microsoft HoloLens.

EEN GEBRUIKERSINTERFACE WIJZIGEN OP BASIS VAN DE HERSENACTIVITEIT EN BLIK VAN EEN GEBRUIKER

Hierin worden technologieën beschreven voor het wijzigen van een gebruikersinterface ("UI") die wordt geleverd door een computerapparaat op basis van de hersenactiviteit en blik van een gebruiker. Een machine learning classifier wordt getraind met behulp van gegevens die de status van een gebruikersinterface identificeren die wordt geleverd door een computerapparaat, gegevens die de hersenactiviteit van een gebruiker van het computerapparaat identificeren en gegevens die de locatie van de blik van de gebruiker identificeren. Eenmaal getraind, kan de classifier een status selecteren voor de gebruikersinterface die door het computerapparaat wordt geleverd op basis van hersenactiviteit en blik van de gebruiker. De gebruikersinterface kan vervolgens worden geconfigureerd op basis van de geselecteerde status. Een API kan ook een interface blootleggen waarmee een besturingssysteem en programma's gegevens kunnen verkrijgen die de UI-status identificeren die is geselecteerd door de machine learning-classificator. Door het gebruik van deze gegevens kan een gebruikersinterface worden geconfigureerd voor geschiktheid met de huidige mentale toestand en blik van een gebruiker.

Wat hier interessant aan is, is natuurlijk dat een gebruiker al iets op zijn hoofd zou dragen, dat ook zijn neurologische signalen zou kunnen lezen via EEG of een andere modaliteit.

De uitvinders van Microsoft lijken afkomstig uit het Surface- en HoloLens-team, hoewel een van hen is vertrokken naar PerceptivePixel.io.

De patenten zijn pas in mei 2017 ingediend en een paar dagen geleden gepubliceerd. Het is niet bekend of Microsoft van plan is deze ideeën te gebruiken als ondersteunende technologie of dat dit iets is dat ze voor iedereen willen gebruiken, maar dit geeft ons een voorproefje van de toekomst waarin handsfree besturing niet langer alleen spraak betekent.