Microsoft подає низку патентів на комп'ютерний контроль розуму

В інтерфейсах мозок-комп’ютер відбулася певна революція завдяки новим методам машинного навчання, які тепер можуть реконструювати образи, які ви думаєте, зі своєї зорової кори наприклад, безпосередньо читаючи вашу неврологічну активність.

Microsoft, будучи Microsoft, подумала про те, як ці неінвазивні методи можна використовувати для керування комп’ютером. Вони опублікували ряд патентів, що стосуються цього питання, зокрема:

ЗМІНА СТАНУ ЗАЯВИ ЗА ВИКОРИСТАННЯМ НЕВРОЛОГІЧНИХ ДАНИХ

 Комп'ютерні системи, методи та носії даних для зміни стану програми шляхом виявлення неврологічних даних про наміри користувача, пов'язаних з конкретною операцією в конкретному стані програми, і зміни стану програми, щоб уможливити виконання конкретної операції відповідно до наміру користувач. Стан програми автоматично змінюється, щоб узгоджуватися з передбачуваною операцією, що визначається отриманими неврологічними даними про наміри користувача, щоб виконувати передбачувану операцію. Деякі варіанти здійснення стосуються комп'ютерної системи, яка створює або оновлює кінцевий автомат за допомогою процесу навчання, щоб змінити стан програми відповідно до виявлених неврологічних даних.

Патент передбачає, що, зчитуючи активність мозку користувача, програма може автоматично виконувати заплановані дії користувача.

Трохи менш амбітно наступний патент пропонує користувачам використовувати вашу неврологічну активність як аналоговий контроль для ПК, наприклад, керування гучністю ПК або переміщення миші.

БЕЗПЕРЕВНЕ УПРАВЛІННЯ РУХОМ, МОЖЕ ДЕРЖАТИ ЗА ВИКОРИСТАННЯМ НЕВРОЛОГІЧНИХ ДАНИХ

Комп'ютерні системи, методи та носії даних для генерування безперервного керування рухом з використанням неврологічних даних і для зв'язування безперервного керування рухом із безперервним керуванням інтерфейсом користувача для забезпечення аналогового керування керуванням інтерфейсом користувача. Керування інтерфейсом користувача модулюється через фізичні рухи користувача в межах безперервного діапазону руху, пов'язаного з безперервним керуванням рухом. Безперервне керування рухом забезпечує точне та безперервне керування відповідним керуванням інтерфейсом користувача, на відміну від керування, обмеженого невеликою кількістю дискретних налаштувань.

Microsoft також припускає, що активність мозку може просто змінити режим роботи ПК (наприклад, перейти в режим планшета або режим керування мозком).

ЗМІНА МОДАЛЬНОСТІ КОМП'ЮТЕРНОГО ПРИСТРОЮ НА ОСНОВІ ДІЯЛЬНОСТІ МОЗКУ КОРИСТУВАЧА

Тут описані технології для зміни модальності комп'ютерного пристрою на основі активності мозку користувача. Класифікатор машинного навчання навчається з використанням даних, які ідентифікують спосіб роботи з обчислювальним пристроєм, і даних, що ідентифікують активність мозку користувача комп’ютерного пристрою. Після навчання класифікатор машинного навчання може вибрати режим роботи для обчислювального пристрою на основі поточної активності мозку користувача та, можливо, інших біологічних даних. Обчислювальний пристрій потім може працювати відповідно до вибраного способу. Інтерфейс прикладного програмування також може надавати інтерфейс, за допомогою якого операційна система та прикладні програми, що виконуються на комп’ютерному пристрої, можуть отримувати дані, що ідентифікують модальність, вибрану класифікатором машинного навчання. Використовуючи ці дані, операційна система та прикладні програми можуть змінити свій режим роботи, щоб він найбільш відповідав поточному психічному стану користувача.

Найцікавіше, що Microsoft припускає, що активність мозку можна використовувати для розпізнавання цікавих предметів у полі зору користувача при використанні дисплея, встановленого на голові, такого як Microsoft HoloLens.

МОДИФІКАЦІЯ ІНТЕРФЕЙСУ КОРИСТУВАЧА ЗА ОСНОВИ ДІЯЛЬНОСТІ МОЗКУ КОРИСТУВАЧА ТА ПОГЛЯДУ

Тут описані технології для модифікації інтерфейсу користувача (“UI”), наданого комп’ютерним пристроєм, на основі активності мозку та погляду користувача. Класифікатор машинного навчання навчається за допомогою даних, які ідентифікують стан інтерфейсу користувача, наданого комп’ютерним пристроєм, даних, що ідентифікують мозкову активність користувача комп’ютерного пристрою, і даних, що ідентифікують розташування погляду користувача. Після навчання класифікатор може вибрати стан для інтерфейсу користувача, наданого комп’ютерним пристроєм, на основі активності мозку та погляду користувача. Потім інтерфейс користувача можна налаштувати на основі вибраного стану. API також може надавати інтерфейс, за допомогою якого операційна система та програми можуть отримувати дані, що ідентифікують стан UI, вибраний класифікатором машинного навчання. Використовуючи ці дані, інтерфейс користувача можна налаштувати відповідно до поточного психічного стану та погляду користувача.

Що цікаво в цьому, звичайно, так це те, що користувач вже носив би щось на голові, що також могло б зчитувати його неврологічні сигнали за допомогою ЕЕГ або іншим способом.

Винахідники з Microsoft, схоже, походять із команди Surface та HoloLens, хоча один із них перейшов до PerceptivePixel.io.

Патенти були подані ще в травні 2017 року та опубліковані кілька днів тому. Невідомо, чи збирається Microsoft використовувати ці ідеї як допоміжну технологію, чи це те, що вони призначені для всіх, але це дає нам смак майбутнього, де керування без рук більше не означає лише голос.