Microsoft Research створює розумного віртуального помічника зі своїм проектом взаємодії

Значок часу читання 3 хв. читати


Читачі допомагають підтримувати MSpoweruser. Ми можемо отримати комісію, якщо ви купуєте через наші посилання. Значок підказки

Прочитайте нашу сторінку розкриття інформації, щоб дізнатися, як ви можете допомогти MSPoweruser підтримувати редакційну команду Читати далі

Віртуальний помічник Microsoft Monica

Поки ми всі чекаємо, щоб спробувати цифрового помічника Cortana на Windows Phone 8.1, Microsoft Research працює над віртуальними помічниками, які можуть виконувати вашу роботу в реальному житті, спілкуючись з іншими людьми тощо. Довгострокова мета Microsoft Research – Ситуована взаємодія Проект має створити нове покоління інтерактивних систем, які глибоко вбудовують взаємодію та обчислення в природний потік повсякденних завдань, діяльності та співпраці. Приклади сценаріїв включають взаємодію людини і робота, електронний дім, інтерактивні рекламні щити, системи, які контролюють, допомагають та координують команди експертів за допомогою складних завдань і процедур тощо.

Такий помічник міг координувати роботу з помічниками інших людей, допомагаючи планувати соціальні заходи, робочі зобов’язання та подорожі. Він може передбачати ваші потреби на основі минулої діяльності — наприклад, де ви любили обідати — і координувати роботу з компаніями, які пропонують спеціальні пропозиції. Це може допомогти вам вибрати фільм на основі того, який сподобався вашим друзям.

«Розумні помічники, які допомагають і доповнюють людей, є ключовим прагненням комп’ютерної науки, — каже Хорвіц, — і фундаментальні дослідження в цьому просторі включають збір даних та спостереження за людьми, які спілкуються, співпрацюють та допомагають один одному, щоб ми могли навчитися найкращим чином розробити системи, які можуть виконувати цю роль».

Поточний віртуальний помічник Monica від Microsoft має такі функції взаємодії.

Основна взаємодія: ілюструє базову взаємодію з одним учасником із системою. Зверніть увагу на різні рівні аналізу сцени (система відстежує обличчя та позу користувача, виводить інформацію про одяг, приналежність, цілі завдання тощо) та природну модель взаємодії (система залучається, коли користувач наближається)
Висновки сцени та заземлення: система визначає цілі користувача з аналізу сцени (користувач одягнений офіційно, отже, швидше за все, зовнішній, отже, ймовірно, хоче зареєструватися), але обґрунтовує цю інформацію за допомогою діалогу. Зверніть увагу також на заземлення номера будівлі.
Моделювання та залучення уваги: система відстежує увагу користувача (використовуючи інформацію від детектора обличчя та відстеження пози) і відповідно залучає користувача.
Обробка людей, які стоять у черзі: система спостерігає за кількома користувачами на сцені та підтверджує присутність користувача, що очікує, швидким поглядом (червона крапка показує погляд системи) та тимчасово залучаючи їх до кінця розмови
Повторне залучення: так само, як і вище, тільки коли система повертається назад, початковий користувач більше не звертає уваги. Знаючи, що людина стоїть у черзі, система привертає увагу користувача і знову залучається, кажучи «Вибачте!»
Діалог із багатьма учасниками: система робить висновок зі сцени (і підтверджує за допомогою діалогу), що два учасники знаходяться в групі разом. Потім система веде розмову з кількома учасниками. Зверніть увагу на модель погляду (червона крапка), яка є інформацією про те, хто є учасником мовлення, а також певними елементами в структурі дискурсу.
Діалог із кількома учасниками з побічною розмовою: схожий на попередню взаємодію; наприкінці користувачі беруть участь у побічній розмові. Система розуміє, що висловлювання не адресовані їй, і через деякий час перериває двох користувачів, щоб передати інформацію про шаттл. Зверніть також увагу на взаємодію з сенсорним екраном, яка використовується як запасний варіант у випадках, коли розпізнавання мовлення не вдається.
Діалог із кількома учасниками з третьою особою в очікуванні: це також ілюструє, як система обробляє учасника, що очікує, під час взаємодії з групою з двох користувачів.

Детальніше про цей проект читайте від Microsoft Research.

Детальніше про теми: Microsoft, дослідження, роботи, Ситуована взаємодія, розумний, Віртуальний помічник

залишити коментар

Ваша електронна адреса не буде опублікований. Обов'язкові поля позначені * *