Последнее исследование взаимодействия людей Microsoft поразит вас

Время от времени мы видим демонстрацию технологий, которая ясно дает понять, что мы живем в будущем. Одним из таких примеров является технология, разрабатываемая исследователями человеческого взаимодействия в Microsoft Research.

Недавний патент»Трехмерное отслеживание объектов для расширения области отображения” компьютер будет использовать камеру для отслеживания движения пальцев или стилусов в области перед устройством, тем самым позволяя взаимодействовать на большей площади поверхности, чем позволяет само устройство.

Аннотация гласит:

В некоторых примерах поверхность, такая как рабочий стол, перед портативным электронным устройством или вокруг него может использоваться в качестве относительно большой поверхности для взаимодействия с портативным электронным устройством, которое обычно имеет небольшой экран дисплея. Пользователь может писать или рисовать на поверхности с помощью любого объекта, такого как палец, ручка или стилус. Поверхность также может использоваться для имитации частичной или полноразмерной клавиатуры. Использование камеры для обнаружения трехмерного (3D) местоположения или движения объекта может позволить использовать жесты над поверхностью, ввод направления и захват реальных объектов в документ, обрабатываемый или сохраняемый электронным устройством. устройство. Один или несколько объектов могут использоваться для управления элементами, отображаемыми портативным электронным устройством.

Слабость этой технологии, конечно, в том, что можно отслеживать только области непосредственно перед устройством.

Однако старший научный сотрудник Microsoft Research Эяль Офек нашел способ решить эту проблему, поразительно отслеживая отражение вашего пальца в линзах стандартных темных солнцезащитных очков.

Он будет использовать стандартную фронтальную камеру устройства и должен быть откалиброван для кривизны очков, но может даже позволять отслеживать жесты в воздухе.

Офек пишет:

Мы представляем новый подход к расширению пространства ввода вокруг немодифицированных мобильных устройств. Используя встроенные фронтальные камеры немодифицированных портативных устройств, GlassHands оценивает позы и жесты рук по отражениям в солнцезащитных очках, лыжных очках или козырьках. Таким образом, GlassHands создает увеличенное пространство для ввода, конкурирующее с большим сенсорным дисплеем. Мы представляем идею вместе с ее технической концепцией и реализацией. Мы демонстрируем осуществимость и потенциал предлагаемого нами подхода в нескольких сценариях приложений, таких как просмотр карты или рисование с использованием набора методов взаимодействия, которые ранее были возможны только с модифицированными мобильными устройствами или на больших сенсорных дисплеях. Наше исследование подкреплено пользовательским исследованием.

Посмотрите, как эта технология под названием GlassHands демонстрируется в видео ниже.

Мы, конечно, можем никогда не увидеть что-то подобное в реальном продукте, но сам факт того, что это возможно, вызывает дрожь.

Узнайте больше о GlassHands в Microsoft Research здесь.