Microsoft совершенствует жестовые интерфейсы

30 июня 2016 г., 16:45

Стали известны новые подробности о работе, ведущейся Microsoft Research (MSR), над продвинутыми жестовыми интерфейсами. Несмотря на то, что эти технологии в ближайшее время вряд ли покинут стены лабораторий, похоже что редмондская компания добилась в них серьёзного прогресса.

Недавно продемонстрированная MSR жестовая платформа следующего поколения Handpose позволяет отслеживать положение рук с беспрецедентной точностью, а очень незначительная загрузка процессора позволяет реализовать её на десктопах, в планшетах и шлемах виртуальной реальности.

Handpose знаменует «смену парадигмы» в подходе к распознаванию жестов. Её разработчики полностью отказались от сопоставления жестов с заранее запрограммированными шаблонами. Вместо этого система включает в себя так называемый «жестовый словарь» и разбивает руку на составляющие её независимые элементы, которые соответствуют фонемам в произносимом слове.

Видеокамеры Kinect, сейчас способные распознавать только широкие взмахи рук, смогут использовать эти пальцевые фонемы, чтобы идентифицировать тонкие действия, такие как захват миниатюрных объектов или печать на голографической клавиатуре, висящей в воздухе.

Помимо демонстрационного видео Microsoft представила статьи по этой технологии на нескольких академических конференциях в текущем году. Углублённому разбору компонентов и задач Handpose посвящено сообщение в официальном блоге Next компании. Там же обсуждается и ещё один экспериментальный жестовый проект MSR, носящий служебное название Project Prague.

Цель Project Prague над которым работают в израильской лаборатории Microsoft Advanced Technologies Lab — создание средств для общения с компьютером с помощью привычных повседневных жестов, воспринимаемых недорогой коммерческой 3D-камерой и распознаваемых обучаемыми алгоритмами. Например, выйти из сеанса связи Skype можно будет положив воображаемую трубку, а заблокировать экран компьютера — изобразив поворот ключа в замочной скважине.

Шеф Advanced Technologies Lab, Ади Диамант (Adi Diamant), видит огромный потенциал в использовании жестов не только в играх и развлечениях, но и в повседневной работе с презентациями, электронными таблицами, электронной почтой или веб-браузером.