В рамках совместного эксперимента с Carnegie Mellon University, американское подразделение крупнейшего российского поисковика в настоящий момент завершает разработку уникального интерфейса, который позволит с помощью жестов работать в социальных сетях и мобильных приложениях.
«При помощи данного приложения пользователь сможет управлять музыкой, видео и другим контентом, задействовав специальную настройку screen saver.
Приложение построено на платформе Mac OS X, для распознавания жестов используется Microsoft Kinect. Для того,чтобы внедрить систему распознавания, студентам Carnegie Mellon University пришлось собрать 1500 записей жестов и использовать их для настройки системы машинного обучения. При этом команда Yandex Labs отвечала за концепцию решения, за то, как должен выглядеть интерфейс приложения с точки зрения дизайна, а также придумала набор управляющих жестов.
Софт был создан в качестве эксперимента и пока не доступен для скачивания. «Результаты работы были весьма впечатляющими, и теперь мы ищем возможность реализовать их в реальных приложениях», - поясняет поисковик.