Исследователи используют движения глаз для управления дронами

Учёные из Исследовательской лаборатории армии США, Нью-Йоркского и Пенсильванского университетов разработали технологию управления дронами с помощью гарнитуры, отслеживающей движения глаз человека, пишет Digital Trends.

Помимо самого дрона, для этого понадобится небольшой вычислительный блок и пара очков Tobii Pro Glasses 2 со встроенной функцией контроля движения глаз в реальном времени. Гарнитура оснащена HD-камерой и блоком инерциальных измерений (IMU). Используя глубокую нейросеть и данные о расположении головы, получаемые с блока, очки распознают, куда обращён взгляд пользователя и насколько далеко от него находится летательный аппарат.

«Мы сможем просто указывать роботу ориентиры в пространстве, не оборудованном другими датчиками. Пользователь контролирует дрон, просто указывая взглядом на какую-либо точку на местности, которая может и не совпадать с тем, куда повёрнута его голова», — объясняют авторы проекта.

По словам исследователей, технология прокладывает путь новым предсказательным интерфейсам и новым способам взаимодействия человека и робота. В частности, они планируют создать комбинированное устройство с системами управления взглядом, голосом и жестами. Разработка может быть полезна для людей с нарушениями зрения или подвижности, а также применяться в решениях для повышения безопасности полётов, когда дронами управляют люди без особого опыта.