Разработка белорусов поможет покупать кофе и управлять видео с помощью жестов

Head of B2B Banuba Вадим Нехай и автор идеи R&D QA lead Вадим Ксендзов рассказали о проекте и перспективах технологии распознавания жестов.

— Коронавирус повлиял на некоторые наши привычки. Например, сейчас стало небезопасным касаться каких-то поверхностей. Думаю, эти опасения сохранятся, когда пандемия пойдет на спад. И у меня возникла идея: а почему бы не использовать нашу технологию трекинга руки для управления интерфейсом в том числе в целях безопасности. Так появился проект с вендинговыми автоматами. Мы решили его реализовать, так как он поможет ограничить распространение вируса, — рассказывает dev.by Вадим Ксендзов.

Как работает система

Программное обеспечение интегрируется в торговый автомат. Например, в кофейный. На интерфейсе автомата показываются пиктограммы. Нужные действия или опции пользователь может выбирать, показывая определённые жесты.

Чтобы запустить такой бесконтактный функционал, в вендинговые автоматы нужно встроить оборудование в виде мини-компьютера с записанным на него софтом. Сейчас Banuba изучает, есть ли в современных торговых автоматах железо, которое потянет нейросеть, чтобы она корректно работала.

Другой вопрос касается стоимости. Производителям торговых автоматов самообслуживания придется встраивать железо с софтом на этапе сборки автоматов.

— Вендинг-машина стоит от 3 до 5 тысяч долларов. Оборудование для установки (плата, контролер камера, на которой можно будет запустить нейронную сеть) стоит около 100 долларов. Поэтому дооснастить вендинговый автомат не будет проблемой, — отмечает Вадим Нехай. — Но помимо взаимодействия с автоматом с помощью жестов технология благодаря камере позволит собирать аналитику. В частности, сколько посетителей повторно что-то купили. Проходимость и вторичная посещаемость — важная метрика для операторов вендинговых автоматов. При этом всё абсолютно приватно, без подробной информации о посетителе, так как технология хранит информацию о посетителе в деперсонализированом виде и анонимной форме.

Banuba собирается провести маркетинговый эксперимент с вендинговыми автоматами, протестировать спрос, изучить требование рынка. Также разработчики хотят узнать у игроков ожидания по стоимости, чтобы понять, «можно ли тут делать бизнес». Если эксперимент будет удачным, компания разработает коммерческое предложение и начнет продвигать решение.  

— Сейчас в мире насчитывается более 20 млн единиц вендинговых аппаратов. Думаю, вендинговая телеметрия и бесконтактные интерфейсы изменят отрасль, потому что эти решения повышают операционную эффективность. Кроме того, это вклад ИТ в создание барьеров между людьми и COVID-19. Пандемия «вдохновила» многие индустрии на прорывные решения через изменение потребительских предпочтений и технологические разработки, — отметил Вадим Нехай.

— У бесконтактной технологии — широкая сфера применения.  Её можно использовать в банкоматах, фотокабинках, можно встроить в телевизор, в смартфон, чтобы управлять умным домом. Производители автомобилей ведут разработки по бесконтактному управлению техникой. Например, включать радио или регулировать громкость с помощью жестов, — отмечает Вадим Ксендзов.

Бесконтактные технологии начинают развиваться и в медицине. Также с помощью технологии можно управлять коммерческими дисплеями на остановках, в торговых центрах. К 2025 году размер рынка технологии управления жестами составит десятки миллиардов долларов, отметили в Banuba.