Голосовой помощник Gemini Live теперь видит экран и камеру в реальном времени
Компания начала внедрение новых функций на базе алгоритма Project Astra в голосовой помощник Gemini Live. Ассистент получил доступ к экрану устройства и камере смартфона для анализа происходящего в реальном времени.
Новые функции Gemini Live, основанные на технологии Project Astra, начали появляться у некоторых пользователей Android. Один из пользователей заметил появление новой кнопки «Поделиться экраном с Live» рядом с опцией «Спросить об экране» в обновленном интерфейсе Gemini Live. Сейчас доступно только совместное использование всего содержимого экрана без возможности выбора отдельных приложений.
A short demo of Project Astra (Share screen with Live)
byu/Kien_PS inBard
Одновременно с этим пользователи получают доступ к возможностям алгоритма Project Astra, который активирует камеру устройства для взаимодействия с окружающей средой в режиме реального времени. Для начала работы с этой функцией необходимо запустить Gemini Live и активировать камеру; в правом нижнем углу экрана появляется кнопка для переключения на фронтальную камеру.
Читать на dev.by