В Live-режиме Алиса AI помогает людям с особенностями зрения ориентироваться в пространстве и решать повседневные задачи. Теперь в режиме реального времени можно спрашивать у нейросети, что находится вокруг – с какой стороны расположен вход в нужный магазин, какое сообщение отображается на дисплее стиральной машины и т. д. Спросив Алису AI, незрячие люди смогут узнать, есть ли повреждения на полученной посылке, что за лекарство стоит на столе или какие продукты есть в холодильнике и что можно приготовить из них на ужин.
Чтобы воспользоваться функцией, необходимо:
➽ запустить Live-режим,
➽ навести камеру смартфона на нужную область,
➽ задать голосом интересующий вопрос.
Анатолий Попко, менеджер проектов по цифровой доступности в Яндексе:
«В Яндексе мы постоянно работаем над тем, чтобы передовые технологии были доступны для всех и меняли жизнь людей к лучшему. Камера смартфона, усиленная искусственным интеллектом, – это инструмент, благодаря которому незрячему человеку становится проще самостоятельно ориентироваться в пространстве и не зависеть от посторонней помощи в бытовых ситуациях».
В основе Live-режима – мультимодальная нейросеть Яндекса Alice AI VLM. Она позволяет Алисе AI распознавать объекты, попавшие в объектив камеры смартфона, и описывать их пользователю:
✿ общаться с Алисой AI в Live-режиме можно голосом, уточняя детали в ходе диалога;
✿ история общения сохраняется в чате;
✿ включить функцию можно, выбрав ее в меню приложения или сказав, например, «Алиса, запусти Live-режим».
Live-режим доступен бесплатно в мобильном приложении «Алиса AI» для устройств на Android и iOS. Запустить функцию голосом могут пока только пользователи Android, в ближайшее время такая возможность появится и у владельцев iOS.
