Команда Яндекса адаптировала Live-режим в мобильном приложении «Алиса AI» для помощи незрячим и слабовидящим пользователям. Функция, позволяющая в реальном времени получать информацию об окружающем мире через камеру смартфона, теперь ориентирована на самостоятельное решение повседневных задач и доступна бесплатно на устройствах Android и iOS.

Принцип работы основан на мультимодальной нейросети Alice AI VLM, способной распознавать объекты и описывать их. Пользователю достаточно навести камеру на интересующий предмет и голосом задать вопрос. В ответ нейросеть предоставит нужную информацию: например, подскажет, с какой стороны находится вход в магазин, что написано на дисплее бытовой техники или какие продукты лежат в холодильнике и что из них можно приготовить.

Диалог с «Алисой AI» происходит в голосовом формате, а история запросов сохраняется в чате. По словам менеджера по цифровой доступности Яндекса Анатолия Попко, технология служит инструментом для самостоятельной ориентации в пространстве и выполнения бытовых действий без посторонней помощи.

Активировать Live-режим можно через меню приложения либо голосовой командой. На момент запуска голосовое включение доступно только пользователям Android; в компании пообещали добавить такую возможность для устройств на iOS в ближайшее время. Обновление было представлено на фестивале Young Con в Москве.

Источник

Новые
Softline «обожглась» на военном Linux и списала 469 млн руб.
Обратно к списку
Старее Новая отслеживающая метка поможет решить проблему краж грузов

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *