Guided Vision в Gemini Live: голосовые описания с камеры для незрячих и слабовидящих

Guided Vision — функция Gemini Live, которая использует камеру телефона для голосового описания того, что попало в кадр. Она разработана с участием незрячих и слабовидящих пользователей и предназначена для помощи в получении информации об окружении, но не восстанавливает зрение и не заменяет специализированные средства.

Какие задачи решает Guided Vision

Пользователь может попросить найти предмет на полке, описать одежду или прочитать видимый текст. Во время диалога система может подсказывать, как направить камеру, чтобы объект лучше попал в кадр, и давать ориентировочные описания сцены или предмета.

Описание остаётся результатом работы модели и может содержать ошибки: даже уверенный голосовой ответ не означает гарантированную точность распознавания.

Ограничения и случаи, где полагаться не следует

Guided Vision не является медицинским устройством, средством безопасного передвижения или заменой белой трости. Она не предназначена для навигации, обнаружения препятствий или принятия решений, от которых зависит безопасность человека.

Распознавание текста на упаковке не даёт гарантии отсутствия аллергенов или других важных сведений: неполный кадр, мелкий шрифт или ошибка чтения могут изменить смысл информации. Для решений, влияющих на здоровье и безопасность, одного описания камеры с ИИ недостаточно.

Как включить Guided Vision

  1. Откройте приложение Gemini и перейдите в меню профиля.
  2. В настройках найдите пункт, отвечающий за использование Guided Vision в режиме Live; наименование может отличаться в зависимости от языка интерфейса.
  3. Включите функцию, начните разговор в режиме Live и предоставьте приложению доступ к камере при необходимости.

Доступность пункта настроек зависит от версии приложения и условий распространения функции. Если опция отсутствует, это не обязательно означает неисправность устройства. Подсказки приложения и системные настройки специальных возможностей помогут подобрать подходящий способ запуска Guided Vision.