Google запустила в Gemini Live функцию для голосового описания увиденного через камеру
Google запустила функцию Guided Vision в Gemini Live на совместимых устройствах Android. Она использует искусственный интеллект для голосового описания в реальном времени объектов, на которые пользователь направляет камеру смартфона. Как сообщает The Verge, инструмент предназначен в частности для незрячих людей и пользователей с нарушениями зрения.
Описание текста и предметов
С помощью Guided Vision можно прочитать мелкий текст, получить описание окружающего пространства, найти или идентифицировать находящиеся рядом предметы, а также узнать детали о конкретном объекте. Пользователи могут задавать Gemini дополнительные вопросы о том, что видят через камеру. Например, после поиска товара можно попросить ассистента назвать срок годности, указанный на упаковке.
Больше актуальных новостей — в Telegram-канале UA.News Telegram.
Если объект, о котором спрашивает пользователь, не попал в кадр, Gemini должна предоставлять аудиоподсказки, чтобы помочь правильно навести камеру. Функция также доступна через Google TalkBack, а на устройствах с Android 9 и более новыми версиями ее можно добавить в ярлыки специальных возможностей в настройках.
Ограничения функции
Google предостерегает от использования Guided Vision для навигации, безопасного передвижения или обнаружения препятствий. Компания также подчеркивает, что инструмент не должен заменять трость или другие средства мобильности. The Verge сравнивает новую возможность с функцией VoiceOver Live Recognition, которую Apple добавила в iPhone и Vision Pro.
