Google запустила в Gemini Live функцію для голосового опису побаченого через камеру

Google запустила функцію Guided Vision у Gemini Live на сумісних Android-пристроях. Вона використовує штучний інтелект для голосового опису в реальному часі об’єктів, на які користувач спрямовує камеру смартфона. Як повідомляє The Verge, інструмент призначений зокрема для незрячих людей і користувачів із порушеннями зору.

Опис тексту та предметів

За допомогою Guided Vision можна прочитати дрібний текст, отримати опис навколишнього простору, знайти або ідентифікувати предмети поруч, а також дізнатися деталі про конкретний об’єкт. Користувачі можуть ставити Gemini додаткові запитання щодо того, що бачать через камеру. Наприклад, після пошуку товару можна попросити асистента назвати термін придатності, зазначений на упаковці.

Більше актуальних новин читайте у Telegram-каналі UA.News.

Якщо об’єкт, про який запитує користувач, не потрапив у кадр, Gemini має подавати аудіопідказки, щоб допомогти правильно навести камеру. Функція також доступна через Google TalkBack, а на пристроях з Android 9 і новішими версіями її можна додати до ярликів спеціальних можливостей у налаштуваннях.

Обмеження функції

Google застерігає не використовувати Guided Vision для навігації, безпечного пересування чи виявлення перешкод. Компанія також наголошує, що інструмент не має замінювати тростину або інші засоби мобільності. The Verge порівнює нову можливість із функцією VoiceOver Live Recognition, яку Apple додала до iPhone та Vision Pro.