英文原标题:Google’s new Guided Vision feature can help you read the fine print

本文为英文原文的机器翻译摘要,原文见:The Verge AI ↗

Google 在 Gemini Live 中推出 Guided Vision 功能,利用 AI 为视障用户提供实时音频描述,帮助识别物体、阅读小字等。

功能概述

Guided Vision 今日在兼容 Android 设备的 Gemini Live 中上线,通过 AI 对手机摄像头指向的任何物体提供实时音频描述。用户可在 Gemini Live 中共享摄像头,让 Google 的 AI 帮助阅读小字、描述周围环境、寻找或识别物体以及描述特定物体的细节。

  • 在 Gemini Live 中共享摄像头即可使用
  • 支持阅读小字、描述环境、识别物体等功能

目标用户与类似功能

该功能类似于 Apple 为 iPhone 和 Vision Pro 添加的 VoiceOver Live Recognition,专为盲人、低视力用户或需要特定场景协助的人设计。

  • 面向盲人、低视力用户或需要协助的人群
  • 与 Apple 的 VoiceOver Live Recognition 类似

可用性与设置

除了 Gemini 应用,Guided Vision 也可在 Google TalkBack 中使用。运行 Android 9 及以上系统的设备用户可在设置应用中为其设置无障碍快捷方式。该功能是在近期 Pixel 更新中宣布的。

  • 可在 Gemini 应用和 Google TalkBack 中使用
  • Android 9+ 用户可设置无障碍快捷方式
  • 在近期 Pixel 更新中宣布

交互与限制

用户可针对所看内容提出后续问题,例如让 Gemini 读出它帮助找到的物品的过期日期。Google 表示,如果用户询问不在画面中的物体,Gemini 会提供音频提示帮助调整摄像头。但 Google 提醒用户不要依赖 Guided Vision 进行导航、安全旅行指导或障碍物检测,也不能替代手杖或移动辅助工具。

  • 支持后续提问,如读取过期日期
  • 提供音频提示帮助调整摄像头
  • 不可用于导航、安全旅行指导或障碍物检测
  • 不能替代手杖或移动辅助工具

站内导航