Googleは2026年10月1日、視覚障害者や弱視者向けのアクセシビリティ機能「Guided Vision」をGemini Liveで提供開始しました。対象はAndroid 9以降を搭載し、Gemini Liveがサポートされている地域・言語の端末で、GoogleはAiraと連携し、視覚データの解釈を通じて合計数万時間にわたりGemini Liveを訓練しています。
GeminiはGoogle DeepMindが開発するマルチモーダル対応のAIモデルのファミリーです。
何が新しいか
Guided Visionを有効にしてGemini Liveでカメラを共有すると、Geminiは会話型のリアルタイム視覚支援として動作します。カメラが高すぎる、近すぎる、横にずれているといった場合には、「ゆっくり右にパンする」「下に傾ける」「一歩下がる」などの音声指示で撮り直しを促します。
想定する用途は次のとおりです。
- 細かい文字や複雑な文章の読み上げ(食品の栄養成分表示、家電のダイヤルや洗濯機のコース、暗いレストランのメニュー)
- 物体の発見(床に落ちたイヤホン、混み合ったスパイス棚の黒胡椒)
- 色・模様・形状の確認(ストライプのシャツとズボンの組み合わせなど)
- 見慣れない空間や部屋の配置、テーブル上の物の説明
- 複数言語での会話
開発体制と数値
| 項目 | 内容 |
|---|---|
| 訓練での協力組織 | Aira |
| Airaと連携した訓練時間 | 数万時間 |
| Aira Trusted Tester network参加者 | 1,000人超 |
| 対応OS | Android 9以降 |
Aira Trusted Tester networkの参加者は日常的な場面でモデルのストレステストと改良に参加し、Airaの専門家は安全ガードレールの策定と評価にも関わりました。インド、ブラジル、シンガポール、インドネシア、日本などの盲人・弱視者コミュニティによるテストとフィードバックを、説明文や撮り直し指示に反映しています。Gemini Live担当シニアプロダクトマネージャーのIsha Sheth氏が発表しました。
利用条件と使い方
対象はAndroid 9以降で、Gemini Liveがサポートされている地域・言語の端末です。GeminiアプリとAndroidシステムソフトウェアを最新版に更新する必要があります。
- Geminiアプリ: プロフィール設定で「Use Guided Vision in Live」をオンにし、Gemini Liveを開いてカメラ共有をタップします。
- ショートカット:
Settings > Accessibility > Vision assistance > Guided Visionで、フローティングアクセシビリティボタン、2本指スワイプ、両方の音量キー押下のいずれかを起動手段に設定できます。 - TalkBack: 3本指タップでTalkBackメニューを開き、Guided Visionを選択します。
安全上の制限
Googleは、Guided Visionが生成AIであり誤りを含み得ると説明しています。医療機器、移動補助具、白杖の代替ではなく、ナビゲーション、安全な移動の案内、障害物検知は用途に含みません。物理環境では既存の移動補助具と安全な移動手段を引き続き使うよう求めています。高齢者、識字能力が低い人、暗い場所で細かい文字を読む人にも視覚支援を提供するとしています。
まだコメントはありません。