Gemini Live に Guided Vision。カメラ映像をリアルタイム音声説明する視覚支援機能が Android 9 以上で提供開始、日本語を含む複数言語に対応
Google が Gemini Live に Guided Vision を追加した。カメラを共有すると、リアルタイムで動的な音声説明が返る視覚支援機能である。会話形式で動作し、周囲を探索するためのフレーミング(カメラの向け直し)の音声指示も出す。想定用途は細かい文字を読む、物を探す、細部を説明する、不慣れな場所を把握することである。開発はアクセシビリティ当事者コミュニティとの協働で行われ、視覚情報の通訳サービス Aira と提携して数万時間ぶんの視覚データでモデルを学習させ、1,000人以上の Aira Trusted Testers が精度の調整に参加した。提供開始は 2026-10-01 で、対象は Android 9 以上の対応端末。複数言語に対応し、インド、ブラジル、シンガポール、インドネシア、日本などで記述と応答の自然さを検証している。起動経路は Gemini アプリの設定、Android のユーザー補助ショートカット、Google TalkBack との統合の3つ。Google は医療機器・移動補助具・白杖の代替ではないと明示し、ナビゲーションや障害物検知には使えないとしている。
ニュース原文を読む ↗要約
Google が Gemini Live に Guided Vision を追加しました。カメラを共有すると、リアルタイムで動的な音声説明が返る視覚支援機能です。
単に「見たものを説明する」だけではありません。 会話形式で動作し、周囲を探索するためのフレーミング(カメラの向け直し)の音声指示も出します。「もう少し左へ」「少し下に向けてください」といった誘導が入るため、画面が見えない状態でも目的の対象を捉えられる設計になっています。
想定用途は、細かい文字を読む、物を探す、細部を説明する、不慣れな場所を把握することです。
開発プロセスが丁寧です。 アクセシビリティ当事者コミュニティとの協働で開発され、視覚情報の通訳サービス Aira と提携して数万時間ぶんの視覚データで学習させています。1,000人以上の Aira Trusted Testers が精度の調整に参加しました。
「できないこと」が明示されている点も評価できます。 Google は **「医療機器、移動補助具、白杖の代替ではない」**とし、ナビゲーションや障害物検知には使えないと述べています。アクセシビリティ機能で過大な期待を持たせると、実害が出ます。 制約を先に出す姿勢は、この領域では重要です。
日本語を含む複数言語に対応します。 インド、ブラジル、シンガポール、インドネシア、日本などで記述と応答の自然さを検証したとされています。
補足: 本件は公開が 2026-10-01T16:00Z で、本来は 2026-10-02 実行分の窓に入るものだった。前日実行での取りこぼしを、2026-10-03 の実行で追補として記録している。
何が変わったか
- Gemini Live に Guided Vision が追加
- カメラ共有でリアルタイムの動的音声説明が返る
- フレーミング(カメラの向け直し)の音声指示も出す
- 用途: 細かい文字を読む、物を探す、細部を説明する、不慣れな場所を把握する
- Aira と提携し、数万時間ぶんの視覚データで学習。1,000人以上の Trusted Testers が調整に参加
- 提供開始 2026-10-01、対象は Android 9 以上の対応端末
- 複数言語対応。日本を含む複数地域で自然さを検証
- 起動経路は3つ: Gemini アプリ設定、Android ユーザー補助ショートカット、Google TalkBack 統合
- 医療機器・移動補助具・白杖の代替ではない。ナビゲーション・障害物検知には使えない(公式明記)
業務インパクト(一般企業向け)
合理的配慮の検討材料として、具体的な選択肢が1つ増えました。 障害者雇用促進法の文脈で、視覚に困難のある従業員への配慮を検討する際、専用機器の導入は費用と調達の両面でハードルがあります。 Gemini アプリで使える機能なら、既に支給している Android 端末の設定だけで試せます。
ただし、適用範囲の設定が必要です。 公式がナビゲーションと障害物検知には使えないと明示している以上、移動を伴う業務の支援としては使えません。 使えるのは、書類の読み取り、在庫や備品の確認、画面やラベルの内容把握といった、静止した対象に対する作業です。
TalkBack との統合は、実運用で効きます。 既にスクリーンリーダーを使っている人にとって、新しいアプリの操作を覚えずに済むことは大きな差です。ユーザー補助ショートカットからも起動できるため、既存のワークフローに割り込ませやすい設計です。
導入時には、情報の取り扱いを確認してください。 カメラ映像を共有する機能である以上、書類や画面を映せばその内容が処理されます。 機密文書の読み取りに使う場合、Gemini のデータ取り扱いポリシーと社内規程の突き合わせが要ります。「アクセシビリティ機能だから」で例外扱いにすると、後で問題になります。
日本語での検証が明記されている点は、国内導入の判断材料になります。 多言語対応と書かれていても、実際の品質は言語によって差があります。日本が検証対象に挙がっているなら、最低限の品質は期待できます。 ただし、実際の業務文書(手書き、専門用語、業界固有の略語)での精度は、自社で確認すべきです。
当事者を交えた検証を、自社でも行ってください。 Google は1,000人以上のテスターで調整しましたが、自社の業務内容と、実際に使う人の使い方は固有です。 「良さそうだから導入する」ではなく、使う本人に試してもらってから判断するのが筋です。
副業・個人活用視点
アクセシビリティ領域は、提案できる人が少ない分野です。 多くの IT 支援は業務効率化を軸にしており、合理的配慮の文脈で具体的なツールを提案できる人は限られます。 この機能を知っているだけで、相談を受けられる範囲が広がります。
中小企業向けの提案材料として、費用の低さが強みです。 専用の支援機器は数十万円単位になることがあります。既存の Android 端末と Gemini アプリで試せるなら、「まず試してみましょう」という提案が成立します。導入の意思決定が軽くなること自体が、話を前に進めます。
ただし、売り込みの対象ではありません。 アクセシビリティは当事者のニーズが起点であるべきで、ベンダー都合で押し込むべき領域ではありません。 相談を受けたときに選択肢を出せる、という位置づけが適切です。「できないこと」を正確に伝えることが、この分野では特に重要です。
個人の学びとしては、「制約を明示する設計」の実例として参考になります。 Google が「白杖の代替ではない」と書いた判断は、過大な期待を防ぐためのコストを払ったということです。自分が AI 機能を納品するときも、何ができないかを文書に残すかどうかで、後のトラブルの量が変わります。
フレーミング指示という発想も、転用できます。 「見えないユーザーに、カメラの向け方を音声で誘導する」という設計は、入力の質をシステム側が能動的に引き上げるパターンです。OCR や画像認識を組み込む案件で、「うまく撮れていない」問題に悩むことは多いはずです。ユーザーに任せず、システムが誘導するという解き方は、他の場面にも応用できます。