GoogleのGemini Live、カメラを向けるだけで実物を解説

Googleは、同社のAIアシスタント「Gemini」アプリのライブ機能「Gemini Live」を使い、カメラで映した対象についてリアルタイムに助言を得る方法を公式ブログで紹介しました。画面のLiveアイコンをタップしてカメラを起動し、レンズを向けるだけで、複雑な説明書や点滅するエラーコードなど、言葉にしづらい対象をその場で相談できます。長い説明を省き、目の前のものをそのまま見せて質問できる点が特徴です。

使い方は簡単です。画面のLiveアイコンをタップし、カメラのアイコンを押すとGemini Liveが起動します。あとは助けが必要な対象にレンズを向け、修理の手順や散らかった引き出しの整理術など、知りたいことを話しかけるだけで案内が得られます。

カメラだけでなく、スマートフォンの画面を共有する使い方もあります。操作に迷うアプリの画面を共有すれば、Geminiがナビゲーションを支援します。実物と画面の双方を入力にできるため、状況に応じて手段を選べます。

活用の幅は実用的な場面にとどまりません。部屋の装飾のアイデア出しや、買い物中のパーソナルな助言など、創造的な用途にも使えます。現実世界を起点に、思いついたことへその場で答えを得られる体験を目指しています。