GoogleのGemini、スマホ操作の自動化機能をベータ提供開始

タスク自動化の概要

Geminiがアプリを代理操作
配車・フードデリバリーに対応
Galaxy S26 Ultraで先行提供
最終確認はユーザーに委ねる設計

実際の動作検証

Uber配車で空港指定を自動処理
Starbucks注文でメニュー探索を実行
クロワッサンの温め指定も自動判断
複雑な注文ほど追加入力が必要
詳細を読む

GoogleSamsungは、Geminiのタスク自動化機能をGalaxy S26 Ultra向けにベータ版として提供開始しました。この機能は仮想ウィンドウ内でアプリを代理操作し、簡単なプロンプトから配車やフードデリバリーの注文を完了させるものです。

配車アプリUberのテストでは、「空港までの車を手配して」という指示に対し、Geminiがどの空港かを確認した上で、目的地の入力や不要なステップのスキップを自動で判断しました。最終確認の段階でユーザーに操作を戻す安全設計が採用されています。

Starbucksでの注文テストでは、コーヒーとクロワッサンという曖昧な指示に対し、Geminiがメニューをスクロールしてフラットホワイトを発見しました。さらにチョコレートクロワッサンを温めるかどうかの判断も自動で正しく行っています。

この機能は数週間前にGoogleSamsungが発表していたもので、まず配車フードデリバリーのアプリから対応を開始しています。AIアシスタントによるアプリ操作の自動化は長年期待されてきた機能であり、ようやく実用段階に入りました。

記者は今後さらに複雑なテストを行う予定としていますが、現時点では意図通りに動作している点を高く評価しています。1年前にはカレンダーのフライト情報すら正しく扱えなかったことを考えると、大きな進歩といえます。