この機能では、利用者が自然な言葉で指示すると、Geminiがアプリを起動し、必要な手順を進める。操作の進行状況は画面上で確認でき、利用者は途中で処理を停止したり、必要に応じて入力を行ったりできる。グーグルは具体例として、配車サービスの予約やフード・食料品の注文などの操作を示している。

　新機能はPixel向けに定期的に提供されるソフトウエア更新「Pixel Drop」の一環として配布される。対応アプリは初期段階では限定され、対象地域や対応サービスは順次拡大するとされる。

　また、グーグルが2026年3月5日に発売予定としているスマートフォン「Pixel 10a」については、今回発表されたGeminiによるアプリ操作機能の対応端末としては挙げられていない。今回のアップデートは、スマートフォン上で生成AIがアプリの操作を支援する機能を拡張する内容となっている。