• 会員限定
  • 2026/11/20 05:43 掲載

グーグル、MacのGeminiにクリックも入力も丸投げ 日本の職場で使える日は来るか

会員(無料)になると、いいね!でマイページに保存できます。
グーグルは2026年11月19日(米国時間)、Mac向けGeminiアプリに複数手順の作業を代行する「computer use」を追加したと発表した。ファイルやデスクトップアプリ、Webサイトをまたぐ作業が対象で、分離したバックグラウンドウィンドウで動く。提供は米国の英語環境から始まり、日本を含む他地域への展開は示されていない。
グーグル、MacのGeminiにクリックも入力も丸投げ 日本の職場で使える日は来るかの画像
Geminiアプリ(Mac版)のcomputer useの利用イメージ
(出典:グーグル)
 グーグルは2026年11月19日(米国時間)、Mac向けのGeminiアプリに、複数の手順にまたがる作業を代行する「computer use」を追加したと、公式ブログで発表した。ローカルのファイル、デスクトップアプリ、Webサイトをまたぐ作業が対象で、ユーザーが依頼内容を文章で伝えると、Geminiがクリック、文字入力、メニュー操作、フォーム入力を代わりに行うという。

 Geminiアプリ担当のグループプロダクトマネージャー、マイケル・フリードマン氏の名義で公開されたブログは、通常は何十回ものクリックが必要になる反復作業の時間を節約できると説明している。

 Geminiは、チャット画面内にライブプレビューを表示する「分離されたバックグラウンドウィンドウ」の中で動作する。そのためユーザーはメイン画面とカーソルを自由に使い続けられ、入力や設計、通話といった作業を中断せずに済むとしている。

 安全面では、Geminiがアクセスできるアプリをユーザーが選ぶ。ユーザーは各ステップをライブで確認でき、いつでも一時停止できるほか、重要な操作は実行前に承認する仕組みという。

 グーグルは使い方の例を4つ挙げた。1つ目は、デザインソフトでの写真の一括色調整や3Dシーンの設定。2つ目は、ローカルのPDFから重量、寸法、住所を抜き出し、複数項目の配送見積もりフォームへ入力する作業だ。

 3つ目は、複数地域のライブダッシュボードから指標とスクリーンショットを集め、Google Slidesで資料を作る作業。4つ目は、フォルダ内の衣料品の写真を分析し、価格を調べて項目を記録し、中古品販売サイトへの出品を準備する作業である。

 提供は米国の英語環境から始まる。Mac版Geminiアプリは gemini.google/mac からダウンロードできる。日本を含む米国以外での提供や、対応言語の拡大について、ブログでは触れていない。


 では、グーグルが約1年前に「未最適化」と説明していたデスクトップの操作へ、なぜ踏み込めたのか。先行したアンソロピックとOpenAIは、同じ領域でどこまで進んでいたのか。背景には、先行2社が公表した操作精度の数字と、その後の提供形態の変遷がある。

画像
【画像解説と記事全文はこちら】画面操作AI、各社の提供形態の変遷
画面操作AI、各社の提供形態の変遷
(出典:各社発表をもとに作成)
この記事の続き >>
・先行2社が公表した、画面操作AIの精度の数字
・グーグル自身が「未最適化」とした領域に踏み込むまで
・米国限定の提供が広がるかを占う先行事例の期間

この続きは
会員限定(完全無料)です

ここから先は「ビジネス+IT」会員に登録された方のみ、ご覧いただけます。

今すぐビジネス+IT会員に
ご登録ください。

新規登録キャンペーン実施中

Amazonギフト券5,000円分

毎月抽選20名様にプレゼント

対象:期間中、上の「今すぐ登録(無料)」ボタンから
プレミアム会員にご登録いただいた方

キャンペーン詳細・応募条件を見る

すべて無料!今日から使える、
仕事に役立つ情報満載!

  • ここでしか見られない

    2万本超のオリジナル記事・動画・資料が見放題!

  • 完全無料

    登録料・月額料なし、完全無料で使い放題!

  • トレンドを聞いて学ぶ

    年間1000本超の厳選セミナーに参加し放題!

  • 興味関心のみ厳選

    トピック(タグ)をフォローして自動収集!

Googleで見つけやすく

評価する

いいね!でぜひ著者を応援してください

  • 0

会員(無料)になると、いいね!でマイページに保存できます。

共有する

  • 0

  • 0

  • 0

  • 0

  • 0

関連タグ タグをフォローすると最新情報が表示されます
あなたの投稿

    PR

    PR

    PR

投稿したコメントを
削除しますか?

あなたの投稿コメント編集

通報

このコメントについて、
問題の詳細をお知らせください。

ビジネス+ITルール違反についてはこちらをご覧ください。

通報

報告が完了しました

コメントを投稿することにより自身の基本情報が
本メディアサイトに公開されます

基本情報公開時のサンプル画像
報告が完了しました

「」さんのブロックを解除しますか?

ブロックを解除するとお互いにフォローすることができるようになります。

ブロック

さんはあなたをフォローしたりあなたのコメントにいいねできなくなります。また、さんからの通知は表示されなくなります。

さんをブロックしますか?

ブロック

ブロックが完了しました

ブロック解除

ブロック解除が完了しました

機能制限のお知らせ

現在、コメントの違反報告があったため一部機能が利用できなくなっています。

そのため、この機能はご利用いただけません。
詳しくはこちらにお問い合わせください。

ユーザーをフォローすることにより自身の基本情報が
お相手に公開されます

基本情報公開時のサンプル画像