AI-Cafe #038:   AIがマウスを動かす? 面倒なPC作業を丸投げする「実行型AI」の正体

AI-Cafe #038 「これやっといて」でAIがマウスを動かす?実用化が始まったPC操作AI

「これやっといて」でAIがマウスを動かす?実用化が始まったPC操作AI

チャットの中だけで終わらない。AIがあなたの代わりにブラウザを開き、クリックし、入力を代行する未来がすぐそこに。

ハラさん
ハラさん ああ、もう!このシステムのデータを、あっちのWEBフォームに一つずつコピペする作業、なんとかならんのか。AIに『これ、やっといて』って言えたら最高なんだけどな。
おーちゃん
おーちゃん ハラさん、それ、まさに今月あたりから現実になり始めていますよ。最新のAI技術『Computer Use(コンピューター・ユース)』です。
コッシー
コッシー コンピューターを使う?AIが自分でPCを操作するってこと?
おーちゃん
おーちゃん その通りです。これまでのAIは『文字を返す』だけでしたが、最新のモデル(Claudeなど)は、PCの画面を見て、マウスをどこに動かし、どのボタンをクリックするかを自分で判断して実行できるんです。
ハラさん
ハラさん ええっ!マウスが勝手に動くのか?まるで透明人間が隣で仕事してるみたいじゃないか。
おーちゃん
おーちゃん まさにそんな感覚です。例えば『このExcelのリストを読み取って、WEBサイトのフォームに1件ずつ入力して送信ボタンを押して』と指示するだけで、AIがブラウザを立ち上げ、ログインし、入力を代行してくれます。
コッシー
コッシー それ、RPA(自動化ツール)とは何が違うの?
おーちゃん
おーちゃん RPAは『ここをクリックする』という手順を人間が細かく教える必要がありますが、AIは『画面を見て自分で判断』します。サイトのデザインが少し変わっても、AIなら自分で『あ、送信ボタンはここだな』と見つけられるんです。柔軟性が桁違いですよ。
ハラさん
ハラさん すごいな……。現場の報告書を本社のシステムに転記する作業も、これで全部丸投げできる日が来るのか。
おーちゃん
おーちゃん はい。まだ開発段階の部分もありますが、実用レベルへの進化は驚くほど速いです。これからはAIに『文章を作らせる』だけでなく、『作業をさせる』のが当たり前になりますよ。

💡今日のポイント

  • 「Computer Use」は、AIがPC画面を視覚的に理解し、マウス操作や入力を代行する技術
  • 従来の自動化ツール(RPA)と違い、AIが「自分で見て判断する」ため、変化に強い
  • ブラウザ間の転記作業や、単純な繰り返し操作が「丸投げ」できる時代が来ている

最新のAI自動化をあなたのビジネスに取り入れてみませんか?

おーちゃんに相談する

大畑 祐貴

(株)インフィニティ 代表取締役。文系として、わかりやすくITを説明し、武器として活用してもらうコンサルティングを行っています。

関連記事

AI-Cafe #033: 便利なのに、なぜ使われない? 社員にAIを定着させる「唯一のコツ」

AI-Cafe #026:GW中にAIを「触ってみようかな」と思っている人へ 連休を最高のAIデビューにする準備

AI-Cafe #001:「ChatGPTどう使ってます?」って聞かれて、答えられなかった話

PAGE TOP