画面を動かす！AIの「自動操縦」

AIの進化は、チャットの会話画面の中だけにとどまりません。いま、AIが人間と同じようにパソコンやスマートフォンの画面を直接認識し、ブラウザやアプリを操作して作業を代行する「自動操縦（エージェント）」の技術が急速に立ち上がっています。

例えば、Microsoftはパソコンの画面操作を録画するだけで「Copilot」が作業を代理してくれるアプリを主にmacOS向けに無料公開しており、Windowsへの対応も進められています。また、Anthropicが提供するClaudeにも「Record a skill」という、画面操作を実演・録画してAIに作業を記憶・代行させる新機能が搭載されました。

さらに、Googleの最新スマートフォン「Pixel 11シリーズ」には、スマホ自体を自動操縦する「Gemini Intelligence」が標準設計されています。

これまでは別々のツールを人間が手作業で行ったり来たりして転記していたような面倒な定型業務も、これからはAIに「いつもの手順でやっておいて」と丸投げできるようになります。

---