AI用語集 / Computer use

🤖 エージェントとツール

Computer useとは、AIが人間のようにコンピューターを操作する能力です。モデルは画面のスクリーンショットを「見て」、インターフェースの要素を認識し、クリック、スクロール、テキスト入力などを行います。そのため、APIがなくても、あらゆるプログラムやウェブサイトを操作できます。 これはエージェントの自然な発展形です。アプリごとに連携する代わりに、人間向けの既存インターフェースをAIが使います。まだ新しい技術のため、見慣れない画面ではうまく動かないこともありますが、目指す方向は明確です。面倒なクリック操作を代わりに行うアシスタントです。