2026年10月24日

Cursor Computer Useとは?エージェントがPC画面を直接操作する新機能

Cursorのエージェントが、ついにブラウザの外へ出ました。

室谷室谷代表取締役
Cursor Computer Use(カーソル・コンピューターユース)は、Cursorが2026年2月24日に発表した機能で、AIエージェントがユーザーのコンピュータ上でデスクトップアプリを直接クリック・タイピングして操作できるようになるものです。ブラウザの中だけではなく、iOS Simulatorのようなデスクトップアプリも動かせるのがポイントなんですよね。
テキトー教師テキトー教師DotAI 認定講師
これは単に「操作範囲が広がった」という話じゃないんですよ。エージェントが自分で作ったソフトを自分で触って検証できるようになる、というのが本質で。

公式ブログでも「エージェントは自分が作ったソフトを使えなければ能力に天井がある」と明言されています。
室谷室谷代表取締役
公式スレッドでは「Cursor can now control your computer」とシンプルに宣言されていて、タスクに必要ならCursorが自分で使い、プロンプトで「@Computer Use」とメンションして明示的に呼び出すこともできる、と。利用にはCursorのアップデートが必要です。
テキトー教師テキトー教師DotAI 認定講師
まず押さえておきたいのは、これは「Cursorのデスクトップアプリが勝手にマウスを動かす」という単純な話ではないことです。公式ドキュメントを読むと、Self-Hosted Machinesのワーカー上で動くエージェントが、クリック・入力・スクリーンショット・UI操作を行う仕組みだと整理されています。
室谷室谷代表取締役
そこが大事なんですよね。MYUUUでもエージェントに作業を任せるとき、最後の「本当に動くのか」の確認がボトルネックになりがちで。

画面を見て操作できるというのは、そのボトルネックを潰しにいく話なんですよ。

Cursor Computer Useとは?エージェントがPC画面を直接操作する新機能

Computer Useの2つのレイヤー
クラウドエージェントのVM内操作
  • 各エージェントが独立した仮想マシン(VM)を持つ
  • VM内で完結する形でソフトを操作
  • 公式ブログ『Cursor agents can now control their own computers』に対応
Self-Hosted Machinesのワーカー上操作
  • 手元のMacやLinuxマシンのデスクトップセッションを操作
  • クリック・入力・スクリーンショット・UI操作を実行
  • ワーカーにChromeかChromiumがあればブラウザも操作可能
  • macOSとLinuxのワーカーで動作
  • My MachinesとTeam Poolsの両方に対応
  • ドキュメント『Computer use and desktop sharing』で詳説
テキトー教師テキトー教師DotAI 認定講師
改めて定義を整理すると、Computer Useはエージェントが画面を見てマウス操作・キーボード入力を代行する仕組みです。APIのないGUIアプリでも操作できる点が特徴で、Cursorはこれをクラウドエージェントの文脈で打ち出してきました。
室谷室谷代表取締役
公式ブログのタイトルが「Cursor agents can now control their own computers」、つまり「自分たちのコンピュータ」を操作する、という表現なんですよね。各エージェントが独立した仮想マシン(VM)を持ち、その中で完結する形なんです。
テキトー教師テキトー教師DotAI 認定講師
ここ、受講生さんがよく混同するんですが、2つのレイヤーがあるんですよ。ひとつはクラウドエージェントが自分のVM内でソフトを操作する話。

もうひとつはSelf-Hosted Machinesのワーカー上で、手元のMacやLinuxマシンのデスクトップセッションを操作する話。ドキュメントの「Computer use and desktop sharing」は後者を詳しく説明しています。
室谷室谷代表取締役
なるほど、そこは分けて読まないと混乱しますね・・・。公式ドキュメントによると、ワーカー上のエージェントがクリック・入力・スクリーンショット・UI操作を行い、ワーカーにChromeかChromiumが入っていればブラウザも操作できる、と。

macOSとLinuxのワーカーで動き、My MachinesとTeam Poolsの両方に対応しています。
テキトー教師テキトー教師DotAI 認定講師
ちなみにCursorの全体像がまだ曖昧な方は、Cursor AIとは?使い方・料金・モデル・インストールを完全解説を先に読むとスムーズです。

Cursor Computer Useでできること――iOS Simulatorからスプレッドシートまで

まとめ
Cursor Computer Useでできること(公式事例)
  • iOS Simulatorを動かして、自分が作った機能をテストする
  • プラグインページの各コンポーネントにソースコードへのリンクを付ける機能を実装し、エージェントがPrismaプラグインを開いて各コンポーネントをクリックし、GitHubリンクの正しさを検証
  • クリップボード経由の情報流出脆弱性を再現するため、HTMLページを作成し、ローカルにバックエンドサーバーを立て、実際にクリップボードへUUIDをコピーして攻撃フローを実演
  • lint結果に応じてラベルを変える修正を、Cursorデスクトップアプリ上で型エラーあり/なしの2ケースを実際にテスト
  • cursor.com/docsのUIを45分かけて一通り巡回し、サイドバー・トップナビ・検索・コピーボタン・目次・テーマ切替などを検証
  • ブラウザのページ遷移、スプレッドシートのようなツールの操作、データの解釈と意思決定、複雑なUI環境での問題解決
  • Cursor社内ではマージされるPRの30%以上をクラウドエージェントが自律的に作成
室谷室谷代表取締役
公式スレッドで真っ先に挙げられているのが「iOS Simulatorを動かして、自分が作った機能をテストする」という例です。これは開発者にとってかなり実務的なユースケースなんですよね。
テキトー教師テキトー教師DotAI 認定講師
公式ブログには具体的な事例がいくつも載っています。整理するとこうです。
  • プラグインページの各コンポーネントにソースコードへのリンクを付ける機能を実装し、エージェントが自分でPrismaプラグインを開いて各コンポーネントをクリックし、GitHubリンクが正しいか検証
  • クリップボード経由の情報流出脆弱性を再現するため、HTMLページを作り、ローカルにバックエンドサーバーを立て、実際にクリップボードへUUIDをコピーして攻撃フローを実演
  • lint結果に応じてラベルを変える修正を、Cursorデスクトップアプリ上で型エラーあり/なしの2ケースを実際にテスト
  • cursor.com/docsのUIを45分かけて一通り巡回し、サイドバー・トップナビ・検索・コピーボタン・目次・テーマ切替などを検証
室谷室谷代表取締役
45分かけて自分でdocsサイトを回って検証してくれるのはいいですね。人がやると地味に時間を食うやつですから。

しかも動画・スクリーンショット・ログの成果物として残るので、レビュー側も確認しやすいんですよ。
テキトー教師テキトー教師DotAI 認定講師
公式ブログでは、エージェントがブラウザのページ遷移、スプレッドシートのようなツールの操作、データの解釈と意思決定、複雑なUI環境での問題解決を行う様子が示されています。まさに「APIがないから無理」という壁を越える話ですね。
室谷室谷代表取締役
Cursor社内ではマージされるPRの30%以上をクラウドエージェントが自律的に作成している、というのも公式ブログに書かれています。これは結構インパクトのある数字ですよね。

Cursor Computer Useの使い方・始め方――@メンションで呼び出す手順

Cursor Computer Useの呼び出し・有効化手順
  1. 01
    Cursorをアップデート
    公式スレッドでも「Update Cursor to try it」と案内されている前提作業
  2. 02
    呼び出し方法を選ぶ
    Cursorがタスクに必要と判断して自動使用、またはプロンプトで「@Computer Use」とメンションして明示的に呼び出す
  3. 03
    Self-Hosted Machinesで有効化する場合
    Cursor CLIを最新に更新し、ワーカー起動時にフラグを付ける
  4. 04
    ワーカー起動コマンドを実行
    agent worker --computer-use start(プールのワーカーは agent worker --pool gpu --computer-use start)
  5. 05
    macOSの初回セットアップ
    ヘルパーアプリ「Cursor Computer Use」のインストールと権限要求が走る。CLIが自動管理し、downloads.cursor.comから ~/.cursor/cursor-computer-use/Cursor Computer Use.app としてインストールされる
  6. 06
    インストール確認
    agent worker debug で確認できるが、権限の状態までは報告されない
  7. 07
    実タスクで権限を確認
    スクリーンショットを撮るタスクを投げて確認する(debugが通っても権限付与の証明にはならない)
テキトー教師テキトー教師DotAI 認定講師
使い方は2通りです。ひとつはタスクに必要ならCursorが自分で判断して使う。

もうひとつはプロンプトで「@Computer Use」とメンションして明示的に呼び出す。公式スレッドではこの2点が示されています。
室谷室谷代表取締役
まずはCursorをアップデートするのが前提ですね。公式スレッドでも「Update Cursor to try it」と案内されています。
テキトー教師テキトー教師DotAI 認定講師
Self-Hosted Machinesのワーカーで有効化する場合は、CLIの操作になります。公式ドキュメントに沿うと、まずCursor CLIを最新に更新し、ワーカー起動時にフラグを付けます。

整理するとこうです。
code
agent worker --computer-use start

プールのワーカーならこうです。

code
agent worker --pool gpu --computer-use start
室谷室谷代表取締役
フラグはstartの前に置く、という順序が決まっているのでそこは注意ですね。あとmacOSだと初回起動時にヘルパーアプリのインストールと権限要求が走ります。
テキトー教師テキトー教師DotAI 認定講師
macOSでは「Cursor Computer Use」という小さなヘルパーアプリ経由でデスクトップセッションを操作します。CLIが自動で管理してくれて、初回のagent worker --computer-use start時にdownloads.cursor.comからダウンロードし、~/.cursor/cursor-computer-use/Cursor Computer Use.appとしてインストールされる仕組みです。

ワーカー側にCursorのデスクトップアプリは不要なんですよ。
室谷室谷代表取締役
インストールされたかどうかはagent worker debugで確認できるんですね。ただしこのレポートは権限の状態までは報告しないので、実際にスクリーンショットを撮るタスクを投げて確認する必要がある、と。
テキトー教師テキトー教師DotAI 認定講師
そこは受講生さんがハマりやすいポイントで、agent worker debugが通ったからといって権限が付与されている証明にはならないんですよ。必ず実タスクで確認を、というのが公式の指示です。
室谷室谷代表取締役
CLI周りの基本はCursor CLIとは?インストール・使い方・料金・Claude Codeとの違いを完全解説【2026年最新】でも解説しているので、合わせて読むとスムーズです。

対応環境と提供範囲――macOS/Linux、日本から使えるのか、いつから使えるのか

テキトー教師テキトー教師DotAI 認定講師
対応環境を整理しましょう。公式ドキュメントベースだと、Computer UseはSelf-Hosted Machinesのワーカー向け機能で、macOSとLinuxに対応しています。

macOSではアクセシビリティと画面収録の2つのプライバシー権限が必要で、LinuxではX11ディスプレイを使います。
室谷室谷代表取締役
Linux側は依存パッケージを自分で入れる必要があるんですよね。公式ドキュメントではdbus-x11、ffmpeg、tigervnc-standalone-server、x11-utils、x11-xserver-utils、xdotool、xfce4をaptで入れる手順が示されています。

xdotool、ffmpeg、X11ユーティリティは常に必要で、tigervnc-standalone-serverとxfce4はワーカーが自分でデスクトップを作る場合に必要、と。
テキトー教師テキトー教師DotAI 認定講師
ディスプレイの解決順序も決まっています。--displayで明示指定、次に環境変数のDISPLAYを継承、どちらもなければTigerVNCでXfceセッションの管理デスクトップを自分で立ち上げる、という流れです。

ヘッドレスマシンのデフォルトはこの管理デスクトップになります。
室谷室谷代表取締役
デスクトップ共有は別機能でLinux限定なんですよね。--share-desktopを付けると、認可された閲覧者がCursorからエージェントのデスクトップを閲覧・操作できる。

モードはview(閲覧のみ)とview_and_control(マウスとキーボードの制御、デフォルト)がある、と。
テキトー教師テキトー教師DotAI 認定講師
ここは誤解されやすいので丁寧に言うと、共有に使われるのはワーカーが作った隔離されたエージェント用デスクトップであって、マシン自体のセッションではないんですよ。入力フィルタはフェイルクローズで制御を強制し、クリップボード転送はブロックされたまま。

ピクセルはワーカーの既存の外向き接続を通じてのみ外に出て、インバウンドポートは開かない、と公式ドキュメントに明記されています。
室谷室谷代表取締役
日本から使えるのか、料金はどうなるのか、いつから一般提供なのか、という点は現時点では明らかにされていません。公式スレッドでは「Update Cursor to try it」としか案内されていないので、提供プランや地域条件は今後のアナウンスを待つ形ですね。

料金体系の基本はCursorの料金を徹底解説!Pro/Pro+/Ultraの違いと選び方にまとめてあります。
テキトー教師テキトー教師DotAI 認定講師
なお、マネージドなクラウドエージェント側の挙動は別途「Capabilities」に記載がある、と公式ドキュメントが案内しています。Self-Hosted Machinesの話と混ざらないように読み分けたいところです。

なぜ今デスクトップ操作なのか――エージェントの“能力の天井”を破る狙い

室谷室谷代表取締役
ここが今回いちばん面白いところで。公式ブログの冒頭が「Agents are only as capable as the environment they run in. Without the ability to use the software they are creating, agents hit a ceiling.」なんですよ。

エージェントは自分が作ったソフトを使えなければ天井に当たる、と。
テキトー教師テキトー教師DotAI 認定講師
これは単に機能追加というより、環境設計の話なんですよね。Cursorは2026年2月24日から、各エージェントが専用VMと完全な開発環境を持ち、変更をテストして動画・スクリーンショット・ログの成果物付きでマージ可能なPRを出す形を提供してきました。

でも操作対象は主にブラウザやコード環境に限られていた。
室谷室谷代表取締役
そこでComputer Useを足すことで、UIの動作確認や脆弱性の再現のように「実際にアプリを触らないと検証できない作業」をエージェント側に寄せられるようになった、という流れなんですよね。
テキトー教師テキトー教師DotAI 認定講師
公式ブログでは、ローカルエージェントはコード生成の入口としては楽だけど、互いにコンフリクトし、あなたのコンピュータのリソースを取り合うという制約がある、とも書かれています。クラウドエージェントは各エージェントに隔離されたVMを与えることで、多数を並列に走らせられる。

ここにComputer Useが乗ることで、並列に走らせたエージェントがそれぞれ自分の環境で検証まで完結できるわけです。
室谷室谷代表取締役
MYUUUでも複数のエージェントを並列で走らせる場面が増えてきていて、それぞれが勝手に検証までやってくれると、人間の仕事は「方向を決めて、何を出すか決める」に寄っていくんですよね。公式ブログも、実装の多くをエージェントが担えるようになった今、開発者の役割は方向づけと出荷判断に寄ってきた、と書いています。
テキトー教師テキトー教師DotAI 認定講師
公式ブログの「What's next」では、エージェントがPRをマージし、ロールアウトを管理し、本番を監視する「self-driving codebases」に向かうとされています。直近の焦点は多数のエージェント間の作業調整と、過去の実行から学んで経験を積むほど有効になるモデルづくりだと。
室谷室谷代表取締役
その方向性は、繰り返しタスクの自動化を扱ったCursor、自然言語で繰り返しタスクを自動化する「/automate」とGUI操作「computer use」を発表の流れとも重なりますね。

セキュリティと権限の注意点――オプトイン方式と分離の仕組み

テキトー教師テキトー教師DotAI 認定講師
ここは受講生さんに必ず伝えているところなんですが、Computer Useとデスクトップ共有はいずれも明示的なオプトインで、サーバー側から有効化されることはない、と公式ドキュメントに明記されています。ここは安心材料であり、同時に「自分で有効にした以上は自分で管理する」という責任の話でもあります。
室谷室谷代表取締役
macOSの権限まわりは特に慎重に、というのが公式のトーンですよね。アクセシビリティと画面収録は「Cursor Computer Use」に対して与える必要があって、TerminalやiTerm、agent、Cursor、Cursor Agent Helperに与えても意味がない、と。
テキトー教師テキトー教師DotAI 認定講師
権限の付与ルールを整理するとこうです。
  • 権限は「Cursor Computer Use」に付与する。macOSはバンドルID(co.anysphere.cursor-computer-use)とコード署名要件で権限を管理しているため、他のアプリに与えても効果がない
  • ワーカーを実行するmacOSユーザーとしてサインインした状態で付与する。画面収録の承認はそのユーザーアカウントに紐づく
  • GUIセッションを生かしておく。無人再起動するマシンでは自動ログインを有効にし、ディスプレイをスリープさせない設定にする
  • アプリはCLIに管理させる。コピーや再署名、再ビルドをすると署名IDが変わり、macOSは別アプリとみなして付与済みの権限が効かなくなる
  • macOSアップグレードやCLI更新の後は、スクリーンショットのタスクで再テストする
室谷室谷代表取締役
プライバシーデータベースを直接いじったり、System Integrity Protectionを無効化したりするのはサポート外、というのも明記されています。そこは近道に見えて一番危ないやつですからね。
テキトー教師テキトー教師DotAI 認定講師
MDMで管理している場合の注意も細かいです。アクセシビリティは多くのmacOSバージョンでプロファイルによるサイレント許可が可能ですが、AppleはmacOS 26.2以降でサイレント許可を非推奨にするとされています。

画面収録はプロファイルでは許可できず、人がSystem Settingsで承認する必要がある。だから「1台ごとに1回」ではなく「1イメージにつき1回」の承認を計画する、というのが公式の guidance です。
室谷室谷代表取締役
画面収録は人が承認しないといけない以上、テンプレートMacで権限を付与して動作確認してからスナップショットを取る「grant, verify, snapshot」の順番が大事なんですね。リストアした各ワーカーは、アプリとパスとログインユーザーが同じならComputer Useが使える状態で立ち上がる、と。
テキトー教師テキトー教師DotAI 認定講師
それとmacOS 15(Sequoia)以降は、画面を直接キャプチャするアプリに対して定期的に再確認を求めてくるので、長時間動かしているワーカーでスクリーンショットが止まったら「Allow For One Month」のプロンプトを承認して、再度agent worker debugを実行する。運用でハマりがちなポイントですね。
室谷室谷代表取締役
権限まわりはAPIキー管理と同じで、一度決めたら終わりではなく運用で維持するものなんですよね。APIキー周りはCursor APIキーの完全ガイド【2026年最新】:BYOK設定方法・料金・対応プロバイダー・よくあるエラー対処まで徹底解説で詳しく解説しています。
テキトー教師テキトー教師DotAI 認定講師
あと見落としがちなのが、Linuxのデスクトップ共有はワーカーが作った隔離デスクトップを使い、入力フィルタがフェイルクローズで制御を強制し、クリップボード転送はブロックされたまま、インバウンドポートも開かない、という設計です。便利さと引き換えに穴を開けない作りになっている、という点は評価したいですね。

よくある質問

室谷室谷代表取締役
ここからは、よく聞かれそうな点を整理していきます。
テキトー教師テキトー教師DotAI 認定講師
まず「Windowsには対応しているのか」ですが、Computer UseはmacOSとLinuxのワーカー向けと公式ドキュメントに記載されています。Windowsワーカーでの提供については現時点では明らかにされていません。
室谷室谷代表取締役
「Cursorのデスクトップアプリはワーカーに必要か」という点も、公式ドキュメントに答えがあります。macOSのワーカーにCursorのデスクトップアプリは不要で、CLIが管理するヘルパーアプリ「Cursor Computer Use」が動く仕組みです。
テキトー教師テキトー教師DotAI 認定講師
「Terminalに権限を与えたのに動かない」というのも定番のつまずきです。権限はCursor Computer Useに与える必要があり、TerminalやCursor Agent Helperに与えても効果はありません。
室谷室谷代表取締役
「画面収録をMDMから無人のまま許可できるか」については、プロファイルでは許可できず、人がSystem Settingsで承認する必要がある、と公式ドキュメントに書かれています。標準ユーザーでも承認できるようにする設定は用意されていますが、承認自体は人による操作が必要です。
テキトー教師テキトー教師DotAI 認定講師
「有効化したかどうかをサーバー側から確認できるか」については、Computer Useもデスクトップ共有も明示的なオプトインで、サーバーから有効化されることはない、という仕様です。
室谷室谷代表取締役
料金や日本からの利用可否、一般提供のスケジュールについては、今回の発表資料では明らかにされていません。続報が出たら、またこの連載で追いかけていきます。
テキトー教師テキトー教師DotAI 認定講師
まとめると、Computer Useは「エージェントが自分の環境でソフトを触れるようにする」という地味だけど効く一手で、その分だけ権限管理と運用設計が問われる機能なんですよね。
室谷室谷代表取締役
そうですね。導入するなら、まずテンプレート環境で権限を付与して動作確認、スナップショット、そして実タスクでの検証。

この順番を守るのが最短ルートだと思います。

Related

関連記事

New Articles

新着記事

ガイド

GLM-5.2とは何か|性能・料金とGLM-5.3登場後の現在地

2026年10月24日
室谷テキトー教師
ガイド

GeminiのGemは2026年11月からスキルへ、移行の時期と使い方を整理

2026年10月24日
室谷テキトー教師
ニュース

Kimi K3.1 Proとは?Moonshot AIの3T級オープンウェイトモデルをベンチマーク実数で検証

2026年10月24日
室谷テキトー教師
ガイド

Qwen3とは?119言語・8モデルの違いとローカル実行、ライセンスの注意点

2026年10月24日
室谷テキトー教師
ニュース

NVIDIAの「Nemotron 3.5 Bolt E4B 4GB」とは?4GBで動く小型オープンモデル

2026年10月24日
室谷テキトー教師
ニュース

OpenRouterの「Security Center」とは?全プランで使えるAPIキー管理機能

2026年10月24日
室谷テキトー教師
ニュース

Replitの「Monitoring Agent」とは?本番障害を自動で修正・再デプロイする仕組み

2026年10月24日
室谷テキトー教師
ニュース

Replit for Governmentとは?公務員が知識をツール化する政府向け提供

2026年10月24日
室谷テキトー教師
ニュース

Claude Mythos 5とは?AISI評価中に実在開発者へ攻撃を試みた事案を解説

2026年10月24日
室谷テキトー教師
ニュース

Anthropicの「Claude形式検証」とは?123のOSSでバグ発見

2026年10月24日
室谷テキトー教師

Join

AIプレナーになる。

入会は審査制です。いまの事業と、AIで何を動かしたいのかを聞かせてください。

参加を申請する