Claude Coworkで画面を自動操作！Computer Useの始め方と安全に使う許可設定

監修者_SD以外

監修者プロフィール

森下浩志

日本最大級のAI情報プラットフォーム「romptn ai」編集長。著書に「0からはじめるStable Diffusion」「0からはじめるStable Diffusion モデル・拡張機能集編」など、AmazonベストセラーのAI関連書籍を多数執筆。AIにおける情報の非対称性を解消するための社内研修や出張講義も行う。

Claude CoworkのComputer Useとは？

まずは、Computer Use がどんな機能なのかをはっきりさせておきましょう。

Computer Use とは、Claude Cowork が画面そのものを直接操作する仕組みです。マウスでクリックし、キーボードで入力し、アプリを開く――人が手でやる操作を、Claude が代わりに行います。

ブラウザでの調べ物、ファイルを開く作業、開発ツールの実行などを、特別な準備なしに任せられます。

「AI が勝手に画面を触る」と聞くと、何をされるか分からず怖く感じる人も多いはずです。実際には、許可した範囲でしか動かず、止めるための仕組みも用意されています。

この記事では、使えるプランや前提から始め、有効化の手順、安全のための許可設定、そしてうまくいかないときの対処までを順番に整理します。海外の断片的なレビューでは見えにくかった全体像を、一本の流れでつかめるようにします。

使えるプラン・OSと前提条件

次に、自分の環境で使えるのかを確認しておきましょう。

Computer Use は、すべてのプランで使えるわけではありません。執筆時点では、Pro と Max の有料プランでのみ、研究プレビュー（research preview）として提供されています。

Cowork 自体は Pro・Max・Team・Enterprise の有料プランで使えます。ただし、その中で画面操作に対応しているのは Pro と Max だけ、という点に注意してください。

研究プレビュー段階のため、対象プランや表示は今後のアップデートで変わることがあります。最新の状況は公式ヘルプで確認するのが確実です。

Connectors・ブラウザ・画面操作の優先順位

ここからは、Claude が実際にどうやってタスクを進めるのかを見ていきます。

Claude Cowork は、同じ作業でも常に「最も確実で速い手段」から順に選びます。その優先順位は次の3つです。

Connectors は API でつながっているため、最も速く安定します。画面操作は人と同じように1つずつクリックしていくぶん、どうしても遅くなります。だからこそ「最後の手段」と位置づけられています。

言い換えると、Gmail や Slack のように連携が用意されたツールは Connectors に任せ、連携が無いアプリだけを画面操作でカバーする、という使い分けです。両者は競合ではなく、役割分担の関係だと考えてください。

Computer Useの始め方（有効化と許可）

仕組みが分かったら、実際に有効化してみましょう。

Computer Use を使い始める手順はシンプルです。執筆時点では、次の流れで有効化します。

オンにしたあとは、Cowork でタスクを頼むだけです。Claude が画面操作を必要と判断すると、アプリにアクセスしてよいかを確認するプロンプトが表示されます。

このとき、Claude はアプリごとに毎回あなたの許可を求めます。許可していないアプリに勝手にアクセスすることはありません。最初は確認しながら、信頼できる操作だけを承認していくと安全です。

macOS では、アクセシビリティや画面収録の許可も求められます。これらを与えないと画面操作が動かないため、案内に従って設定しておきましょう。

安全に使うための仕組みと設定

「どこまで許可され、何が止まるのか」という不安に、ここで正面から答えます。

Claude Cowork の画面操作には、暴走を防ぐための安全機構がいくつも組み込まれています。

注意したいのは、画面操作には Claude とアプリを隔てるサンドボックスが無い点です。だからこそ、許可は必要なものだけに絞り、機密性の高いアプリはブロックリストに入れておくと安心して使えます。

うまくいかない時の失敗パターンと対処

最後に、つまずきやすいポイントを先回りで共有します。

画面操作は便利な一方で、まだ研究プレビュー段階の機能です。実際に使うと、次のようなつまずきが起きやすいことが、独立した検証でも報告されています。

対処のコツは、Connectors で済む作業は Connectors に任せ、画面操作は「他に手段が無いとき」に絞ることです。

また、複雑で長い手順は一度で完璧に終わらないこともあります。うまくいかないときは、タスクを小さく区切って頼み直すと成功しやすくなります。

よくある質問

まとめ

Claude Cowork の Computer Use は、連携の無いツールでも Claude が画面を直接操作して作業を肩代わりしてくれる機能です。最後に要点を振り返ります。

まずは普段の小さな作業を1つ、Computer Use に任せてみてください。許可の出し方や速度の感覚が体で分かれば、どこを任せ、どこを Connectors に回すかの判断がつくようになります。

研究プレビュー段階の機能なので、対象プランや挙動は今後変わる可能性があります。最新の情報は公式ヘルプで確認しながら、安全に試していきましょう。