メインコンテンツへスキップ
見出し画像

【10/2 AIニュース】あなたのPCのアプリを、Copilotが代わりに操作する ─ computer use

    あなたのPCに入っている、APIもコマンドラインもMCPも無い業務ソフト。今朝からGitHub Copilotが、それを自分でクリックして操作できるようになりました。公開試験版・macOSとWindows・コマンド1つです。

    効くのは「AIに任せたいのに、そのソフトには繋ぎ口が無い」と諦めていた人です。既定は無効で、アプリを触る前に毎回許可を聞きます。ただし警告はGitHub自身の文書にあり、「重要な情報を含むアプリで"常に許可"を選ぶのは避けろ」と明記されています。

    今朝は8件。手を動かす人に効くのは3件です。いちばん期限が近いのは GitHub Actions で、macOS 14 の実行環境が11月2日に廃止されます。10月5日から月内に8回、使っているジョブがわざと失敗させられるので、今日のうちに設定を見てください。

    画像
    今朝の8件と、それぞれ何が変わるか(筆者作成)

    今朝の8件(図の内容を文字でも)

    • Copilot の computer use:繋ぎ口の無いアプリを操作する

    • Copilot の Dynamic workflows:段取りをコードで宣言する

    • GitHub Actions の macOS 14 ランナー廃止:11月2日

    • Claude Code 2.1.287 の Claude Mods:実験から出荷へ

    • 同じ版で1M文脈が既定に:接尾辞が要らなくなる

    • Cloudflare の Clef / Clef-flash:画像を読む判定モデル

    • Codex 0.160.0:Guardian が前半の指示を読める

    • Pi 1.0 と Pi Durable:MCP採用の続報

    GitHub Copilot が、APIのないデスクトップアプリをクリックする(computer use 公開試験版)

    GitHubの変更履歴は日本時間10月2日4時11分の掲載。Copilot CLI とアプリの、macOSとWindowsで公開試験版です。

    できることは文書にあります。OSのアクセシビリティツリー(画面の部品を機械が読める形で並べた木構造)か、必要ならスクリーンショットで中身を読み、ボタンを押し、文字を入れ、アプリをまたいで進む。

    Computer use expands the tasks Copilot can help automate, including workflows in legacy and GUI-only software that do not provide an API, command-line interface, or MCP integration.(出典: GitHub Docs「About computer use in GitHub Copilot」2026年10月2日取得)

    つまり何が変わるか。 これまでエージェントに任せられるのは「繋ぎ口がある仕事」だけでした。APIがある、コマンドで叩ける、MCPサーバがある。どれも無い古い業務ソフトは、人が手で触るしかなかった。今朝あいたのは、その最後の層です。

    入れ方はCLIならスラッシュコマンドの computer on、アプリなら設定の Enable Computer Use。既定は無効です。

    画像
    Copilot の computer use:できること4つと、越えられない線3つ(筆者作成)

    「常に許可」の押しどころが、この機能の急所です

    アプリごとに「今回だけ」「常に許可」「拒否」から選びます。常に許可を選ぶと決定は手元に保存され、同じPCのCLIとアプリの両方に効きます。 個別に取り消せますが、走っているセッションで既に与えた権限は戻りません。

    GitHub自身も、画面には他人の情報が映ることがあるとして、重要な情報を持つアプリで"常に許可"を選ぶのは避けろと書いています。

    画像
    Copilot の computer use:許可がどう決まり、どこで止められるか(筆者作成)

    読み方は「できることが増えた」ではなく「許可の粒度が1段粗くなった」です。 MCPなら道具ごとに許可を切れますが、computer use の単位はアプリ1つで、中で何をするかは分けられない。文書が自分から「APIやMCPで済むならそちら」と書いているのは、たぶんそういうことです。

    Claude Code 2.1.287:Claude Mods が実験から出荷に、1M文脈が既定へ

    npmへの公開は日本時間10月2日1時59分。変更履歴の項目は106行(前日の2.1.286は88行)。Added はうち5行で、そのうち2行が同じ仕組みの話です。

    • Claude Mods: プラグインが本体のより深い挙動を変えられる

    • You should know: 同梱の mod で、側に控えたもう1体のエージェントが、あなたやClaudeが見落としていそうなことを指摘する。ただし一次(first-party)のセッションで計測を有効にしている場合に限る


    画像
    Claude Code 2.1.287 で入った3つと、それぞれの条件(筆者作成)

    Mods は「今日できた」ものではありません

    今朝8時の時点で、note内にClaude Modsの記事が3本(日本時間3時29分・3時35分・7時1分)出ていて、どれも新機能として扱っています。ただしModsが今日できたわけではありません。

    anthropics/claude-code の issue を mods で検索すると9月18日以降に少なくとも5件あり、9月29日に閉じた1件では allowManagedModsOnly(人が勝手に入れた mod を許さない管理設定)まで用意済みです。

    環境変数で囲われて試せる状態だったものが、2.1.287で初めて変更履歴の「追加」欄に載った。 出荷の日が今日で、機能ができた日は今日ではありません。

    文脈100万が既定になる(接尾辞が消える)

    Changed 側に、見落としやすい1行があります。

    Changed Opus 4.7+ and Fable to use a 1M context window by default on Bedrock, Vertex, Foundry and the Claude apps gateway, with no [1m] suffix (CLAUDE_CODE_DISABLE_1M_CONTEXT=1 keeps 200K)(出典: anthropics/claude-code CHANGELOG.md 2.1.287・2026年10月2日取得)

    接尾辞を付けて取りにいっていた100万トークンの文脈が、この4つの経路では既定になります。200Kに戻すなら環境変数を1つ立てる。対象は Opus 4.7 以降と Fable です。

    料金を先回りします。Anthropicの第一者の料金表は「Claude 4.6 以降は100万トークンの文脈を標準料金で含む」としていますが、この4経路での割増の有無は変更履歴に書かれていません。

    窓が広がること自体は値上げではありません。ただし文脈が実際に埋まれば、払うトークンは増えます。そこは分けて読んでください。

    その他の動き

    • Cloudflare が判定モデル Clef / Clef-flash を Apache-2.0 で公開。当方はこの1か月この族(Jev・Jeff・Kev・Laya)の新顔を見送り続けてきましたが、今朝のは違います。重みがHugging Faceに出ていて、発表の数時間後(日本時間10月2日4時50分)にはMLX向けの4bit量子化版が出ている=手元のMacで動かせる。視覚エンコーダを持つので画面そのものを分類でき、文脈は64k(Jevは32k)。Jev API互換で宛先を変えるだけで試せます。ただし全勝ではなく、いつ道具を呼ぶべきかを測る When2Call は Jev 80.97 対 Clef 72.37 でJevが上です

    • Codex 0.160.0 が正式版(日本時間10月2日5時19分)。目玉はGuardianで、会話の前半であなたが出した指示と、引き継ぎの文脈を読めるように(任意)。レビュー役が「さっき言ったこと」を忘れる問題への手当てです

    • macOS 14 ランナーが11月2日に廃止。気づかせるために10月中の8回(5・12・16・19・23・26・29・30日の各14時UTCから翌0時UTCまで)、該当ジョブが意図的に失敗します。移行先は macos-latest か macos-15。容量も削られます

    • Copilot に Dynamic workflows(CLI・アプリ・SDK)。多エージェントの段取りをコードで宣言し、互いの所見を検証させ、人の確認を待って再開できます。任せ先をCopilotが決める方式と違い、毎回同じ手順が走る

    • Pi 1.0 と Pi Durable(Earendil・10月1日・MIT)。Hacker Newsに2本が並び、今朝8時台で552点と158点(9時前には611点と177点)。9月末の「MCPは採らない」撤回の続きで、MCP対応は Pi Durable ではなく Pi 1.0 側の Codemode に入りました。ほかに道具の遅延読み込みとキャッシュ温め

    • GitHub日次トレンドは「文脈を節約する道具」と「設計の品」(星数・増加数・順位はすべて今朝8時台のトレンド表示)。context-mode は24,767★(+357/日)でツール出力を隔離し98%削減と謳う。impeccable は73,634★(+602/日・Apache-2.0)で「AIハーネスの作る画面を良くするデザイン言語」。Cursor本体の変更履歴は9月23日付から動きませんが、公式のプラグイン仕様の置き場は10月2日4時55分に更新され6位です


    画像
    Cloudflare Clef / Clef-flash:Jev と並べて何が違うか(公表値・筆者作成)

    今日いちばん効くのはこれ

    GitHub Copilot の computer use です。迷いませんでした。

    数の上でいちばん大きいのは Claude Code 2.1.287 です。106項目で、拡張の仕組みが出荷になり、文脈が100万に広がった。それでも立てなかったのは、2.1.287で変わるのが「すでにAIに任せられていた仕事のやりやすさ」だからです。

    computer use が動かすのは、その外側です。APIもCLIもMCPも無いソフトは、これまでAI化の検討対象にすら入っていませんでした。

    社内の古い申請画面、ベンダーが画面しか出してくれない管理ツール。そこが今朝から試せる側に来ました。

    やれるかは別です。GitHub自身が「違う場所に文字を入れる」「同じ操作を繰り返す」「途中で進めなくなる」が起こりうると書いています。でも検討対象に入ったこと自体が、今日いちばん大きい変化です。

    明日やることを1つに絞るなら、いま「繋ぎ口が無い」と諦めているソフトを1つ思い出して、その画面に他人の情報が映っていないかを確かめてください。 映っていなければ試す資格があります。映っているなら候補から外す。それが「常に許可」を押す前にやる唯一の作業です。

    なぜ書いたか

    朝のニュースまとめとして、過去24時間に出たものを一次情報から並べました。今朝はClaude Modsの記事が数時間で3本立ったのを見て、「今日できた」と「今日出荷になった」の区別は誰かが書いたほうがいいと思ったのが、2件目を厚く書いた理由です。

    前にこの2本を書いています。

    • あなたのコミット前のチェック、何も止めていない:Claude Code 2.1.286 https://note.com/generativeai_new/n/nde44575b5b29

    • 【10/1 AIニュース】あなたが貼ったログ、伏せたはずのトークンが出ていた:Claude Code 2.1.286 https://note.com/generativeai_new/n/nceb6244798f9


     
     
    話題の生成AIツールやAIエージェントを、手元で実際に動かして「本当に使えるか」を観点に情報発信をしています。本業AIエンジニア。

    あなたへのおすすめ