AI最新情報読了 6 分

画面を1回録画するだけでAIが仕事を覚える——Microsoftが無料公開したSkill Recorder

Shiritomo編集部 @shiritomoAI_jp 2026年8月4日更新

パソコンの画面を録画しながら、いつも通りに作業を進める。
ときどき「ここでこのボタンを押して」と声に出して説明する。
それだけで、AIエージェントが同じ手順を覚えて代わりにこなせるようになる——。
Microsoftが2026年8月、そんなツール「Skill Recorder」をオープンソースで無料公開しました。

RPA(定型作業の自動化ツール)やAIエージェントの導入を検討しているSNS運用担当者にとって、導入のハードルを下げる動きとして注目に値します。

先に結論をまとめると：
– Skill Recorderは画面操作と音声解説を録画するだけで、GitHub Copilot CLIが内容を「意図」と「手順」に再構成し、再利用可能なスキルやオートメーションを自動生成します
– MITライセンスで公開されており誰でも無料で使えます。
対応OSはmacOSを主軸に、Windows 11(x64/ARM64)とUbuntuです
– 従来のRPAが座標のクリックをそのまま再現するのに対し、操作を汎用的な手順に変換するため、画面レイアウトが変わっても対応しやすい設計です

何が起きたのか(Xでの盛り上がり)

このツールを紹介したポストが、Xで大きな反応を集めています。

「人が一度やった作業」を、そのままAIエージェントのSkillに変える。MicrosoftのSkill Recorderは発想が面白い。RPAマジでいらんがな。

画面操作を録画すると、GitHub…
— connect24h (@connect24h) 2026年8月1日

投稿者は「人が一度やった作業を、そのままAIエージェントのSkillに変える」発想の面白さに触れ、「RPAマジでいらんがな」と評しています。
この投稿は1500件超のいいねを集め、98,000回以上表示されました(2026年8月4日時点)。
「一度見せるだけで覚える」という手軽さが、RPA導入のハードルだった設定作業の煩雑さを軽く飛び越えている点が、共感を呼んだ理由のようです。

とはいえ、「録画するだけ」がどう動く仕組みなのか、詳しく見てみました。

調べて分かったこと

具体的にどう動くのか？

MicrosoftのGitHubリポジトリによると、Skill Recorderの処理は大きく3段階に分かれています。

まず「記録」の段階で、クリックやウィンドウの切り替え、訪問したページ、任意の音声ナレーションをキャプチャします。
次に「分析」の段階で、GitHub Copilot CLI(GitHubのAIコーディング支援ツールのコマンドライン版)が記録内容を解析し、作業全体の意図と順序立てられたステップのリストに再構成します。
最後に「作成」の段階で、これをもとにスキルまたはオートメーションを生成します。

リポジトリの説明を訳すと、「作業セッションを録画し、Copilot CLIで意図と手順に再構成した上で、Microsoft ScoutやCopilot Cowork、Copilot Studio向けのスキルを構築するデスクトップアプリ」と紹介されています。

microsoft/skill-recorder: Desktop app that records your on-screen work session and uses the GitHub Copilot CLI to reconstruct it as an intent + ordered steps, then builds a reusable Skill or Automation for Microsoft Scout, Microsoft Copilot Cowork, or Copilot Studio.…
— hiroppy | iiba (@about_hiroppy) 2026年8月2日

つまりSkill Recorderは、Microsoftの複数のAI製品群(Scout、Copilot Cowork、Copilot Studio)へ「入力」を供給する録画・変換レイヤーという位置づけのようです。

従来のRPAや類似ツールと何が違うのか？

RPAは画面上の座標やUI要素の位置を記録し、そのまま再生する仕組みのため、画面レイアウトやアプリのバージョンが変わると動かなくなりやすい弱点がありました。
Skill Recorderは、Copilot CLIが操作を「意図」レベルで抽象化するため、この弱点に対応しやすい設計だとされています。

似たコンセプトのツールは他社にもあります。
Anthropicが2026年7月に追加したClaude Coworkの「1回やって見せる」機能や、Codexの Record&Replay機能です。
この中でSkill Recorderが際立つのは、ソースコードが丸ごとMITライセンスで公開され、誰でも無料で確認・改変できる点です。
GitHub上では1500件超のスターを集めています(取得時点)。