Codexで画面操作をAIスキルにする方法

TL;DR

CodexのRecord & Replayで普段の画面操作を録画し、補足指示を加えると、同じ手順を呼び出せるスキルとして保存できる。利用にはプラグインの導入とコンピューターの使用設定が必要で、定型的な情報収集や記事移行、議事録作成の自動化に向いている。

Transcript

はい、こんにちは。ゲトです。この チャンネルは生成最新情報や活用時代を 紹介してます。是非チャンネル登録などお 願いいたします。そして今回のテーマは OpenAIのCEXに自分のいつもの 作業を見せてそれをAIのワークフローと して登録していくっていう方法をですね 紹介していきたいんですけど、今回はです ね、OpenAIのコデxにこちらの レコードアリプレイっていうプラグインが 追加されまして、このプラグインがですね 、めちゃくちゃすごかったんですよ。この プラグインを起動するとパソコンの画面が 録画されます。そしてその録画されてる 画面内で自分がいつもやっている作業を 行うとその動きを録画したデータ がコーデックスが自動的に読み取ってくれ てその動きを再現するようなAI ワークフローのスキ... Read More

Key Insights

• Record & Replayは、ユーザーが実演した画面操作の録画とイベントログを読み取り、同じ流れを再現するCodexスキルへ変換する公式プラグインである。
• 利用準備は、プラグイン画面でRecord & Replayを検索してインストールし、設定の「コンピューターの使用」で対象アプリを有効にする手順である。
• 録画後の補足指示は、処理件数や保存場所、配置規則、使用する操作機能など、映像だけでは伝わりにくい条件を明文化して再現性を高める役割を持つ。
• 作成したスキルは、プラグインの管理画面にあるスキル欄へ保存され、チャットから呼び出して件数などを指定すれば、記録した作業を繰り返し実行できる。
• ウェブ収集の自動化は、指定ジャンルのサイトを検索し、拡張機能でページ全体を取得してPDF化し、新規フォルダーへまとめる一連の操作として実演された。
• X分析の自動化は、指定期間のアナリティクスをCSVで保存し、個別投稿のページ画像も取得して、同じフォルダーへ集約する定型作業に利用できる。
• 記事移行の自動化は、コピーだけでは移せない画像を一度デスクトップへ保存し、移行先へ改めてアップロードする手順を組み込むことで実現された。
• Notta関連の自動化は、動画のアップロード、文字起こしの取得、共有リンクとパスワードの発行、目次の作成と保存までの複数工程を処理できた。

Questions & Answers

Q: CodexのRecord & Replayとは何ですか？

Record & Replayは、ユーザーがパソコン上で行う画面操作を録画し、そのイベントログをCodexが読み取って、同じ作業手順を再現できるスキルへ変換する公式プラグインです。完成したスキルは管理画面に保存され、チャットから呼び出して繰り返し使えます。

Q: Record & Replayを使い始める方法は？

Codex左上のプラグイン画面を開き、「Record」と検索してRecord & Replayをインストールします。続いて設定画面の「コンピューターの使用」を開き、対象アプリをオンにします。その後、プラグインの「チャットで試す」から既定の指示を送信すると録画を開始できます。

Q: 録画した操作をスキルにする方法は？

録画開始後、スキル化したい作業を普段どおりに画面上で実行し、完了したら録画を停止します。Codexに録画のイベントログを読み込ませ、作業を再現するスキルを作成させます。動画だけで条件が伝わらない場合は、件数や保存先なども文章で追加します。

Q: 作成したスキルの再現性を高める方法は？

録画だけで完結させず、何を変数として扱うか、どこへ保存するか、どの順序で配置するかを補足指示として明記します。実演では、ユーザー指定数の連番フォルダーを作ること、右上へ整理すること、必ずコンピューター操作を使うことを追加し、意図を具体化しました。

Q: ウェブサイトの資料収集を自動化する方法は？

ブラウザーで対象サイトを検索し、GoFullPage拡張機能でページ全体を取得してPDFとして保存し、新しく作ったデスクトップ上のフォルダーへ格納する流れを録画します。ジャンルや取得件数を変更可能な条件として補足すれば、別分野の参考サイト収集にも同じスキルを使えます。

Q: Xアナリティクスのデータ収集を自動化する方法は？

Xのアナリティクス画面で対象期間を選び、全体データをCSVで保存した後、個別投稿のページを開いて画像を取得する操作を記録します。スキル実行時に「2週間分」などと期間を指定すると、CSVと個別投稿の画像を新しいフォルダーへまとめる作業を再現できます。

Q: ブログ記事の移行を自動化する方法は？

移行元の記事URLを指定し、本文を移すだけでなく、記事内の画像を一度デスクトップ上へ保存してから移行先へアップロードする手順をスキル化します。コピーだけでは画像や不要な要素の扱いがうまくいかないサービスでも、この手順により記事を整えながら移行できます。

Q: どのような作業がRecord & Replayに向いていますか？

毎回ほぼ同じ画面操作を繰り返す定型作業が向いています。紹介例には、ウェブページの保存、Xの分析データ収集、ブログ記事の移行、Nottaへの動画アップロード、文字起こしの取得、共有リンクや目次の作成があります。特に情報の保存やコピーを順番に行う作業で活用できます。

Summary & Key Takeaways

• Record & Replayは、ユーザーが画面上で実演した操作をCodexに読み取らせ、再利用可能なスキルへ変換する公式プラグインである。利用前にプラグインをインストールし、設定画面の「コンピューターの使用」で対象アプリを有効にする。録画を開始して普段の作業を実行し、終了後にイベントログを読み込ませると、操作を再現するためのスキルが作成される。

• 実演では、デスクトップに連番フォルダーを作り、右上へ番号順に整理する操作を記録した。録画後には、開始番号、ユーザーが指定する作成数、配置方法、コンピューター操作を必ず使うことなどを文章で補足した。完成したスキルはプラグイン管理画面のスキル欄に保存され、呼び出して「1から5まで作成」と指示すると、フォルダー作成と配置を自動で再現できた。

• 活用例として、指定ジャンルのサイト検索とページ全体のPDF保存、XアナリティクスのCSVと投稿別画像の収集、Substack記事から別サービスへの記事移行、Nottaでの動画処理や文字起こし取得が紹介された。特に、ログイン済みサービスの画面操作や毎回繰り返す定型作業に適している。再現性を高めるには、録画だけで完結させず、変数や保存先、例外的な手順を補足することが重要である。