【ComfyUI】AIエージェントに丸投げでインストールから画像生成まで

画像・動画生成AIの世界で大人気の「ComfyUI」。その圧倒的なクオリティとカスタマイズ性に惹かれつつも、「環境構築が難しそう」「コマンド操作が怖い」「PythonのバージョンでPCがおかしくなったら嫌だ」と二の足を踏んでいませんか?

パソコン初心者や非エンジニアの方でも、Aエージェント(Codex、Claude Code Antigravity等)に指示を丸投げするだけで、PC環境を一切汚さずにComfyUIの環境構築からAI動画生成までを数分で終わらせる方法をご紹介します。

「チャットするだけ」で画像生成するまで

通常、ComfyUIで動画を作るには以下の手順が必要です。

  1. GitやPythonをPCにインストールする
  2. コマンドプロンプトで仮想環境を作り、複雑なコマンドでPyTorchなどをインストールする
  3. Hugging Faceから巨大なモデルを自力で探し出し、適切なフォルダに配置する
  4. ComfyUIのGUIを開き、無数の「ノード」をスパゲッティのように線で繋ぐワークフローを組む

今回の手法では、これらを一切行いません。
ユーザーが行うのは、ComfyUI用のフォルダを作ってプロジェクトを開始して、AIエージェントのチャット欄に以下のように打ち込むだけです:

このフォルダにComfyUIの環境を作って、サイバーパンクの画像生成して。既存のシステムには触らず、このフォルダだけで完結するように。

これだけで、AIが裏側でPCのスペックを調べ、必要なプログラムを書き、ComfyUIのインストールや必要なモデル等をダウンロードして画像を出力し、ブラウザでアクセスできる状態まで自動で仕上げてくれます。

PCを一切汚さない「完全隔離(Isolated)環境」の作り方

初心者が一番恐れるのは「Pythonのインストールによって、学校や仕事で使っているPCの他のシステムがおかしくなること」です。

この問題を解決するため、プロジェクトフォルダ(Dドライブなど)の外には1つのファイルも作らず、書き換えも行わない「完全ローカル完結型」の構築手法を採用しました。

秘密兵器:Astral uv

通常はPC全体にインストールするPythonですが、今回は超高速パッケージマネージャーである uv を使用します。
uv は、プロジェクトフォルダの内部だけに独立したスタンドアロン版のPython(今回は Python 3.11.15)を自動で引っ張ってきてくれます。

インストールされるライブラリ(PyTorch等)や、ダウンロードされるモデル、一時キャッシュに至るまで、すべてプロジェクトフォルダ内の隠しフォルダ(.uv_cache.hf_home)に強制的に閉じ込めます。不要になったら、このプロジェクトフォルダごとゴミ箱に捨てるだけで、PCは元のまっさらな状態に戻ります。

裏側で動く「APIワークフロー」自動化の仕組み

初心者がノードを組まなくても動画が作れる秘密は、ComfyUIの「APIワークフロー(JSON)」にあります。

AIエージェントは、画像生成用モデルの DreamShaper 8 を使った「見えないワークフロー図面(JSONファイル)」をあらかじめ作成しておきます。

チャットでプロンプトを入力すると、AIが作成したPythonスクリプト(run_pipeline.py)が自動で動き出し:

  1. JSON図面の中の「テキストプロンプト」部分だけを書き換える
  2. バックグラウンドでComfyUIサーバーを立ち上げる(今回はhttp://127.0.0.1:8188)
  3. API経由でComfyUIに生成命令を送る
  4. 自動で画像を生成しoutputに画像を出力

最初から最後まで、黒い画面(コマンドライン)や複雑なノード画面を触る必要がありません。

生成結果と動作確認

今回の自動化パイプラインの実行により、以下の成果物が得られました:

  1. 自動生成画像: サイバーパンクの画像が output フォルダ内に出力されました。
  2. Webアクセス: サーバーは起動したまま維持されているため、ブラウザで http://127.0.0.1:8188 を開くだけで、いつでもComfyUIの操作画面に入ることができます。

注意点

AIエージェントの承認権限の設定によっては、まだ計画中のつもりなのに勝手に依存ライブラリをインストールしたり書き換えたりしますので、慣れるまでは都度承認してから作業を進める設定と、前もってチャットに計画だから作業開始しないように伝えると良いと思います。

AIエージェントと共創する新しい制作スタイル

これまでは「構築の難しさ」や「エラーの多さ」がハードルになっていたAIツールですが、優秀なAIエージェントをペアプログラミングのパートナーに迎えることで、初心者でもそのパワーを100%享受できるようになりました。

PC環境を一切汚さず、ノードの配線もAIに任せ、自分はクリエイティブなアイデア(プロンプト)をチャットで伝えるだけ。そんな新しいAI生成ライフを、あなたも始めてみませんか?