ComfyUI で高品質なクリエイターワークフローを構築・運用・拡張する方法
本文の状態
日本語全文を表示中
詳細モードで約16分の本文を読めます。
同じ出来事の情報源
この情報源を基点に整理
NVIDIA Developer Blog
本記事は、ComfyUI を利用して高品質なクリエイター向けワークフローをどのように構築し、運用し、スケールさせるかについて具体的な手法を解説している。
Source Article
元記事を日本語で読む
本文に関係しない購読案内、埋め込み通知、サイト内プロモーションは除いています。
クリエイティブおよび可視化チームは現在、より少ない人員で、より多くのフォーマットにおいて、より多くのアセットを生産しています。生成 AI はこの作業を加速し、かつて数時間の手動作業を要していたタスクを、自動化された反復可能なパイプラインに圧縮します。
ComfyUI は、NVIDIA RTX GPU 上でローカルで動作するオープンソースのノードベース型クリエイティブツールです。画像生成、動画合成、言語モデルを接続し、クラウドへの依存やクライアントからのデータ流出なしに、チームがカスタマイズ・拡張可能なパイプラインを構築できます。
本ガイドでは、NVIDIA の GTC 2026 DLI コース「ComfyUI でデザインおよび可視化のための生成 AI ワークフローを作成する」Create Generative AI Workflows for Design and Visualization in ComfyUI から派生し、NVIDIA GenAI Creator Toolkit に含まれる 3 つの生産環境対応ワークフローを紹介していきます。各ワークフローはスタンドアロン型であり、NVIDIA RTX 上でローカル実行が可能です。
*動画 1. ComfyUI on NVIDIA RTX が生成 AI クリエイティブ ワークフローを加速*
本ガイドで達成できること
本ガイドを終了する頃には、以下ができるようになります:
- 画像を前景(フォアグラウンド)、中景(ミッドグラウンド)、背景(バックグラウンド)の別々のレイヤーに分解し、それぞれにクリーンなアルファマスクを付与して、あらゆる合成ツールへ直接取り込める状態にする
- 写真から不要なオブジェクトを除去し、AI がその部分に何があるべきかをシームレスに補完する。画像の他の部分は一切変更しない
- 写真をテクスチャ付き 3D モデルに変換する(Windows のみ)。.GLB フォーマットの 3D ファイルとして保存し、プレビズやレイアウトの起点として開いて使用可能にする
各ワークフローは、事前に構築されたノードグラフとして ComfyUI に直接読み込まれます。画像をアップロードして「実行」をクリックするだけで、結果が得られます。
開始前に知っておくべきこと
- ウェブブラウザとファイルのアップロードに基本的な慣れがあること
- コマンドラインからスクリプトを実行することに初心者レベルで慣れていること
- ComfyUI の経験は不要です。ワークフローは事前に構築されており、読み込んで実行するだけです
- 画像の概念(レイヤー、マスク、アルファチャンネル)に親しんでいると役立ちますが、必須ではありません
前提条件
ハードウェア要件:
- Windows: VRAM 24 GB の NVIDIA RTX GPU。32 GB 以上を推奨
- Linux: VRAM 32 GB の NVIDIA RTX GPU。48 GB 以上を推奨
- これらのワークフローに必要なモデル用に、ディスク領域が 150 GB 利用可能であること
ソフトウェア要件:
- 必須:Windows または Ubuntu Linux オペレーティングシステム
- 必須:Git(こちらからインストール)
- 必須:ComfyUI(Windows のデスクトップアプリ、または Linux の手動インストール)
- 3D オブジェクトワークフロー(モジュール 08)に必要:huggingface.co/facebook/dinov3-vitl16-pretrain-lvd1689m にアクセスし、ログインして「同意してリポジトリにアクセス」をクリック
所要時間とリスク
- 推定所要時間:30 分間のハンズオン(初回実行時はモデルのダウンロードで 50 GB 以上が必要)
- リスクレベル:低
すべてのワークフローは、入力画像に対して読み取り専用です。元のファイルは一切変更されません。
- 生成された出力は、お使いのマシンの ComfyUI の output/ ディレクトリに保存されます。
- ロールバック:インストーラーは ComfyUI インストールにファイル(カスタムノード、ワークフロー、モデル)を追加するだけです。元に戻すには、custom_nodes/ から追加されたフォルダを削除し、models/ からダウンロードしたモデルを削除してください。
詳細手順
ステップ 1. ワークフローのインストール
Windows—コマンドプロンプトを開き(スタートメニューで「cmd」を検索)、以下を実行します:
(ヒント:事前に huggingface.co/facebook/dinov3-vitl16-pretrain-lvd1689m を訪問し、ログインして「同意してリポジトリにアクセス」をクリックすることを忘れないでください。)
git clone https://github.com/NVIDIA/NVIDIA-GenAI-Creator-Toolkit
cd NVIDIA-GenAI-Creator-Toolkit
install.bat C:\path\to\ComfyUI --modules 02,03,08
ComfyUI のインストール場所(デスクトップアプリ設定時に選択したフォルダ)を指定してください。ここには .venv、models、custom_nodes フォルダが含まれています。
場所がわからない場合は、「デスクトップアプリの設定」>「情報」>「引数:–base-directory C:\path\to\your\installation-location」を確認してください。
Linux—詳細手順はこちら:NVIDIA-GenAI-Creator-Toolkit/LINUX_COMFYUI_INSTALLATION.md at main · NVIDIA/NVIDIA-GenAI-Creator-Toolkit:
git clone https://github.com/NVIDIA/NVIDIA-GenAI-Creator-Toolkit
cd NVIDIA-GenAI-Creator-Toolkit
bash install.sh /path/to/ComfyUI --modules 02,03
インストーラーはすべてを処理します:AI モデル(合計約 150 GB)のダウンロード、必要なプラグインのインストール、およびワークフローの ComfyUI へのコピーを行います。インターネット接続状況によっては 30〜60 分かかる場合があります。
完了したら、ComfyUI を起動してください。
ステップ 2. 画像をレイヤーに分解する

作成するもの: フォアグラウンド、ミッドグラウンド、バックグラウンドの各要素が分離された PNG レイヤーとして破損した写真。それぞれにきれいな透過領域が含まれています。これらをそのまま Photoshop、After Effects、DaVinci Resolve、またはレイヤーをサポートする他のツールに直接読み込めます。
ワークフローを開く: ComfyUI でBrowse Templates(上部メニュー)をクリックし、NVIDIA Creative Workflows セクションにある02-image-deconstructionを探します。クリックして開きます。
実行方法:
- Load Imageボックスで、明確な被写体がある写真をアップロードしてください。ポートレート、製品写真、建築撮影、または前景と背景に何かが含まれるシーンなどです。
- Runをクリックします。
これで完了です。マスクは不要です。AI が自動的に画像の奥行きを読み取ります。
期待される結果: レイヤーごとに 1 つずつ、合計 3〜4 の PNG ファイルが生成されます。各ファイルには他のレイヤーが存在した部分が透過領域として含まれています。背景レイヤーには、以前は前景があった部分も埋め込まれます。
(ヒント:明確な奥行きがある写真が最も効果的です。壁の前の人、テーブルの上の製品、空に映る建物などです。平坦で均一な画像は、AI が読み取るべき奥行きがないため、興味深いレイヤーには分離されません。)
さらに進んで
これをモーショングラフィックスのワークフローと組み合わせることで、各レイヤーを個別にアニメーション化してパララックス効果を生み出したり、レイヤーごとにカラーグレーディングを調整して画像全体に触れずに雰囲気を変化させたりできます。
ステップ 3. 写真からオブジェクトを削除する
image*図 2. 写真からオブジェクトを削除するための ComfyUI ワークフローの例***
作成できるもの: 背景にいる人物、ロゴ、不要な小物など、望ましくない要素が含まれている任意の写真から、その部分を除去し、本来あるべきもので置き換えたクリーンなバージョン。
ワークフローを開く: ComfyUI でBrowse Templates(テンプレートの閲覧)をクリックし、03-targeted-inpainting(対象領域へのインペインティング)を探してクリックして開きます。
実行します。
image*図 3. 生成 AI を活用した知的なオブジェクト削除***
- Load Image(画像の読み込み)ボックスでクリックし、編集したい写真をアップロードします。
- 画像サムネイルを右クリックして「マスクエディタ」を開きます。ブラシを使って削除したい部分に白く塗りつぶしてください。白色は「ここを変更」、黒色は「そのままにする」を意味します。完了したら「保存」をクリックします。
- 「実行」(または「プロンプトのキュー追加」) をクリックします。
期待される結果: 塗りつぶした領域がきれいに除去され、埋め込まれた写真が表示されます。結果は ComfyUI の output/ フォルダに保存されます。
ヒント: 対象物自体よりも少し大きめに塗ることで、AI に余白を与えると、よりきれいな仕上がりが得られることが多いです。塗りつぶしの結果が思った通りでない場合は、テキストプロンプトボックスに「木製の床」や「無地の白い壁」など、そこに存在すべきものの説明を追加してみてください。
何も変化がない場合: マスクを塗るのを忘れている可能性があります。再度画像を右クリックして、実行する前に塗りつぶしを行ってください。
さらに踏み出す
このワークフローは、ものを「追加」することも可能です。テキストプロンプトで対象物を記述し、表示させたい場所に塗りつぶせば、AI が周囲の画像の照明やスタイルに合わせたそのオブジェクトをシーン内に生成します。
ステップ 4. 写真を 3D モデルに変換する
Windows のみ。 このワークフローは Windows を必要とします。Linux でのサポートは現在利用できません。
image*図 4. 写真を 3D モデルに変換するための ComfyUI ワークフロー***
作成するもの: 任意の物体の単一写真から、テクスチャ付きの 3D モデル(GLB ファイル)を作成します。Blender、ゲームエンジン、またはその他の 3D アプリケーションで開き、プレビジュアライゼーション、レイアウト設定、さらなる作業に活用できます。
実行前の追加ステップ: このワークフローに使用する AI モデルは、Meta からの無料アカウント承認が必要です。huggingface.co/facebook/dinov3-vitl16-pretrain-lvd1689m にアクセスし、ログインして同意してリポジトリにアクセスするをクリックしてください。承認には通常 24〜48 時間かかります。インストーラーはダウンロードを試みる前にあなたに通知します。
ワークフローを開く: ComfyUI でテンプレートの閲覧をクリックし、08-image-to-3dを見つけてください。
実行方法:
- 画像の読み込みボックスで、物体の写真(家具、小道具、靴、彫刻など)をアップロードしてください。最初の試行には、単一背景に置かれた明確な被写体が最も適しています。
- 実行をクリックします。
期待できる結果: 写真の形状と表面に一致する 3D モデルが生成されます。ワークフローでは、回転プレビューが ComfyUI 内で直接表示されます。GLB ファイルは output/ フォルダにも保存されるため、Blender でファイル > インポート > glTFを選択して開くことができます。
(ヒント:写真が清潔であるほど、モデルの品質は向上します。単一背景で撮影し、物体全体が見えるようにし、極端なアングルを避けてください。正面または 3/4 アングルのショットが、AI が処理する情報量 maximizes されます。)
追加情報: NVIDIA-GenAI-Creator-Toolkit/workflows/08-image-to-3d at main · NVIDIA/NVIDIA-GenAI-Creator-Toolkit
ステップ 5. クリーンアップ
作業が完了したら、GPU メモリとシステムリソースを解放するために ComfyUI を停止してください。
Windows: システムトレイまたはタスクバーから ComfyUI デスクトップアプリを閉じます。Linux: ComfyUI が実行されているターミナルで Ctrl+C を押します。
生成された出力は ComfyUI の output/ ディレクトリに、ダウンロードしたモデルはすべて ComfyUI/models/ に残されます。何も削除されません。
ディスク容量を解放するには、--clean オプションを使用してモジュールのモデルファイルを削除してください。他のインストール済みモジュールと共有されているモデルは自動的に保持されます。
install.bat C:\path\to\ComfyUI --clean --modules 02,03
bash install.sh /path/to/ComfyUI --clean --modules 02,03
中断した場所から再開するには、ComfyUI を再度起動してワークフローを再読み込みしてください。
次のステップ
これら 3 つのワークフローは、より大規模なパイプラインコレクションへの入り口です。さらに深く掘り下げたいときに待っている内容は以下の通りです:
- AI プロンプト強化: 粗いクリエイティブプロンプトを最適化されたモデル対応の説明に書き換えるエージェントを構築し、その結果から画像を生成して即座に違いを確認できるようにします。
- 360°環境および HDRI 生成: 任意の写真を取り込み、Unreal、Blender、V-Ray、または Arnold で使用可能な本番環境対応の HDRI ライトを生成します。現場でのキャプチャは不要です。
- Playblast からシネマティック動画へ:Blender からのフラットなグレーボックスレンダリングと、1 つのスタイル参照画像を入力します。すると、照明が施されスタイライズされた動画ショットが出力されます。スタイル画像を差し替えるだけで、再アニメーションすることなく複数の芸術的方向性を探索できます。
- PBR マテリアルパイプライン:あらゆる画像からクリーンでシームレスなテクスチャを抽出し、それらを完全な PBR(物理ベースレンダリング)マテリアルセットに分解します。具体的には、アルベド、ラフネス、メタリック、ノーマル、およびハイトマップです。
追加モジュールをインストールするには、ここ NVIDIA-GenAI-Creator-Toolkit/workflows のモジュール番号を指定してインストーラーを再度実行してください。すでにインストール済みのノードは自動的にスキップされます:
Windows:
install.bat C:\path\to\ComfyUI --modules 01,04,05
Linux:
bash install.sh /path/to/ComfyUI --modules 01,04,05
完全な DLI コース では、すべてのワークフローを詳細なドキュメント、サンプルアセット、そしてこれらを連結して完全な生産パイプラインへと統合するキャップストーンプロジェクトとともに解説しています。
トラブルシューティング
症状**原因**解決策
ComfyUI が 127.0.0.1:8188 で読み込まれないComfyUI が実行されていないWindows:スタートメニューまたはデスクトップショートカットから ComfyUI デスクトップアプリを起動。Linux:ComfyUI ディレクトリで source venv/bin/activate && python main.py を実行
install.bat から出力が表示されないGit Bash または PowerShell から実行しているコマンドプロンプト (cmd.exe) を開き、そこから install.bat C:\path\to\ComfyUI を実行してください
ワークフローは読み込まれるが、ノードが赤色/欠落して表示される
カスタムノードがインストールされていない
install.bat または install.sh を実行して ComfyUI を再起動してください。または、ComfyUI Manager > Install Missing Custom Nodes から不足しているカスタムノードをインストールしてください。
ComfyUI で「モデルが見つかりません」というエラーが表示される
モデルファイルが欠落しているか、まだダウンロード中である
–modules 02,03,08 を指定してインストーラーを再実行し、モデルのダウンロードをやり直してください。各モジュールの models.md ファイルを確認して、手動ダウンロードリンクを探してください。
キューは実行されるが、出力画像が変更されていない(ワークフロー 1)
マスクが描画されていない
Load Image ノード内のイメージサムネイルを右クリックし、「Open in MaskEditor」を選択します。変更したい領域に白で塗りつぶし、キューに入れる前に「Save」をクリックしてください。
インペインティングの塗りつぶしが不自然またはぼやけている
モデルに対して、何を塗りつぶすべきかに関する文脈情報が必要
テキスト条件付けノード(text conditioning node)に説明を追加してください。マスクされた領域に表示されるべき内容を記述します(例:「木製の床」、「無地の壁」、「芝生」など)。
画像分解で 1〜2 レイヤーのみが生成される(ワークフロー 2)
画像の深度複雑度が低い
被写体と背景の分離が明確な写真を使用してください。明瞭な近景/遠景の奥行きを持つ画像が最も効果的です。
Trellis2 の出力メッシュに穴や欠落したジオメトリがある(ワークフロー 3)
対象物が部分的に隠れているか、極端な角度から撮影されている
対象物全体が見える写真を使用してください。できれば無地の背景に対して撮影したものが望ましいです。正面または 3/4 アングルからのショットが最もクリーンなジオメトリを生成します。
ワークフロー3は初回実行時にモデルエラーで失敗します。DINOv3 モデルがまだダウンロードされていません。huggingface.co/facebook/dinov3-vitl16-pretrain-lvd1689m で Meta のデータ利用規約に同意し、インストーラーを再実行してください。承認は通常 24〜48 時間以内に付与されます。
*表 1. ComfyUI ワークフローのトラブルシューティング:問題と対策*
クリエイティブパイプラインを NVIDIA RTX で駆動 → RTX PRO Workstations や GeForce RTX GPU をご活用ください。
関連記事
今日のまとめ
AIデイリーブリーフで今日の重要ニュースをまとめ読み