ComfyUI で制作された短編アニメ映画がアカデミー賞ノミネート
Xindi Zhang は ComfyUI を用いて、AI が個人のビジョンを拡張するツールであることを証明し、既存のステレオタイプに挑戦する短編アニメーション映画 'The Song of Drifters' を制作した。
キーポイント
AI ツールとしての再定義
作者は AI が「安価で画一的な生成」の象徴であるというステレオタイプに挑戦し、個人のビジョンを拡張・増幅するツールとして位置づけた。
ノードベースによる完全制御
ComfyUI のノード構造を採用することで、生成プロセスの各段階に参加し、自動化ではなく手動での細部制御を実現した。
独自素材に基づくスタイル転送
モデルに他のアーティストの作品を学習させるのではなく、作者自身のイラストや撮影映像、Blender 制作の 3D アニメーションをベース素材として使用し、AI はそれらのリスタイリングのみを行った。
ハイブリッド・パイプラインによる制作効率化
自作の映像を学習データとして使用し、ComfyUI を活用したハイブリッドな制作パイプラインによりレンダリング時間を短縮し、アイデア考案に集中できる環境を整えた。
業界が求めるスキルセットの変化
伝統的なクラフトと AI ツールの両方を理解する人材への需要が高まっており、ComfyUI の経験が大手スタジオやデザインエージェンシーの求人要件として登場し始めている。
AI を目的を持って活用することの重要性
AI は単なるツールであり、最も重要なのは物語そのものであり、ツールを深く理解することでこそ、真に自分だけの作品を作る自由が得られると提唱している。
Comfy Education Initiative の発表
教育機関向けに割引や専用コミュニティへのアクセスを提供する新プログラムが近日開始される予定である。
重要な引用
"I wanted to prove that AI could be an amplifier for personal vision, not a replacement for it."
"Unlike most AI-generated videos, which use other artists' works from the model, I use my own illustrations as the style guide."
It's not the tool that steals my art. It's the tool that expands my art.
If you use AI, use it on purpose. The more you understand it, the more freedom you have to make work that is genuinely yours.
The Comfy Education Initiative is coming soon!
Register your interest here to get early access to educational discounts, education exclusive slack / discord communities, and be notified as soon as the program is released.
影響分析・編集コメントを表示
影響分析
この記事は、AI アート制作における「ブラックボックス化」への対抗策として、ComfyUI を用いた透明性のあるワークフローの重要性を示しています。クリエイターが生成プロセスを完全に支配し、自身の表現力を拡張する手段としての AI の可能性を具体例で示すことで、業界内の創作倫理と技術的アプローチに新たな視点を提供します。
編集コメント
この事例は、AI ツールが単なる生成エンジンではなく、クリエイティブな意思決定を支援する高度なプラットフォームへと進化していることを示唆しています。特に ComfyUI のような柔軟なワークフロー環境の普及が、AI アートの質的転換を加速させる鍵となるでしょう。
「流浪者の歌」について教えてください。この作品は何をテーマに、どのようにして生まれたのでしょうか。
『流浪者の歌』は、故郷への想いを胸に抱えつつも、見知らぬ街をさまよう人々を描いたドキュメンタリーアニメーションです。彼らは帰るべき場所と、新しい居場所の狭間で揺れ動いています。タイトルは、故郷を去る子供への母親の愛を詠んだ古代中国の詩からの直訳です。私の作品では、視点を変えて「子供」側の立場から物語を展開させています。
この映画は ComfyUI で制作しました。当初は AI の能力を誇示しようとしたわけではありません。むしろその逆を目指していました。
「AI 生成の作品は画一的で安っぽいという偏見に挑戦したかったのです。AI は個人のビジョンを代替するものではなく、それを増幅させるツールであるべきだと証明したかったんです」
あなたはエンジニア出身ではなくイラストレーターですね。どうやって ComfyUI にたどり着いたのでしょうか。
私はもともとイラストレーターでした。ロードアイランド工科大学でイラストレーションの学士号を取得し、ゲームのコンセプトアーティストとして働いていました。その中でシェーダーや Unity、Unreal Engine などの技術にも触れるようになりました。こうした背景が新しいツールを素早く習得する力につながったのです。その後、南カリフォルニア大学の映画芸術学部に進み、エクスパンデッド・アニメーションの修士号を取得しました。そこでキャシー・スミス教授に師事しています。
修士論文の年までには、私は Stable Diffusion の標準的なインターフェースから ComfyUI へと移行していました。なぜなら、私はノードベースの構造で思考するタイプであり、プロセスのすべてのステップを細かく制御したかったからです。多くの AI ツールはワンクリックで完結します。「プロンプトを入力してクリックすれば、結果が得られる」。しかし、それが私が求めていたものではありません。
「私はプロセスそのものをコントロールしたいのです。そして、プロセスこそが結果そのもの以上に重要だと考えています。私のようなアーティストにとって、何かを自動化したくはありません。ワークフローの設計におけるすべての段階に自ら参加したい。そこがこの作業の醍醐味です」
このパイプラインについて詳しく教えてください。具体的にモデルにはどのようなデータを投入していたのですか？
風船のシーケンスにおける Xindi の ComfyUI ワークフロー。出典：xindizhangart.com。
私の核となる技術は、IP-Adapter と ControlNet を駆使した Stable Diffusion 1.5 によるスタイル転送です。最も重要だったのは、モデルに投入した素材そのものです。それはすべて私自身の作品でした。ベースとなった素材は、iPhone 15 Pro で撮影した実写映像と、Blender で制作した 3D アニメーションです。AI は私がすでに作り上げたイメージを再解釈し、スタイルを変えただけです。ゼロから創造したわけではありません。
『漂流者の歌』のスタイルガイド用静止画。出典：xindizhangart.com
「AI 生成動画の多くがモデルから他者の作品をスタイル参照として利用するのに対し、私は自分の描いたイラストをスタイルガイドとして使っています。」
Xindi のスタイル転送ワークフロー（json）は ComfyUI でダウンロード可能です。
また、自分が住んでいた都市の映像素材を用いて独自に LoRA をトレーニングしました。その映像撮影自体がドキュメンタリー制作において重要なプロセスとなりました。かつて過ごした街を歩き回ることで、私はこれらの都市とのつながりを取り戻すことができました。最終カットに使われるのはその一部に過ぎませんが、学習データとして映像は視覚表現の中に生き続けています。このハイブリッドなパイプラインにより、最終的なビジュアルのレンダリングが効率化され、アイデア考案に割く時間を確保できました。
夢のシーンスでは、3D アニメーションと AI によるモルフィング（変形）を組み合わせ、抽象から具体へと移行する表現で、半覚醒状態のような感覚を再現しました。
制作裏話のクリップ。AI によるモルフィング。出典：Xindi Zhang
Xindi の AI モルフィングワークフロー（json）は Github でダウンロード可能です。
本作は学生アカデミー賞で金賞を受賞し、アカデミー賞ノミネート候補にも残りました。次なるステップは？
私はキャリアのためではなく、クリエイティブな理由からこの映画を作りました。正直に言えば、それが就職につながるとは全く考えていませんでした。しかし 2025 年の学生アカデミー賞で金賞を受賞し、アカデミー賞ノミネート候補に残ったことで、連絡が殺到するようになりました。
Xindi Zhang at the 2025 Student Academy Awards. Source: Oscars Press Office
人々が求めたのは、伝統的な職人の技と AI ツールの両方を理解できる人材でした。現在私は Amazon AI Studio で AI クリエイティブとして働き、カスタム生産パイプラインの構築に携わっています。業界全体で同じ需要が高まっており、大手スタジオやデザインエージェンシーの求人要項でも ComfyUI の経験が求められるケースが増えています。
このツールは私の芸術を奪うものではなく、むしろ拡張するものです。
他の学生へのアドバイスは、特定のソフトウェアの話ではありません。AI はアイデアを伝えるための単なる道具に過ぎません。何よりも重要なのは物語そのものです。AI を使うなら、目的を持って使いこなしてください。その仕組みを理解すればするほど、自分だけの作品を作る自由が広がります。
シンディ・チャンは中国出身のアニメーション監督であり、ビジュアルアーティストです。イラストレーションを専攻して2020年にロードアイランドデザインスクール（RISD）で学士号を取得し、2025年には南カリフォルニア大学（USC）で拡張アニメーションの修士号を取得しました。彼女の作品『漂流者の歌』は、2025年の学生アカデミー賞で金賞を受賞し、第98回アカデミー賞にもノミネートされました。
現在、彼女はアマゾン AI スタジオで AI クリエイティブ職に就き、ソニーミュージックの没入型スタジオともコラボレーションしています。また、現在はフロリダ大学南校の教員としても活動しています。
「Comfy 教育イニシアチブ」がまもなく開始されます！早期アクセスによる教育割引や、教育限定の Slack/Discord コミュニティへの参加権、プログラム公開時の通知を受け取るには、こちらから興味を登録してください。
ComfyUI ニュースレターをお読みいただきありがとうございます。新着投稿の受信や Comfy 関連情報の最新状況を知るために、無料で購読してください。
原文を表示
Tell us about The Song of Drifters. What is it about, and where did it start?
The Song of Drifters is a documentary animation about people caught between leaving and returning, wanderers who drift through unfamiliar cities, holding onto memories of a homeland out of reach and searching for a sense of belonging. The title is a direct translation from an ancient Chinese poem about a mother’s love for a child who leaves her hometown. My version takes the opposite point of view, from the child’s perspective.
I built the film in ComfyUI. When I started, I was not trying to show what AI could do. I was trying to prove something almost opposite.
“It started as a challenge to the stereotype that AI-generated work is generic and cheap. I wanted to prove that AI could be an amplifier for personal vision, not a replacement for it.”
You came to this from illustration, not engineering. How did you end up in ComfyUI?
I started as an illustrator. I earned my BFA in illustration at the Rhode Island School of Design, then worked as a game concept artist, where I picked up shaders, Unity, and Unreal. That technical side made me a fast learner with new tools. Later I went to USC’s School of Cinematic Arts for an MFA in Expanded Animation, where I studied with Professor Kathy Smith.
By my thesis year I had moved from Stable Diffusion’s standard interfaces to ComfyUI, because I think in node-based structures and I wanted to control every step. Most AI tools are one click: you prompt, you click, you get a result. That is not what I wanted.
“I want to control the process, and the process is even more important than the result itself. For artists like me, I don’t want to automate anything. I want to participate in every single stage of designing the workflow. That’s the fun part of it.”
Walk us through the pipeline. What were you actually feeding the model?
Xindi’s ComfyUI workflow for the balloon sequence. Source: xindizhangart.com.
My core technique was style transfer in Stable Diffusion 1.5, driven by IP-Adapter and ControlNet. What mattered most was what I fed it: my own work. The base materials were live-action footage I shot on an iPhone 15 Pro and 3D animation I built in Blender. The AI restyled imagery I had already made. It did not invent it.
Style-guide still from The Song of Drifters. Source: xindizhangart.com.
“Unlike most AI-generated videos, which use other artists’ works from the model, I use my own illustrations as the style guide.”
Download Xindi’s style transfer workflow (json) on ComfyUI
I also trained custom LoRAs on my own video, footage of the cities I had lived in. Capturing that footage became a vital part of the documentary process. Wandering through the streets where I once lived let me reconnect with those cities. Most of it never appears in the final cut, but it lives in the visuals as training data. The hybrid pipeline made rendering the final look more efficient and saved more time for ideation.
For the dream sequences I combined animated 3D with AI morphing, moving from abstract to concrete to mimic the feeling of being half awake.
BTS clip, AI morphing. Source: Xindi Zhang
Download Xindi’s AI morphing workflow (json) on Github
The film won gold at the Student Academy Awards and was shortlisted for the Oscars. What’s next?
I made the film for creative reasons, not career ones. I honestly did not expect it to connect to a job at all. Then it won the Golden Award at the 2025 Student Academy Awards and was shortlisted for the Oscars, and the calls started.
Xindi Zhang at the 2025 Student Academy Awards. Source: Oscars Press Office
What people wanted was the combination: someone who understands both traditional craft and AI tools. I now work as an AI Creative at Amazon AI Studio building custom production pipelines. I see that same demand across the industry, with ComfyUI experience starting to show up as a requirement in job postings at major studios and design agencies.
It’s not the tool that steals my art. It’s the tool that expands my art.
My advice to other students is not really about software. AI is just another tool to convey ideas, but nothing is more important than the story itself. If you use AI, use it on purpose. The more you understand it, the more freedom you have to make work that is genuinely yours.
Xindi Zhang is a Chinese animation director and visual artist (RISD BFA in illustration, 2020; USC MFA in Expanded Animation, 2025). The Song of Drifters won the Golden Award at the 2025 Student Academy Awards and was shortlisted for the 98th Academy Awards. She works as an AI Creative at Amazon AI Studio, has collaborated with Sony Music's immersive studio, and is now on the faculty at the University of South Florida.
The Comfy Education Initiative is coming soon! Register your interest here to get early access to educational discounts, education exclusive slack / discord communities, and be notified as soon as the program is released.
Thanks for reading ComfyUI Newsletter! Subscribe for free to receive new posts and stay updated with everything Comfy..
関連記事
今日のまとめ
AI日報で今日の重要ニュースをまとめ読み