AI ショートドラマの制作パイプライン:台本 → Blender 灰モデル演出 → 動画生成 → 編集

ワークフロー・ノード🎬 動画🧊 3D公開: 出典: Zenn (ComfyUI)
要点

生成 AI で数秒のクリップを作るのは容易だが、数十秒から数分のショートドラマ制作には課題が多い。この記事では、演出を Blender で行い、画像生成をモデルに任せるパイプラインを紹介する。

生成 AI を用いて「それっぽい数秒のクリップ」を作成することは容易になったが、数十秒から数分のショートドラマとして一貫性を持たせることは困難である。具体的には、カットごとにキャラクターの位置が変わる、カメラの向きが繋がらない、尺が予測できないといった課題が挙げられている。

この記事では、現在テスト中のパイプラインとして、「演出は Blender で決定し、絵づくりは生成モデルに任せる」手法を紹介している。全体の工程は、[1] 台本・ショットリストの作成、[2] Blender による灰モデル(グレーボッ...)を用いた演出、動画生成、編集という流れになる。

レンダリングや動画生成など、GPU を必要とするステップについては、CloudGPU のインスタンスを分単位でレンタルして運用している。

この記事は要約です。正確で完全な内容は元の記事をご確認ください。

元の記事を読む: Zenn (ComfyUI) ↗