AI に演出を任せる — After Effects・Blender・Three.js で組む映像の作例

踊る女の子が手を上げると、その手から歌詞がぶら下がる。拳から文字が飛び、着地した足元から色があふれる。aicreataro さんが公開した After Effects(AE)のテストの一場面です ¹。

見どころは、その文字が体に追従すること。骨格さえ取れれば、手作業のトラッキングなしで文字を体に追従させられると本人は書いています ²。

AE を操作しているのは Opus 5.5。これは、Opus 5.5 に AE を操作させるテストの3本目だと本人は書いています ³。曲は Suno で作り、MiniMax H3 に曲を聴かせて女の子を踊らせた、とも ⁴。踊りの映像から全身の骨格を1コマずつ取り出して AE に流し込み、その骨格データで文字・光・カメラを動かしたそうです ⁵。画面に出る数字や枠は、実際に踊りから取った座標と速度だと本人は書いています ⁶。

AI を「演出家の手足」にする。ここ最近、そんな作例がいくつか投稿されています。投稿の感想や数字は、投稿者本人の申告です。

雑な指示でも、いい感じに。しかも人が直せる

同じ作り手の、もう少し素直なテストがあります。MiniMax H3 で作った動画をベースに、Opus 5.5 に AE を操作させて加工したものです ^{7 8}。

AE でやらせたのは、カットの切れ目を拍に合わせて速さを調整することと、区間ごとにエフェクトをかけること。粒子、光線、万華鏡、データモッシュなどが挙がっています ⁹。結構雑な指示でもいい感じにできてしまい、結果は .aep で残るので、あとから人の手で直せる、と本人は書いています ¹⁰。

任せきりで終わらないのが、この作例の良いところです。AI が組んだ土台を、AE の画面でそのまま人が触れる。

本音も添えられていました。ソフトを学ぶことも大切だと思って挑戦しているけれど、学びを飛び越えてしまう恐ろしさもあって悩ましい、と本人は書いています ¹¹。わくわくの隣に、作り手のこういう迷いがあるところが、読んでいて信用できます。

音と動きが、絵を立体に押し出す

次は Blender です。この作り手の「音と動きをビジュアライズ」は、Opus 5.5 × Blender × Python の組み合わせだと本人は書いています ¹²。素材は、人物が MiniMax H3、キービジュアルが Midjourney、音楽が MiniMax Music 3.0 です ¹³。

音が大きいほど絵が立体になって手前に飛び出し、速く動いた所ほど粒になって浮く。打った瞬間に時間が止まり、カメラだけが回り込む。そう本人は書いています ¹⁴。生成だけでは出ない絵も組み合わせるとできる、一方でやりすぎるとだめ、というのが本人の感想です ¹⁵。

同じ作り手は、「動きと音をビジュアライズ」という作品のメイキングも公開しています。

Blender の中では、元の映像を1枚の板にして細かい粒に分け、動画から人物の形・奥行き・どこが速く動いたかの3つを測っている、と本人は書いています ¹⁶。操作は Python です ¹⁷。

読みどころは、任せたことと決めたことの分け方です。画面のどこが多く飛び出すかは、音と動きの数値に任せた。決めの瞬間ごとの強さ・見た目・カメラ・色は、会話で1つずつ決めた ¹⁸。数値で決まる部分は機械に、見せ方は人が。そのうえで、思い通りにならず15回以上修正をかけたそうです ¹⁹。

動画生成を使わない、という選択

続いて、aicreataro さんの「凍った手記」。動画生成 AI は使っていない、と本人は書いています ²⁰。

物語と文字の動きは Opus 5.5、声は Gemini TTS、風とノックの音は ffmpeg で合成したものです ²⁰。物語を書かせ、文字の組みと動きを HTML/Three.js で作らせ、声と効果音を合わせて1本の動画に書き出させた、と本人は書いています ²¹。

動画生成と違って文字が崩れず、直しも速い。データが軽い、とも書かれています ²²。文字が主役の映像なら、「描かせる」より「組ませる」ほうが筋が良い場面があるということでしょう。声や風の音は耳で確かめたくなります。ヘッドホンを用意して、音ありで。

「おしゃれに」では伝わらない

AI に演出を頼むときのコツも流れてきました。showheyohtaki さんは、動画のカメラワークと切り替えの名前を AI への指示用にまとめています ²³。

Claude や Codex で動画を作るとき、「いい感じにおしゃれにして」だけでは狙った演出はまず出ない。「FPV」「ラックフォーカス」「ホイップパン」と名前で頼めば、思い通りの演出を再現できる、と本人は書いています ^{24 25}。区間ごとにエフェクトをかけた AE の作例とも通じる話です。

演出そのものを Skill にして配る人もいます。KanaWorks_AI さんは、AI エージェントへの「一言」でゲームエフェクトを作る Skill を無料で公開したと書いています ²⁶。Claude Code / Codex / Cursor などにそのまま入る、とのことです ²⁷。

自分の机でやるなら

まず整理しておきます。Opus 5.5 は、公式が示す提供先が Claude Platform や Amazon Web Services などで、手元で動かす形は示されていません ²⁸。Claude Code も、CLI は手元でも、モデルへはネット接続が必要です ²⁹。Windows on Arm 向けには win32-arm64 の配布があります ³⁰。

手元で動くのは、操作される側のソフトです。

• After Effects は、手元で動かすためのシステム要件を Adobe が公開しています [[F83]]。Windows on Arm のプロセッサとして Adobe の要件に挙がっているのは Qualcomm Snapdragon X シリーズだけです [[F106]]。RTX Spark 搭載機で動くかどうかは、Adobe の要件に挙がっていないので、先に公式で確かめてください。
• Blender は Windows on Arm に対応しています [[F57]]。NVIDIA によれば、Blender は DLSS 4.5 レイ再構成を加える予定で、Blender 5.3(と多数のゲーム)に搭載予定とされています [[F96]]。更新は RTX Spark とともにこの秋に届く、とも NVIDIA は説明しています [[F95]]。
• Adobe Premiere については、NVIDIA が Adobe と提携し、RTX Spark 向けに再設計していると発表しています [[F99]]。

NVIDIA はクリエイター向けに、第5世代 Tensor コア(NVFP4 対応)、ハードウェアによる AV1、4:2:2 ビデオのエンコードとデコードを挙げています ³¹。

RTX Spark 搭載のノートの例です。どのツールを動かしたいかを決めて、その対応環境を公式で確かめてから選んでください。

AI が組んだ土台を人の手で直すとき、よく使う操作をボタンにまとめておくと、作業が軽くなりそうです。

次に読む

Blender を AI に任せる流れをもっと追うなら、AI エージェントに Blender を任せる作例へ。

演出の舞台を映像から世界づくりに広げるなら、AI エージェントが遊べる世界を組む作例も続けて読めます。