【仕組み】音から、光と形を動かすまで
① 曲をドラム・ベース・それ以外の音に分けて、1/30秒ごとに「どの音が、どれくらい強く鳴ったか」の表にする
② その表を「譜面」にして、ガラスの形・カメラ・光・エフェクトを全部この1枚から動かす
③ リズムは光で刻む。キックには大きな光、ハイハットやカチッという音には細かい光を割り当てる
④ 形の変化には緩急をつける。打点では「速く出て、ゆっくり着地」、静かな所では「ゆっくり出て、ゆっくり着地」
⑤ 回転は止めない。打点で勢いが乗り、慣性でなめらかに戻る
⑥ カメラは輪の穴をくぐって、下へ続く結晶の縦穴を切れ目なしに降りていく
⑦ 蝶の影絵もコードで動かす。打点で羽を速く閉じて、ゆっくり開く
1
127
【新作】生成AIの動画わずか4本を、編集ソフトを一度も開かずにコードだけで編集して、ポップなアニメOP風MVにしました。
ふくれっ面のキャラの表情が、くるくる変わります。
音ありで見てほしいです🔊
リプに、使った素材4本と完成を並べた動画を置きました🧵ポップに見せる編集のコツもリプに。
可愛いと思ったら「❤️」のコメントもらえると嬉しいです🫶
【使ったもの】
・アニメの素材: 生成AIの動画4本
・曲: Suno
・切り抜き・背景・光・字・切り替え・タイトルの冒頭: コード(Python)
・編集ソフト: なし
Just 4 AI-generated anime clips, edited entirely with Python code — no editing software. Music by Suno.
1
3
221
【新作】自作のアニメ×FUIの映像を、AIエージェントに渡して実写にしてもらいました。
動画の生成から編集・カラグレまで、1つのサービスの中のエージェントに任せたのは今回が初めて。
アニメを1本渡したら、設計から勝手に進めてくれて、私は出てきた物に直しを伝えるだけ。
FUIの表示まで元のデザインどおりに組み直してくれて、驚きました。
上がアニメ、下が実写。
実写版だけの映像、使って良かった点、作り方と実写にするコツはリプに🧵
アニメ版と実写版、どっちが好きですか?
#PR @renoiseai @renoiseaijp #RenoiseAI #RenoiseApp
🤝 Paid partnership
【作り方】Renoiseでアニメを実写にした流れ
① 自作のアニメ(引用元)をRenoiseにアップロード
② エージェントがカット割り・動き・音を読み取って、実写にする段取りと費用を提案
③ 実写の人物を写真1枚で先に固める。服・体型・背の高さは言葉で直す
④ 元の演技とカメラをお手本に、実写の映像を生成(Seedance 2.5 Flash)
⑤ 編集もエージェント。2本の映像をつなぎ、FUIの表示を元のデザインどおりに組み直して重ねる
⑥ 肌・カメラ越しの演出・明るさ・カラグレを言葉で調整
動画をまるごと作れるAIのプラットフォームは、これまであまり試していませんでした。今回お声がけをいただき、少し触ってみたら面白かったので、そのまま受けました。
普段は手元のAIにコードを書かせて組んでいますが、今回はその役目をRenoiseのエージェントに渡した形です。
I uploaded my anime to Renoise. The agent planned the live-action remake, edited it, rebuilt the FUI overlay and graded it.
renoise.onelink.me/Gxyb?pid=…
1
128
【使ったもの】
・3D: Blender(Pythonのコードで操作)
・クワガタの殻: 真上から見た標本の絵1枚(Codexの画像生成)から、奥行きを推定して立体に
・曲: Suno
・光・切り替え・エフェクト・字・色: コード(Python)
・編集ソフト: なし
No video AI. Blender driven by Python code. Beetle from one generated image, rock from a CC0 scan, music by Suno.
1
7
961
【新作】1枚の画像を、コードで製品ポスターにして、そのままコードで30秒のモーショングラフィックまで広げました。
ポスターが起動して、部品ごとに砕けて、本編へ。
編集ソフトは一度も開いていません。
ぜひ音ありで🔊
作った順番やコツはリプに🧵
感想コメントもらえると励みになります!
【1枚の画像をMGまで広げるコツ】
① 画像は、背景を抜いた製品1つだけにする
② ポスターは升目で組んで、升目ごとに起動させる
③ 同じ画像から、線だけの版もコードで作る。走査線と版ずれで動かすと、別の素材に見える
④ 1枚を4通りに使い回す: 全体・角への寄り・線画・砕けたかけら
⑤ ポスターから本編へは、継ぎ目を開いて砕けてつなぐ。白い1コマで切らない
1
2
185

