「動きと音をビジュアライズ」のメイキング 簡単ではありますが、参考になれば嬉しいです。 ■素材は少ない ・下絵は４種類のAI動画+曲 ■Blenderの中の仕組み ・元の映像は1枚の板。それを細かい粒に分けている ・動画から測るのは3つ。人物の形、奥行き、どこが速く動いたか ・曲を低い音から高い音まで細かい音域に分けて、それぞれの鳴り具合を1コマごとに測る ・画面の真ん中は低い音、端は高い音の担当。飛び出す時に、鳴っている音の所ほど大きく出る ・速く動いた所（バチ、筆先、スカートの裾）は粒になって浮く。音が大きいとさらに浮く ■拍に合わせる方法 ・動画と曲は別々に作ったので、そのままでは合わない ・太鼓を叩く、かかとを踏む、ボールを打つ、筆を打ちつける。この「決めの瞬間」を割り出す。 ・そこで時間を止め、止める長さを変えて、次の決めの瞬間が必ず拍に来るように計算している ・止まっている間にカメラが回り込み、空間の色と照明が替わる ■任せたこと／決めたこと ・任せた：画面のどこが多く飛び出すか。音と動きの数値のまま ・決めた：決めの瞬間ごとの強さ、見た目、カメラ、色。会話で1つずつ ・Blenderの操作はPython。 ■うまくいかなかったこと ・激しくしすぎる、下絵を全くなくすと、訳がわからなくなった。 ・なかなか思い通りにならず、15回以上修正をかけている。SEは足したら合わなくて外した。暗くする加工も外した、など。 これを作って一番大事だと思ったのはメリハリと、バリエーションで、全体というよりかは、細かく細かく細部をちょっとずつアップデートしていくことにより、理想の映像に近づいていきました。