Pinned Tweet
「自撮りガールズ チアガール」
今回はimageFX、Fluxで画像生成し、gen3で動画に。また今回はHailuoai(t2v)も使ってみました😄
制作時間についてコメントをいただいていたのですが、あんまり覚えてなかったこともあり、チアガールバージョンを作ってみました。
生成を回している時間など私の稼働以外も含めて大体18時間ぐらい😋
一旦出来上がるまでは10時間ぐらいで、
そこから詰めながら選定と生成を繰り返す感じで制作しています。
#AI #Hailuoai #imageFX
前回のピクセルアートの剣士を、NVIDIAのKimodoで作った動きに作り直して、手ごたえを詰めてみた✨
GPUに移して、60FPSで動くようにもなった。
まず剣士の体を、Kimodoと同じ骨組みに貼り直した。ドット絵の粒でできた体に、3Dの人の骨が入っている感じ。
そこから戦いに要る動き(斬る・突く・ためて斬る・よける・食らう・倒れる…)18種類を、文章からKimodoで作った。
攻撃は、1回目の動きから決めのコマ(振りかぶり・振り切り・止まる所)を拾って、間隔を詰めてもう一度Kimodoに通した。最初と最後に同じ構えを置いたので、どの攻撃も同じ構えから出て、同じ構えに戻る。
剣で受け止める動きは、Kimodoだと剣を少し上げるだけになったので、姿勢を数字で書いた。
これで「動く」はできた。
でも、Kimodoの動きはなめらかで、そのままゲームに入れると手ごたえがぬるい🤔
なので、なめらかにつなぐのをやめて、絵を飛ばす所を決めていった。
・振る0.11秒の間は、絵を2枚だけにして一気に抜く(Kimodoのままだと6〜7コマかけてなめらかに振っていた)
・押した瞬間に、姿勢を大きく変える(最初のコマで体が動く量 5〜17cm → 17〜29cm)
・食らった瞬間は、一番のけぞった姿勢へ飛ばす(止まっている間の体の動き 3cm → 24cm)
・当たって止まっている間の姿勢を、攻撃ごとに決める(突きなら伸び切った所)
・腰と胸だけ1.5倍大げさに。剣と腕の向きは変えない
・体を縦に1割まで縮めたり伸ばしたりする(ためると縮む → 振ると伸びる → 当たると潰れる)
・振りの鋭さは、文章ではなく決めのコマの間隔で決まった(右手の速さ 1秒に4〜6m → 14〜15m)。前のパンチの時と同じ
遊んでみてNGだった3本の振りは、文章を変えて作り直した。
描くのもCPUからGPU(WebGPU)に変えて、1秒に約22コマ → 60コマに。1枚描く時間は約40ms → 約4ms。
逆に、なめらかになった分ピクセルアート感は減った💦
でも、ドット絵の粒の体を人の骨で動かす、っていう使い方は新鮮だった。
これで、動かすこと自体はかなり手軽になって、手ごたえの部分に集中できる。
これまでは動かすまでにスキルと時間が要って、最後の手ごたえを学ぶところまで行けなかったけど、この感覚を鍛えられて楽しい🥰
息抜きに、ピクセルアートでアクションゲームを作ってみたら、LLMとすごく相性がいいツールだった✨
Xでink-studio(作者はSilicon Jungleさん)というツールを見かけて、ピクセルアートのバトルは昔からやってみたかったし、これはいいかもと早速やってみた。
ink-studioは、テキストからピクセルアートを作るような道具。形も動きも文字で書くと、ガウシアンの粒にしてドット絵として描いてくれる。
全部コードなので、LLMには中身が理解しやすい。しかも画面を開かなくても絵を描けるので、Opus 5.5が直すたびに自分で絵を描いて確かめてくれる。結果的にAIが作業するのにかなり向いたやり方で、私の確認や依頼も、LLMの直しや調整も早い。
ただ画像は入れられないので、部屋と剣士と獣の絵をMidjourneyで出して、それを元にOpus 5.5に形の指示を書いてもらった。
ベースは1時間ぐらいでできた。手軽😊
やってたら楽しくなってきて、モーションや仕組みを足していったら、2時間ぐらいでこんな感じに。
・WASDの2度押しで回避
・右クリックでパリィ。はじくとCHANCE!が出て、必殺の突き
・獣を柱にぶつけると大きなスキ
・体力が半分を切ると獣が怒る
私がやった方法は、形や動きがある程度このツールに入っていたので、まずはそこからできることで実装。
で、敵の突進のモーションは入っていなかったので、入っている動きを組み合わせて作った。
この流れで、ある程度モーションは作れた。
でまあ、やってるうちにちゃんとゲームになる動きに調整していったら、
なかなか面白くなってきた💦やべーな…息抜きだったんだが…
ただCPUで描いているので重い💦 ベースだけ作って、良さそうならGPUに移行するといいかも
(私は今最中です)
これを使って思いついたアイディアをすぐ形にして、よさそうなら発展とかできそう😊
息抜きに、ピクセルアートでアクションゲームを作ってみたら、LLMとすごく相性がいいツールだった✨
Xでink-studio(作者はSilicon Jungleさん)というツールを見かけて、ピクセルアートのバトルは昔からやってみたかったし、これはいいかもと早速やってみた。
ink-studioは、テキストからピクセルアートを作るような道具。形も動きも文字で書くと、ガウシアンの粒にしてドット絵として描いてくれる。
全部コードなので、LLMには中身が理解しやすい。しかも画面を開かなくても絵を描けるので、Opus 5.5が直すたびに自分で絵を描いて確かめてくれる。結果的にAIが作業するのにかなり向いたやり方で、私の確認や依頼も、LLMの直しや調整も早い。
ただ画像は入れられないので、部屋と剣士と獣の絵をMidjourneyで出して、それを元にOpus 5.5に形の指示を書いてもらった。
ベースは1時間ぐらいでできた。手軽😊
やってたら楽しくなってきて、モーションや仕組みを足していったら、2時間ぐらいでこんな感じに。
・WASDの2度押しで回避
・右クリックでパリィ。はじくとCHANCE!が出て、必殺の突き
・獣を柱にぶつけると大きなスキ
・体力が半分を切ると獣が怒る
私がやった方法は、形や動きがある程度このツールに入っていたので、まずはそこからできることで実装。
で、敵の突進のモーションは入っていなかったので、入っている動きを組み合わせて作った。
この流れで、ある程度モーションは作れた。
でまあ、やってるうちにちゃんとゲームになる動きに調整していったら、
なかなか面白くなってきた💦やべーな…息抜きだったんだが…
ただCPUで描いているので重い💦 ベースだけ作って、良さそうならGPUに移行するといいかも
(私は今最中です)
これを使って思いついたアイディアをすぐ形にして、よさそうなら発展とかできそう😊
ink-studio(Silicon Jungleさん・MITライセンス)
github.com/siliconjungle/sha…
ink-studio自体にAIは入っていないので、コード(JavaScript)はOpus 5.5に書いてもらった。
重さの目安は、three.jsもGPUも使わずにブラウザでCPUだけで描いて、1秒に約22コマ💦
5
522
three.jsの砂漠を、Fable 5.2と数日議論を重ねつつ作り込んでみた✨
丘を作った時点ではまだ5.1。本当はそこで出すつもりが、5.2が出たので、どうするか悩んでいた雲に着手したら、この世界にのめりこんでいた💦
のめりこんだのは、それっぽい背景では満足できなかったから。
Fableに言えば、それなりの背景を作ってくれるし、ある程度美しい。でも、私が欲しい美しさではなかった。
岩山ひとつとっても、それっぽいものはすぐに作れる。でもそういうことじゃなく、なるべくしてできたものであってほしい。
もしこういう場所があるなら、丘はどうできているのか。そこから議論を重ねた。
約10km四方の丘は、地層のずれを考えて岩山を輪のように並べ、全体を丘にしていったら、ちょっと違うけど、サハラの目(リシャット構造)に似た感じになった。
岩山は地層のずれに沿って、高さもばらばらに。垂直に立つ岩の根元には、砂が寄りかかって積もった裾を付けた。
雲は、takramのthree-clouds(作者はShota Matsudaさん)のWebGL版を参考にさせていただき、three.jsのWebGPU用に構築。
自信はなかったけど、汎用ではなくこのゲーム専用ならできそうだとFable 5.2が言うので挑戦。かなり難しかったけど、ある程度いい感じにはなった気がする😊
雲の作成自体もこれまでと同じく本物とフィクションの議論をしながら。「中くらいの高さの雲って、本当はこんなにはっきり見えないのでは?」と聞いたら、気象の資料を調べて半分当たり。雲があること自体は正しいけど形が違っていて、本物は薄い板が小さなこぶに割れて並ぶ、ひつじ雲になる。
逆に、本物の砂漠の雲は高い所の薄い雲が主流で、こんなもくもくにも、こんなに速くにもならない。でも世界の空気感として、ここはフィクションを取って、調整できるように作っておいた。
雲の量や高さ、流れる速さを、画面を見ながらつまみで決める窓のような、調整のための道具を作っていくうちに、three.jsで始めたはずが、だんだんとゲームエンジンらしきものを作っていた。これはかなり新鮮な体験だった。
昔のゲームが専用エンジンで作られていたころを思い出し、それができる体験は非常に感慨深く嬉しい🥰 既存エンジンを使って作る喜びとはまた違ったDIY感がある。
LLMと議論を重ねつつ作る作業は、もうガチャではなくなっていて、積み上がる体験だった。
Fable 5.2が要望に応えてくれるレベルが高いこともあるけど、LLMとの関係性の変化を感じる。
既存のツールに自分を合わせず、自分に合わせて作る。これが本格化したと思う🥰
three.jsの砂漠、本物の地形を分析して作り直したら、結構良い砂漠になった気がする✨
飛んでいても、ずっと同じ感じがしない。
ゲームとしての成立を優先して全体のレベルデザインを考えていたら、いつの間にか小さくまとまった面白くない物になっていた💦
軽く多くの人が遊べるようにと制約をかけすぎて、最初の頃の感覚が失われつつあった。
というわけで、初心に戻って”砂漠の美しさ”を考え直すところから始めた。
three.jsもr187が出たのでアップデートした。半日かかったものの、r185からの引き継ぎはうまくいった。(途中で踏んだ所はリプに👇)
で、砂漠だが、映画『DUNE 砂の惑星』を見たのだけど、確かにかなり隆起しているし、砂は山なりで連なっていた。そして斜面のグラデーションのかかり方が違う。そして当然だが綺麗すぎない。
砂山のリアリティは角度から来ているとはわかっていたけど、どう出すか?🤔
計算で作る砂漠は、それっぽくなってもまだ足りない。何が違うのか、本物を測って比べた。
使ったのはUSGSが公開している実測の地形データ(3DEP・1m間隔)。Great Sand Dunes、Eureka Dunes、Algodonesの3か所。
30°より急な面の割合
・本物の砂丘3か所:2〜12%
・風を計算で流して育てた砂丘:3〜6割
・式で作った大きな砂丘:急な面を32°に設定していたのに、0%
風の計算は急すぎて、式は急な所が無さすぎた。
本物はほとんどの面がゆるくて(Algodonesは平均13°)、急なのは尾根の向こう側の細い帯だけ。その境目に尾根の線がくっきり出る。
じゃあ本物をそのまま置けばいいのか?
置くと綺麗。でも問題が2つ。
1つ目。ゲームの地面に写すと、尾根の線が丸まって消える。地面の細かさは増やさず、光を当てる時の面の向きをならすのをやめたら線が出た。
2つ目。隆起が激しくて、時速300kmで飛ぶ今のゲーム設定では揺れが激しくて体感が悪い💦
高さを半分にしても、機体が地面から跳ぶ所は34%から27%まで。横に伸ばすと1.5倍で25%、2倍で17%まで減った(今までの計算の砂丘は16%)。
走ってみて、横1.5倍を中心に2倍を混ぜる形にした。角度は本物より少しゆるくなるけれど(急な所で22°→15°)、ここは走れることとの兼ね合い。
逆に高さを伸ばして急にしてみたら、山になってるだけで没。
あとは計算の砂丘も挟んでなじませ、綺麗すぎる計算の所と谷にも本物の形を足し、平らな所を減らし(300m四方で凹凸が4mに満たない所 30%→14%)、つなぎ目の線を消して(地面の段差 1,896か所→18か所)、あらゆる所から詰めた😊
本物の地形を世界全体に広げても、増えたのは読み込み約2MB・GPUのメモリ約3MB。地面を作る処理は約1.3倍になった。
かなり詰まった良い砂漠になってきた気がする🥰
手本にさせていただいた雲(takramのthree-clouds・MITライセンス)
github.com/takram-design-eng…
1つ、NVIDIAが配っているノイズのデータを使う所があった(雲に縞が出ないように、描き始めの位置を画素ごとに少しずつずらすための表)。
商用で使っていいかを、NVIDIA自身の文からは確かめきれなかったので、同じ働きをする表を自分で作って置き換えた。数えて比べても、NVIDIAの物と同じか、わずかになめらかだった😊
3
395
three.jsの砂漠、本物の地形を分析して作り直したら、結構良い砂漠になった気がする✨
飛んでいても、ずっと同じ感じがしない。
ゲームとしての成立を優先して全体のレベルデザインを考えていたら、いつの間にか小さくまとまった面白くない物になっていた💦
軽く多くの人が遊べるようにと制約をかけすぎて、最初の頃の感覚が失われつつあった。
というわけで、初心に戻って”砂漠の美しさ”を考え直すところから始めた。
three.jsもr187が出たのでアップデートした。半日かかったものの、r185からの引き継ぎはうまくいった。(途中で踏んだ所はリプに👇)
で、砂漠だが、映画『DUNE 砂の惑星』を見たのだけど、確かにかなり隆起しているし、砂は山なりで連なっていた。そして斜面のグラデーションのかかり方が違う。そして当然だが綺麗すぎない。
砂山のリアリティは角度から来ているとはわかっていたけど、どう出すか?🤔
計算で作る砂漠は、それっぽくなってもまだ足りない。何が違うのか、本物を測って比べた。
使ったのはUSGSが公開している実測の地形データ(3DEP・1m間隔)。Great Sand Dunes、Eureka Dunes、Algodonesの3か所。
30°より急な面の割合
・本物の砂丘3か所:2〜12%
・風を計算で流して育てた砂丘:3〜6割
・式で作った大きな砂丘:急な面を32°に設定していたのに、0%
風の計算は急すぎて、式は急な所が無さすぎた。
本物はほとんどの面がゆるくて(Algodonesは平均13°)、急なのは尾根の向こう側の細い帯だけ。その境目に尾根の線がくっきり出る。
じゃあ本物をそのまま置けばいいのか?
置くと綺麗。でも問題が2つ。
1つ目。ゲームの地面に写すと、尾根の線が丸まって消える。地面の細かさは増やさず、光を当てる時の面の向きをならすのをやめたら線が出た。
2つ目。隆起が激しくて、時速300kmで飛ぶ今のゲーム設定では揺れが激しくて体感が悪い💦
高さを半分にしても、機体が地面から跳ぶ所は34%から27%まで。横に伸ばすと1.5倍で25%、2倍で17%まで減った(今までの計算の砂丘は16%)。
走ってみて、横1.5倍を中心に2倍を混ぜる形にした。角度は本物より少しゆるくなるけれど(急な所で22°→15°)、ここは走れることとの兼ね合い。
逆に高さを伸ばして急にしてみたら、山になってるだけで没。
あとは計算の砂丘も挟んでなじませ、綺麗すぎる計算の所と谷にも本物の形を足し、平らな所を減らし(300m四方で凹凸が4mに満たない所 30%→14%)、つなぎ目の線を消して(地面の段差 1,896か所→18か所)、あらゆる所から詰めた😊
本物の地形を世界全体に広げても、増えたのは読み込み約2MB・GPUのメモリ約3MB。地面を作る処理は約1.3倍になった。
かなり詰まった良い砂漠になってきた気がする🥰
先日作ったMotionBricksのキャラの動きをNVIDIAのKimodoで作ってみた。
WASDで歩く・押しっぱなしで走る・箱の手前まで来ると自動で手をついて跳び越えるようにはなった🎉
前回はお手本の動きが全部Mixamoだったけど、今回はお手本も跳び越えも、全部Kimodoで作った動き。
Kimodoは、NVIDIAが公開した「文章から人の動きを作るAI」。
「女性らしく歩く」「全力で走る」「手をついて跳び越える」のように書いて、1つの文章から3本ずつ作り、その中から私がざっくり選んだ。読み込んだ後は3本で4〜10秒。手元のPCで動く(VRAM 21GBほど)。
(👇リプにリンク)
MotionBricksは「キャラの動きをその場で作るAI」。直前の姿勢と、お手本から取った行き先の姿勢を渡すと、その間を埋めてくれる。
跳び越えは、選んだ動きから「踏み切り・一番高い所・着地」の3つの姿勢だけを取り出して渡した。歩き→跳ぶ→着地→そのまま歩く、のつなぎはMotionBricksがその場で作る。
Kimodoをさわって分かったこと:
・文章は「何をするか」にはよく効く(足を体の真ん中の線の近くに置く、手をついて跳ぶ)。「どんなふうに」は効きにくい(「腰を振って歩く」と書いても、腰の揺れは普通の歩きと同じ)
・パンチ(ワンツー)は「速く」と書いても、手の速さが1秒に4〜5mで、なでているだけに見えた。構え・ジャブ・ストレートの決めの姿勢をBlenderで私が作って、間の動きだけKimodoに作らせ、決めの姿勢どうしの間隔を詰めたら1秒に8.5〜9.9m(本物のパンチは7〜10mくらい)。強さは文章ではなく、間隔で決まった。パンチは今回の動画には入れていないけど、こうやって決めの姿勢を調整して持っていくこともできる
出来たモーションをMotionBricksに持って行ったのがこの動画。
斜めから箱に向かっていくと、いったん後ろへ戻ってから跳んでいたので、跳ぶ向きを「箱の正面」から「キャラが進んでいる向き」に替えたら、戻らずに跳ぶようになった
ただ、MotionBricksはどうしても今の動きと次の動きの間に動作が入るので、入力に対してもっさり感が出る(キーを離してから止まるまで1.7秒。設定を変えても縮まなかった)🤔
このまま使うかどうかは悩ましいけど、この間を埋めてくれる補完はかなり魅力的🥰
表示はthree.js(WebGL)、動きの計算はこのPCのGPUで1コマ1.7〜3.1ms。
先日作ったMotionBricksのキャラの動きをNVIDIAのKimodoで作ってみた。
WASDで歩く・押しっぱなしで走る・箱の手前まで来ると自動で手をついて跳び越えるようにはなった🎉
前回はお手本の動きが全部Mixamoだったけど、今回はお手本も跳び越えも、全部Kimodoで作った動き。
Kimodoは、NVIDIAが公開した「文章から人の動きを作るAI」。
「女性らしく歩く」「全力で走る」「手をついて跳び越える」のように書いて、1つの文章から3本ずつ作り、その中から私がざっくり選んだ。読み込んだ後は3本で4〜10秒。手元のPCで動く(VRAM 21GBほど)。
(👇リプにリンク)
MotionBricksは「キャラの動きをその場で作るAI」。直前の姿勢と、お手本から取った行き先の姿勢を渡すと、その間を埋めてくれる。
跳び越えは、選んだ動きから「踏み切り・一番高い所・着地」の3つの姿勢だけを取り出して渡した。歩き→跳ぶ→着地→そのまま歩く、のつなぎはMotionBricksがその場で作る。
Kimodoをさわって分かったこと:
・文章は「何をするか」にはよく効く(足を体の真ん中の線の近くに置く、手をついて跳ぶ)。「どんなふうに」は効きにくい(「腰を振って歩く」と書いても、腰の揺れは普通の歩きと同じ)
・パンチ(ワンツー)は「速く」と書いても、手の速さが1秒に4〜5mで、なでているだけに見えた。構え・ジャブ・ストレートの決めの姿勢をBlenderで私が作って、間の動きだけKimodoに作らせ、決めの姿勢どうしの間隔を詰めたら1秒に8.5〜9.9m(本物のパンチは7〜10mくらい)。強さは文章ではなく、間隔で決まった。パンチは今回の動画には入れていないけど、こうやって決めの姿勢を調整して持っていくこともできる
出来たモーションをMotionBricksに持って行ったのがこの動画。
斜めから箱に向かっていくと、いったん後ろへ戻ってから跳んでいたので、跳ぶ向きを「箱の正面」から「キャラが進んでいる向き」に替えたら、戻らずに跳ぶようになった
ただ、MotionBricksはどうしても今の動きと次の動きの間に動作が入るので、入力に対してもっさり感が出る(キーを離してから止まるまで1.7秒。設定を変えても縮まなかった)🤔
このまま使うかどうかは悩ましいけど、この間を埋めてくれる補完はかなり魅力的🥰
表示はthree.js(WebGL)、動きの計算はこのPCのGPUで1コマ1.7〜3.1ms。
AI(Meshy)で作った自作キャラを、NVIDIAのMotionBricksでWASDで歩かせてみた!😊
MotionBricksちょっとさわってみるかと軽い気持ちで始めたが、一日やってしまった…💦
思ったよりすっとはできず…割と調整した🤔
MotionBricksは、NVIDIAが公開した「キャラの動きをその場で作るAI」。
直前の姿勢と、行き先の目標の姿勢を渡すと、その間の動きを埋めてくれる。目標の姿勢は、渡したお手本の動きから取る。
なので決まったアニメを再生するのではなく、キーを押すたびに、歩き出し・曲がる・止まる一歩をその場で作る。モデルは公開されていて、手元のPCで動く。
(👇リプにリンク)
お手本の動きは全部Mixamo。歩き方はStandard Walkで、速さも足の運びも歩幅もほぼ同じにそろえた(1.54m/秒・1.74歩/秒、Standard Walkは1.57m/秒・1.71歩/秒)。
MotionBricksに入っているNVIDIAの見本の動きは「社内で評価のためだけ」とのことなので、作成したデータはMixamo歩きモーションと待機モーションを調整した二種類だけだが、かなりいい🥰
元の人と体つきが違うので、そのまま着せると変だった所:
・腰幅が元の人の2倍 → 足が広く着いてガニ股。歩く時だけ脚を内側へ6°(立っている時は0°)
・腕を下ろすと肩の上が腕に引っぱられてなで肩 → 鎖骨を15°上げる
・立ち待ちのIdleから歩き出すと足が絡まる(足首の横の間隔0.2cm)→ Standing Idleに替えて12.6cm
・床についた足が後ろへ滑って、もっさり見える(17.9cm/秒)→ 体を進める倍率を脚の長さの比にして12.2cm/秒。股の関節を上げてあったので、腰の骨から測ると比が小さく出ていた
・ちょこちょこ歩き(2.66歩/秒)→ これはMixamoではなくMotionBricksの設定のせい。歩幅は「目標の姿勢を置く先の距離」、足の運びは「1回に作る動きの長さ」で決まるので、組み合わせを測って選び直した💦
キーを離してから止まるまで5.9秒かかっていたのは、動きを作り直すタイミングの設定のせい。NVIDIAのコードにある普通の歩きの設定にそろえて1.6秒。計算自体は1コマ1.4〜2.9msで軽い。
表示はthree.js(WebGL)、動きの計算はこのPCのGPU。
モーション作成は Kimodo・ARDYでやる方が相性がいいみたいなので、ちょっとまたやってみる🥰
Kimodo(NVIDIA)
github.com/nv-tlabs/kimodo
プロジェクトページ research.nvidia.com/labs/sil…
4
495
AI(Meshy)で作った自作キャラを、NVIDIAのMotionBricksでWASDで歩かせてみた!😊
MotionBricksちょっとさわってみるかと軽い気持ちで始めたが、一日やってしまった…💦
思ったよりすっとはできず…割と調整した🤔
MotionBricksは、NVIDIAが公開した「キャラの動きをその場で作るAI」。
直前の姿勢と、行き先の目標の姿勢を渡すと、その間の動きを埋めてくれる。目標の姿勢は、渡したお手本の動きから取る。
なので決まったアニメを再生するのではなく、キーを押すたびに、歩き出し・曲がる・止まる一歩をその場で作る。モデルは公開されていて、手元のPCで動く。
(👇リプにリンク)
お手本の動きは全部Mixamo。歩き方はStandard Walkで、速さも足の運びも歩幅もほぼ同じにそろえた(1.54m/秒・1.74歩/秒、Standard Walkは1.57m/秒・1.71歩/秒)。
MotionBricksに入っているNVIDIAの見本の動きは「社内で評価のためだけ」とのことなので、作成したデータはMixamo歩きモーションと待機モーションを調整した二種類だけだが、かなりいい🥰
元の人と体つきが違うので、そのまま着せると変だった所:
・腰幅が元の人の2倍 → 足が広く着いてガニ股。歩く時だけ脚を内側へ6°(立っている時は0°)
・腕を下ろすと肩の上が腕に引っぱられてなで肩 → 鎖骨を15°上げる
・立ち待ちのIdleから歩き出すと足が絡まる(足首の横の間隔0.2cm)→ Standing Idleに替えて12.6cm
・床についた足が後ろへ滑って、もっさり見える(17.9cm/秒)→ 体を進める倍率を脚の長さの比にして12.2cm/秒。股の関節を上げてあったので、腰の骨から測ると比が小さく出ていた
・ちょこちょこ歩き(2.66歩/秒)→ これはMixamoではなくMotionBricksの設定のせい。歩幅は「目標の姿勢を置く先の距離」、足の運びは「1回に作る動きの長さ」で決まるので、組み合わせを測って選び直した💦
キーを離してから止まるまで5.9秒かかっていたのは、動きを作り直すタイミングの設定のせい。NVIDIAのコードにある普通の歩きの設定にそろえて1.6秒。計算自体は1コマ1.4〜2.9msで軽い。
表示はthree.js(WebGL)、動きの計算はこのPCのGPU。
モーション作成は Kimodo・ARDYでやる方が相性がいいみたいなので、ちょっとまたやってみる🥰
three.jsでも、Unrealのような空気感が出せた!気がする!
空をいろいろ試したけど、このバージョンが一番良さそう✨
昨日、Unrealの空気感をthree.jsで何とか出せないかなーと書いたのだけど、空気感を作るのは何度もOpus5.5に難しいとは言われていた。
それに再現性を気にしていたので、踏み出せなかった。
でもthree.jsで最も美しい砂漠を作ってから考えようと思ったので、やってみることにした。
というわけでこの1日で空を何通りも作っては壊した。
・日の出から日の入りまで、時間が流れるようにした
・空をthree.jsに入っている物理の空(Preetham)に替えた → 夕焼けが一気に良くなる😊
・夕焼けのうろこ雲 → 平らな1枚に模様を描くと、どうしても気持ち悪くて没。
・遠くのもやを、見ている向きの空の色にするも、違和感がある💦
・遠くに山並みを足した → 手前はかすんでいるのに奥だけくっきり見えて、板を貼ったようになって没
・最後に、地球の大気で光が散らばる計算を、空と遠くの空気の両方に使った(takramのthree-atmosphere、WebGPU版)
この最後のが一番美しかった🥰
高い所から見ると、前の空は3kmほど先で全部同じもやに溶けていたのが、15km先まで砂丘と廃墟が何段も重なって、遠いほど薄く青くなる。
日の高さ1°で太陽の方を向くと、白くにじんだ光の塊だった太陽が、丸い円盤になって、まわりが赤橙に焼ける。
時速300kmで太陽に向かって飛んで、ずっと気持ちの悪かった地平線が完璧になった🥰
重さはRTX 4090で60fpsのまま。大気の計算は画面1枚につき1回なので、GPUの時間はほぼ変わらない。
問題はオブジェクトの量と多くの人の環境で再現できるかだな…💦
いろいろこねくり回したけれど、自然の美しさは、物理の計算で作るのが一番美しい…とはいえ、正しいだけでは見にくいところもあり、調整を行っていく。
踏んだ所メモ
・takramの部品はthree.js r182の作りで、r185ではそのまま読み込めない(3か所で止まる)。node_modulesは触らず、importmapのscopesで、その部品にだけ足りない物を足したthreeを渡した
・太陽の円盤は画面で直径6画素ほど。大きな光のにじみが全部この数画素から出ていたので、機体がかかるだけでにじみが丸ごと消えたり戻ったりした → 円盤の明るさは抑えて、にじみは太陽の位置のまわりに別に描き、まわりが何割見えているかで明るさを変えた
まだまだやることはあるし、Unrealの美しさにも後ろ髪は引かれるが、規約のややこしさ、コストや制作スピードを考えるとthree.jsは圧倒的にやりやすい。
いけるとこまで行ってみる~😊
MotionBricks(NVIDIA)
github.com/NVlabs/motionbric…
プロジェクトページ nvlabs.github.io/motionbrick…
論文 arxiv.org/abs/2604.24833
3
465
three.jsでも、Unrealのような空気感が出せた!気がする!
空をいろいろ試したけど、このバージョンが一番良さそう✨
昨日、Unrealの空気感をthree.jsで何とか出せないかなーと書いたのだけど、空気感を作るのは何度もOpus5.5に難しいとは言われていた。
それに再現性を気にしていたので、踏み出せなかった。
でもthree.jsで最も美しい砂漠を作ってから考えようと思ったので、やってみることにした。
というわけでこの1日で空を何通りも作っては壊した。
・日の出から日の入りまで、時間が流れるようにした
・空をthree.jsに入っている物理の空(Preetham)に替えた → 夕焼けが一気に良くなる😊
・夕焼けのうろこ雲 → 平らな1枚に模様を描くと、どうしても気持ち悪くて没。
・遠くのもやを、見ている向きの空の色にするも、違和感がある💦
・遠くに山並みを足した → 手前はかすんでいるのに奥だけくっきり見えて、板を貼ったようになって没
・最後に、地球の大気で光が散らばる計算を、空と遠くの空気の両方に使った(takramのthree-atmosphere、WebGPU版)
この最後のが一番美しかった🥰
高い所から見ると、前の空は3kmほど先で全部同じもやに溶けていたのが、15km先まで砂丘と廃墟が何段も重なって、遠いほど薄く青くなる。
日の高さ1°で太陽の方を向くと、白くにじんだ光の塊だった太陽が、丸い円盤になって、まわりが赤橙に焼ける。
時速300kmで太陽に向かって飛んで、ずっと気持ちの悪かった地平線が完璧になった🥰
重さはRTX 4090で60fpsのまま。大気の計算は画面1枚につき1回なので、GPUの時間はほぼ変わらない。
問題はオブジェクトの量と多くの人の環境で再現できるかだな…💦
いろいろこねくり回したけれど、自然の美しさは、物理の計算で作るのが一番美しい…とはいえ、正しいだけでは見にくいところもあり、調整を行っていく。
踏んだ所メモ
・takramの部品はthree.js r182の作りで、r185ではそのまま読み込めない(3か所で止まる)。node_modulesは触らず、importmapのscopesで、その部品にだけ足りない物を足したthreeを渡した
・太陽の円盤は画面で直径6画素ほど。大きな光のにじみが全部この数画素から出ていたので、機体がかかるだけでにじみが丸ごと消えたり戻ったりした → 円盤の明るさは抑えて、にじみは太陽の位置のまわりに別に描き、まわりが何割見えているかで明るさを変えた
まだまだやることはあるし、Unrealの美しさにも後ろ髪は引かれるが、規約のややこしさ、コストや制作スピードを考えるとthree.jsは圧倒的にやりやすい。
いけるとこまで行ってみる~😊
✨Claude CodeでUnreal 5.8を動かして、three.jsで作っている砂漠のゲームを一部移してみた
1か月半前にAstraでやった時は、Blueprintを組む途中で2回クラッシュ、入力も通らず、飛べるところまで10時間。これはできないなと思っていた。
今回はUnreal公式のMCPにつないで、大きく引っかからずにいけた。
・キャラとライドを骨付きで入れて、ホバー・回避・ターボ・カメラをthree.jsの数字のまま移す:約25分
・バルカン1つと、当たった時の火花(Niagara):約30分
three.jsの元があったとはいえ、AIでUnrealを動かす環境はかなり安定してきた印象。
踏んだ所メモ(Unreal 5.8)
・つなぐのは最初から入っているModelContextProtocolとEditorToolset(エフェクトはNiagaraToolsetsも)。どれもC++のコンパイル不要
・エディターが日本語だと、Blueprintを文章で書く仕組み(write_graph_dsl)が使えない → 起動に -culture=en
・Unrealが裏に回ると1秒3コマに落とされて、AIの呼び出しが15倍以上遅くなる → bThrottleCPUWhenNotForeground を false
・AIが作った物はディスクに保存されていないので、閉じる前に save_assets
空気感は動画の通り、やっぱりいい。(動画はUnrealの画面をそのまま録った物)
three.jsと同じ廃墟・同じ日の向き・同じカメラで並べてみると、影の中の明るさ、遠くのかすみ、雲が違う。時速300kmで走っても差は残った。three.jsでこれを出すのは難しい。
というわけで少しずつ詰めてみたけど、これは中々遠いかもなと…💦
モデルまわりは移せるけど、エフェクトは骨が折れそう。
Fabは充実しているけど、
・AI利用NGの印(NoAI)が付いている物が多い。無料のVFX(Unreal用)114件のうち、AI利用OKは55件
・入れてみた無料の火花・当たり・砂塵は、どれも人の大きさで作られていて(火花は数cm)、250m先の的に当てると見えないか小さい。自分用に大きさを直すところから始まる。しかもNiagaraの全体の倍率を上げても粒1つの大きさは変わらず、中の Sprite Size を書き換える必要があった(動画の砂ぼこりは、無料の砂塵をこうして大きく直して機体に付けた物)
・良さそうな物はやっぱりお金がかかる
NoAIは何がダメなのか、規約も読んでみた。禁止しているのは生成AIの「学習」に使うことで、学習をオフにしていればAIに中身を直させるのは当たらない…ように読める。でもはっきり書いてはいなくて、解釈が難しい🤔
この先を考えた時に、かかるお金に見合うか、早く直していけるか。この2つでいうと、このプロジェクトではUnrealは厳しそう。
空気感はいいんだけど…
three.jsで何とか出せないかなー。
✨Claude CodeでUnreal 5.8を動かして、three.jsで作っている砂漠のゲームを一部移してみた
1か月半前にAstraでやった時は、Blueprintを組む途中で2回クラッシュ、入力も通らず、飛べるところまで10時間。これはできないなと思っていた。
今回はUnreal公式のMCPにつないで、大きく引っかからずにいけた。
・キャラとライドを骨付きで入れて、ホバー・回避・ターボ・カメラをthree.jsの数字のまま移す:約25分
・バルカン1つと、当たった時の火花(Niagara):約30分
three.jsの元があったとはいえ、AIでUnrealを動かす環境はかなり安定してきた印象。
踏んだ所メモ(Unreal 5.8)
・つなぐのは最初から入っているModelContextProtocolとEditorToolset(エフェクトはNiagaraToolsetsも)。どれもC++のコンパイル不要
・エディターが日本語だと、Blueprintを文章で書く仕組み(write_graph_dsl)が使えない → 起動に -culture=en
・Unrealが裏に回ると1秒3コマに落とされて、AIの呼び出しが15倍以上遅くなる → bThrottleCPUWhenNotForeground を false
・AIが作った物はディスクに保存されていないので、閉じる前に save_assets
空気感は動画の通り、やっぱりいい。(動画はUnrealの画面をそのまま録った物)
three.jsと同じ廃墟・同じ日の向き・同じカメラで並べてみると、影の中の明るさ、遠くのかすみ、雲が違う。時速300kmで走っても差は残った。three.jsでこれを出すのは難しい。
というわけで少しずつ詰めてみたけど、これは中々遠いかもなと…💦
モデルまわりは移せるけど、エフェクトは骨が折れそう。
Fabは充実しているけど、
・AI利用NGの印(NoAI)が付いている物が多い。無料のVFX(Unreal用)114件のうち、AI利用OKは55件
・入れてみた無料の火花・当たり・砂塵は、どれも人の大きさで作られていて(火花は数cm)、250m先の的に当てると見えないか小さい。自分用に大きさを直すところから始まる。しかもNiagaraの全体の倍率を上げても粒1つの大きさは変わらず、中の Sprite Size を書き換える必要があった(動画の砂ぼこりは、無料の砂塵をこうして大きく直して機体に付けた物)
・良さそうな物はやっぱりお金がかかる
NoAIは何がダメなのか、規約も読んでみた。禁止しているのは生成AIの「学習」に使うことで、学習をオフにしていればAIに中身を直させるのは当たらない…ように読める。でもはっきり書いてはいなくて、解釈が難しい🤔
この先を考えた時に、かかるお金に見合うか、早く直していけるか。この2つでいうと、このプロジェクトではUnrealは厳しそう。
空気感はいいんだけど…
three.jsで何とか出せないかなー。
three.jsで作ってる砂漠のゲーム、空を曇らせて、新しいキャラでライバルと戦ってみた✨
この8日は、行ったり来たりの期間でした。
ゲームのイメージはできたし、バトルの雰囲気も良くなってきた。
世界を作る中で別のキャラがいるとなり、ライドとキャラデザを始めたが、イメージしていたゲームに合わせると思いのほか制約が生まれていることに気が付き悶える…💦
ただ2日で方向が決まったので、武器を作り、バランス調整にかなりの時間を費やした。ある程度遊んでみて、ここでゲームの根幹で悩み始めた。
ゲームとして成立させる方向を意識しすぎると、世界が崩れていく感覚。
私が作りたい物の根幹が問われる期間だった。
壊しては作り、壊しては作り。まるで進んでいない状況に陥って、記録にあるだけで9回、自分の中では10数回、壊して作っていた。
まあ、それだけ作るのも楽しかったわけだが…
まだその幸福なポイントにはたどり着いていない。
というわけで気分転換に天候を変えてみた。悪くない感じなので、この方向も詰めていくかな🤔
それと、この先パーティクル含めいろんな物を大量に置くことを考えて、描き方をWebGLからWebGPUに移した。(移すのは1日、仕上げまで入れて3日)
廃墟を大量に置いて(見えている数で約1,000個・三角形で約1,300万)比べると、RTX 4090ではどちらも60fpsは出るんで比較にならんが…ただGPUの時間はWebGPUが約半分(重い時で4.7msと16.7ms)、WebGLは描き始めに最大0.5秒ほど止まることがあった。
戦いのコードは書き直さずにそのまま使って、描く部分だけWebGPU用に替える形にしている。
動画は音アリです🔊
three.jsで作ってる砂漠のゲーム、空を曇らせて、新しいキャラでライバルと戦ってみた✨
この8日は、行ったり来たりの期間でした。
ゲームのイメージはできたし、バトルの雰囲気も良くなってきた。
世界を作る中で別のキャラがいるとなり、ライドとキャラデザを始めたが、イメージしていたゲームに合わせると思いのほか制約が生まれていることに気が付き悶える…💦
ただ2日で方向が決まったので、武器を作り、バランス調整にかなりの時間を費やした。ある程度遊んでみて、ここでゲームの根幹で悩み始めた。
ゲームとして成立させる方向を意識しすぎると、世界が崩れていく感覚。
私が作りたい物の根幹が問われる期間だった。
壊しては作り、壊しては作り。まるで進んでいない状況に陥って、記録にあるだけで9回、自分の中では10数回、壊して作っていた。
まあ、それだけ作るのも楽しかったわけだが…
まだその幸福なポイントにはたどり着いていない。
というわけで気分転換に天候を変えてみた。悪くない感じなので、この方向も詰めていくかな🤔
それと、この先パーティクル含めいろんな物を大量に置くことを考えて、描き方をWebGLからWebGPUに移した。(移すのは1日、仕上げまで入れて3日)
廃墟を大量に置いて(見えている数で約1,000個・三角形で約1,300万)比べると、RTX 4090ではどちらも60fpsは出るんで比較にならんが…ただGPUの時間はWebGPUが約半分(重い時で4.7msと16.7ms)、WebGLは描き始めに最大0.5秒ほど止まることがあった。
戦いのコードは書き直さずにそのまま使って、描く部分だけWebGPU用に替える形にしている。
動画は音アリです🔊
three.jsで作ってる砂漠のゲームで、スタート画面を作ってみた✨
ゲーム自体はOpusと作っているのだけど、絵的にはあまり変わり映えがないので、スタート画面をcodexに作ってもらっていた。
画像を生成しつつレイアウトがいるしcodexにまとめてもらう方がいいと思ったのだけど、
ベースはまあいいが、全体としてはいまいちだった。
で、結局opusにやってもらうのに、いくつか方向性を出してもらいつつ、
とりあえずこんな感じでスタート画面(仮)ができた。まあどうせ変わるのだけど、重さのチェックもしたかったし😊
登場カットはMiniMax H3(ローカルのComfyUI)で動画にして、動いているキャラの後ろに巨大な文字を通してみた😊
やったこと:
①codexで曲のループ。入りはそのまま流して、ループ箇所を選んで後半はエンドレスループ。地味に助かる
②絵はcodexで生成。キャラとライドの一貫性のために3Dモデルを作って、それを元に描かせた(まだ甘い…)
③登場の3カットは、H3で5秒ずつ作って使う所だけ切り出し(0.75秒・1.24秒・1.25秒)
④文字をキャラの後ろに通すため、動画を1コマずつ切り抜いて、1本の動画の上半分に絵、下半分に切り抜きの形を並べた。同じコマから描くので絵と切り抜きがずれない
⑤H3は1秒24コマなので、ffmpegでコマを補って60コマに
ハマったこと:
・2カット目だけ時々1秒近く止まる → 裏で先に再生しておく仕組みが切れ目の1コマのずれで止まり、曲に合わせて再生位置を飛ばし直すたびに詰まっていた。止めないように直して、6コマごとに区切って圧縮し直したら解決
・切り抜きは髪の毛先が甘い。結果、静止画はPhotoshopで手動💦
・blenderでのキャラのポーズがとにかく下手…私の指示かもしれんが…🤔 3Dモデルを配置すると一貫性は出るけど固い。緩めると細部の一貫性が弱くなる。どうするか…
あとはゲームのスタート画面としては約32MBで重くないが、サイトとしては重いので、もう少し軽量化する🥰
three.jsで作ってる砂漠のゲームで、スタート画面を作ってみた✨
ゲーム自体はOpusと作っているのだけど、絵的にはあまり変わり映えがないので、スタート画面をcodexに作ってもらっていた。
画像を生成しつつレイアウトがいるしcodexにまとめてもらう方がいいと思ったのだけど、
ベースはまあいいが、全体としてはいまいちだった。
で、結局opusにやってもらうのに、いくつか方向性を出してもらいつつ、
とりあえずこんな感じでスタート画面(仮)ができた。まあどうせ変わるのだけど、重さのチェックもしたかったし😊
登場カットはMiniMax H3(ローカルのComfyUI)で動画にして、動いているキャラの後ろに巨大な文字を通してみた😊
やったこと:
①codexで曲のループ。入りはそのまま流して、ループ箇所を選んで後半はエンドレスループ。地味に助かる
②絵はcodexで生成。キャラとライドの一貫性のために3Dモデルを作って、それを元に描かせた(まだ甘い…)
③登場の3カットは、H3で5秒ずつ作って使う所だけ切り出し(0.75秒・1.24秒・1.25秒)
④文字をキャラの後ろに通すため、動画を1コマずつ切り抜いて、1本の動画の上半分に絵、下半分に切り抜きの形を並べた。同じコマから描くので絵と切り抜きがずれない
⑤H3は1秒24コマなので、ffmpegでコマを補って60コマに
ハマったこと:
・2カット目だけ時々1秒近く止まる → 裏で先に再生しておく仕組みが切れ目の1コマのずれで止まり、曲に合わせて再生位置を飛ばし直すたびに詰まっていた。止めないように直して、6コマごとに区切って圧縮し直したら解決
・切り抜きは髪の毛先が甘い。結果、静止画はPhotoshopで手動💦
・blenderでのキャラのポーズがとにかく下手…私の指示かもしれんが…🤔 3Dモデルを配置すると一貫性は出るけど固い。緩めると細部の一貫性が弱くなる。どうするか…
あとはゲームのスタート画面としては約32MBで重くないが、サイトとしては重いので、もう少し軽量化する🥰
three.jsで作ってる砂漠のゲーム、バルカンを付けたら、ルールが見えてきた✨
キャラのモーションの調整を引き続きしながら、状況に応じたバリエーションを作っていたら、ゲームのイメージが広がり、レベルデザインとクオリティアップの往復をしていました。
往復をしていると整合性と一貫性が気になってきて、微調整がどんどん入っていきました。
こうなるなら敵はこうである方がいいとか、存在する物は全て意味のある物にしたいとか、難度のバランスとか…そこからまた、そのレベルデザインに合ったデザインや動きにしたいとなり、ものすごい量の往復をしています。
今回の動画はキャラのクオリティアップと攻撃モーションですが、ゲームルールもできてきました(次の投稿ではゲーム画面を見せられるといいなぁ)。
これまではホーミングを使う戦闘で考えていたけど、単調でつまらない…で、原点に返ることにした。
普通にバルカンを付けてみたら、普通に良い。
そうなると、やっぱり砂塵が舞ってほしくなって、地面に当たった所に砂柱を追加した。
なかなかいい感じ!となって、ここからゲームのルールが回り出した。
簡単すぎるとか、難しすぎるとか、単調すぎるとか、どこに原因があるのかとか、制御の限界があるのかとか、足したり引いたり、捨てたり戻ったり…💦前提を崩して構築し、また破壊している。
ただこの繰り返しが高回転で起きているので、サンクコストを気にせずレベルデザインに没頭できる。そして自分のこだわりに高いレベルで付き合ってくれるOpus 5.5。ありがたい😊
あとはSE。このゲームは音楽を優先しようと思っているので、エンジン音がどの程度あると良いのか試している。
SE単体で聞いた時には良いエンジンサウンドだと感じていたけど、BGMが入るとノイズになる。
消すと軽くなりすぎるし、これはもうタイミングだなということで、アクションに応じたSEにした。
普段は高い音を削ってこもらせて小さく、加速した時だけこもりを取ってはっきり鳴らして、ドリフトで砂塵が舞った時などにもSEを加えてみた。
操作に合わせて鳴るSEは、連動性を考えると奥深い。
なかなかバランスの良いSEになってきた気がする😊
リプや引用もたくさんいただきありがとうございます😊
three.jsで作ってる砂漠のゲーム、バルカンを付けたら、ルールが見えてきた✨
キャラのモーションの調整を引き続きしながら、状況に応じたバリエーションを作っていたら、ゲームのイメージが広がり、レベルデザインとクオリティアップの往復をしていました。
往復をしていると整合性と一貫性が気になってきて、微調整がどんどん入っていきました。
こうなるなら敵はこうである方がいいとか、存在する物は全て意味のある物にしたいとか、難度のバランスとか…そこからまた、そのレベルデザインに合ったデザインや動きにしたいとなり、ものすごい量の往復をしています。
今回の動画はキャラのクオリティアップと攻撃モーションですが、ゲームルールもできてきました(次の投稿ではゲーム画面を見せられるといいなぁ)。
これまではホーミングを使う戦闘で考えていたけど、単調でつまらない…で、原点に返ることにした。
普通にバルカンを付けてみたら、普通に良い。
そうなると、やっぱり砂塵が舞ってほしくなって、地面に当たった所に砂柱を追加した。
なかなかいい感じ!となって、ここからゲームのルールが回り出した。
簡単すぎるとか、難しすぎるとか、単調すぎるとか、どこに原因があるのかとか、制御の限界があるのかとか、足したり引いたり、捨てたり戻ったり…💦前提を崩して構築し、また破壊している。
ただこの繰り返しが高回転で起きているので、サンクコストを気にせずレベルデザインに没頭できる。そして自分のこだわりに高いレベルで付き合ってくれるOpus 5.5。ありがたい😊
あとはSE。このゲームは音楽を優先しようと思っているので、エンジン音がどの程度あると良いのか試している。
SE単体で聞いた時には良いエンジンサウンドだと感じていたけど、BGMが入るとノイズになる。
消すと軽くなりすぎるし、これはもうタイミングだなということで、アクションに応じたSEにした。
普段は高い音を削ってこもらせて小さく、加速した時だけこもりを取ってはっきり鳴らして、ドリフトで砂塵が舞った時などにもSEを加えてみた。
操作に合わせて鳴るSEは、連動性を考えると奥深い。
なかなかバランスの良いSEになってきた気がする😊
リプや引用もたくさんいただきありがとうございます😊
three.jsで作ってる砂漠のゲーム、この4日ほどはゲームのルールじゃなくて、キャラとモデルのクオリティを上げることに集中しました✨
ルールをあれこれ試したが、面白くないので、とりあえず爽快感と疾走感に集中して手触りと見た目にこだわってみた😊
一番効いたのは、キャラのモデルを「乗った姿勢」で作り直したこと。
元はTポーズのモデルを骨で曲げて乗り物に乗せていたけど、それだと腰やお尻の皮が折れたり伸びたりして、腰が細すぎるなど、普段のカメラだとあまり目立たないけど、角度を変えると破綻していた。そういうことの積み重ねがクオリティに出ると思う。
なので、GPTで乗った姿勢のキャラの絵を出して、Meshyで3Dに。
今の骨をそのモデルに合わせ直して付け直したら、歪みがほぼ消えた。
髪の揺れや体の傾きは、今までどおりthree.js側で動かしている。
ハマったこと
・Meshyのモデルは、テクスチャの区切りごとに頂点がバラバラに分かれている(同じ位置に点が重なっているだけで、つながっていない)。そのまま頂点を動かすと裂けて穴が開く。同じ位置の点をまとめてから触るのが大事
・骨を合わせる時、頭は髪が邪魔をして向きを62度取り違えた。角のような形のはっきりした所で合わせたら直った
砂漠みたいに何もない所でスピード感を出すのが本当に難しい💦
600km/hにすると飛んでしまうし、キャラが遠くて見えにくい。
なので速さは300km/hに抑えて、風の粒や地面の模様の流れでスピード感を出す方向にした。
ただ、この「速く感じない」をAIに伝えるのが一番苦労した。
上から見た図を描いてもらって、今どこから粒が出てどっちへ流れているかを見せてもらったら、ズレがどこにあるかがやっと分かった。
ポリゴン数も、three.jsでここまで入れたことがなかったので恐る恐るだったけど、キャラだけで約4万、背景の門や岩も入れて60fps出ている。まだいけそう。
結局、全部お任せでいい感じになることはなくて、細かい所の積み重ねだなと…
でも、4日でここまで来られるのは本当に魅力✨
エフェクトはまだ仮なんだけど、中々良いエフェクトにならず、格闘中…💦
three.jsで作ってる砂漠のゲーム、この4日ほどはゲームのルールじゃなくて、キャラとモデルのクオリティを上げることに集中しました✨
ルールをあれこれ試したが、面白くないので、とりあえず爽快感と疾走感に集中して手触りと見た目にこだわってみた😊
一番効いたのは、キャラのモデルを「乗った姿勢」で作り直したこと。
元はTポーズのモデルを骨で曲げて乗り物に乗せていたけど、それだと腰やお尻の皮が折れたり伸びたりして、腰が細すぎるなど、普段のカメラだとあまり目立たないけど、角度を変えると破綻していた。そういうことの積み重ねがクオリティに出ると思う。
なので、GPTで乗った姿勢のキャラの絵を出して、Meshyで3Dに。
今の骨をそのモデルに合わせ直して付け直したら、歪みがほぼ消えた。
髪の揺れや体の傾きは、今までどおりthree.js側で動かしている。
ハマったこと
・Meshyのモデルは、テクスチャの区切りごとに頂点がバラバラに分かれている(同じ位置に点が重なっているだけで、つながっていない)。そのまま頂点を動かすと裂けて穴が開く。同じ位置の点をまとめてから触るのが大事
・骨を合わせる時、頭は髪が邪魔をして向きを62度取り違えた。角のような形のはっきりした所で合わせたら直った
砂漠みたいに何もない所でスピード感を出すのが本当に難しい💦
600km/hにすると飛んでしまうし、キャラが遠くて見えにくい。
なので速さは300km/hに抑えて、風の粒や地面の模様の流れでスピード感を出す方向にした。
ただ、この「速く感じない」をAIに伝えるのが一番苦労した。
上から見た図を描いてもらって、今どこから粒が出てどっちへ流れているかを見せてもらったら、ズレがどこにあるかがやっと分かった。
ポリゴン数も、three.jsでここまで入れたことがなかったので恐る恐るだったけど、キャラだけで約4万、背景の門や岩も入れて60fps出ている。まだいけそう。
結局、全部お任せでいい感じになることはなくて、細かい所の積み重ねだなと…
でも、4日でここまで来られるのは本当に魅力✨
エフェクトはまだ仮なんだけど、中々良いエフェクトにならず、格闘中…💦
three.jsで作ってる砂漠の大物戦に、Opus5.5でエフェクトと効果音を付けたら、爽快感と疾走感は出た✨😊
ただ、これだけだとゲームとしては同じことの繰り返しになるなぁ🤔
どうやったら「遊ばされている」じゃなくて「遊んでいる」になるのか、試行錯誤中💦
この数日だけでも、強化、累積、効果継続、強さ、アイテム、動きの傾向…と、思いつく限り、作っては遊んで、残すか捨てるかの繰り返し…ただまあ、この繰り返しが半端なく速い!
Opus5.5で良かったこと:
・上手くいかなかった時に戻る地点をコミットで決めてから試すので、捨てるのが怖くない
・ブラウザで確かめられない時も、敵の動きだけを取り出して120秒動かし、「突進が何mまで迫ったか」を数字で確かめられる
・既存のゲームを分解してもらったり、ゲームだけじゃなく他の遊びも調べてもらいつつ、このゲームに何があれば良くなるのかを調べては実装を繰り返している。この実装の速さが、自分の思い込みをつぶしてくれる
ひとつ気をつけていること:
AIに案を出させると、「足す」方向に寄りやすい。
ただ足すだけでは複雑になるだけで、シンプルにはならない。
シンプルだけど単調ではないポイントを探すのに、今の調査と実装の高速回転は嬉しい😊
疾走感と爽快感は悪くない。でもこれだけじゃまだ足りない。
何を足し、何を減らすか、どう洗練させるべきか…🤔
three.jsで作ってる砂漠の大物戦に、Opus5.5でエフェクトと効果音を付けたら、爽快感と疾走感は出た✨😊
ただ、これだけだとゲームとしては同じことの繰り返しになるなぁ🤔
どうやったら「遊ばされている」じゃなくて「遊んでいる」になるのか、試行錯誤中💦
この数日だけでも、強化、累積、効果継続、強さ、アイテム、動きの傾向…と、思いつく限り、作っては遊んで、残すか捨てるかの繰り返し…ただまあ、この繰り返しが半端なく速い!
Opus5.5で良かったこと:
・上手くいかなかった時に戻る地点をコミットで決めてから試すので、捨てるのが怖くない
・ブラウザで確かめられない時も、敵の動きだけを取り出して120秒動かし、「突進が何mまで迫ったか」を数字で確かめられる
・既存のゲームを分解してもらったり、ゲームだけじゃなく他の遊びも調べてもらいつつ、このゲームに何があれば良くなるのかを調べては実装を繰り返している。この実装の速さが、自分の思い込みをつぶしてくれる
ひとつ気をつけていること:
AIに案を出させると、「足す」方向に寄りやすい。
ただ足すだけでは複雑になるだけで、シンプルにはならない。
シンプルだけど単調ではないポイントを探すのに、今の調査と実装の高速回転は嬉しい😊
疾走感と爽快感は悪くない。でもこれだけじゃまだ足りない。
何を足し、何を減らすか、どう洗練させるべきか…🤔
Opus5.5で、砂の中を泳ぐ巨大なボスと対戦するとこまで作りました✨
結構ゲームぽくなってきた🥰
最初はボスが砂からいきなり飛び出してくるだけで、出現がしょぼかった💦
そこからOpus5.5に注文を重ねて、今はこんな感じ
・潜水艦みたいに、後ろ姿のまま斜めにゆっくり浮上してくる
・背中を出して砂の海を泳いで、ときどき跳ぶ。着地すると砂塵がものすごい
・近づこうとすると風圧でものすごい抵抗があって進めない。砂塵で前も見えない
最初はもっと近づけるようにしていたけど、
実際にもしこの状況なら近づけねーだろうなとおもったので、近づけない仕組みにしました。
最初は見えない壁で弾き返していて不自然だったが、
「押しても進まない抵抗」「激しい画ブレ」「ボスが巻き上げた砂塵で本当に前が見えない」にしたら
雰囲気がでてきた😊
ClaudeはPROでhighでやってるけど、トークンに余裕があることが驚き。
Codexよりもイメージの共有はしやすいし、作り手のイメージの解像度が高いほど
コストは低く効率よくできている感触がある。
なので、AIやる場合はずっと同じっちゃ同じだけど、
やりたいことの解像度をあげることをまず初めに行い、
自分のイメージをある程度固めてから行うことが
これまで以上に価値があり、効率とトークンの節約になると感じる。
Opus5.5はGPT6 Solよりも顕著に感じる。
例えば砂塵も「今は色で変えてるけど、プレイヤー機のパーティクルみたいな粉塵がボスの軌道からも出てるはず」と伝えたら、ほぼ1回でこの形になった。
ボスはMidjourneyで絵を作って、Meshyで3Dに。1万ポリゴンぐらい
クオリティをどこまでthree.jsであげられるかはわからないけど、いけるとこまでやってみる
three.jsでハマったこと👇
Meshyのモデルに、面の向き(法線)の長さが0の頂点が12個あって、
その数ピクセルが壊れた値(NaN)になり、光をにじませる処理(Bloom)が画面全体に広げて、画面が一色に覆われた。
読み込む時に法線を直したら解決✅
AIに原因を調べてもらう時は「一時停止して、同じ画面で切り替えて比べて」と言うのが大事。
動いたままだと比べる2枚が別の画面になって、原因を何回も取り違えてた💦
次はSEとエフェクトとUXだなー✨
Opus5.5で、砂の中を泳ぐ巨大なボスと対戦するとこまで作りました✨
結構ゲームぽくなってきた🥰
最初はボスが砂からいきなり飛び出してくるだけで、出現がしょぼかった💦
そこからOpus5.5に注文を重ねて、今はこんな感じ
・潜水艦みたいに、後ろ姿のまま斜めにゆっくり浮上してくる
・背中を出して砂の海を泳いで、ときどき跳ぶ。着地すると砂塵がものすごい
・近づこうとすると風圧でものすごい抵抗があって進めない。砂塵で前も見えない
最初はもっと近づけるようにしていたけど、
実際にもしこの状況なら近づけねーだろうなとおもったので、近づけない仕組みにしました。
最初は見えない壁で弾き返していて不自然だったが、
「押しても進まない抵抗」「激しい画ブレ」「ボスが巻き上げた砂塵で本当に前が見えない」にしたら
雰囲気がでてきた😊
ClaudeはPROでhighでやってるけど、トークンに余裕があることが驚き。
Codexよりもイメージの共有はしやすいし、作り手のイメージの解像度が高いほど
コストは低く効率よくできている感触がある。
なので、AIやる場合はずっと同じっちゃ同じだけど、
やりたいことの解像度をあげることをまず初めに行い、
自分のイメージをある程度固めてから行うことが
これまで以上に価値があり、効率とトークンの節約になると感じる。
Opus5.5はGPT6 Solよりも顕著に感じる。
例えば砂塵も「今は色で変えてるけど、プレイヤー機のパーティクルみたいな粉塵がボスの軌道からも出てるはず」と伝えたら、ほぼ1回でこの形になった。
ボスはMidjourneyで絵を作って、Meshyで3Dに。1万ポリゴンぐらい
クオリティをどこまでthree.jsであげられるかはわからないけど、いけるとこまでやってみる
three.jsでハマったこと👇
Meshyのモデルに、面の向き(法線)の長さが0の頂点が12個あって、
その数ピクセルが壊れた値(NaN)になり、光をにじませる処理(Bloom)が画面全体に広げて、画面が一色に覆われた。
読み込む時に法線を直したら解決✅
AIに原因を調べてもらう時は「一時停止して、同じ画面で切り替えて比べて」と言うのが大事。
動いたままだと比べる2枚が別の画面になって、原因を何回も取り違えてた💦
次はSEとエフェクトとUXだなー✨
Opus5.5がスゲーってみんなが言うので
砂漠をホバーで飛ぶthree.jsのゲームに、戦闘を入れてみました✨
結果:スゲー😊
Opus5.5 highでやったのだけど、
最初は、羽の生えた雑魚敵をロックオンして倒すだけのシューティングで考えて実装してもらった。
3回ほどゲームの根幹を作りなおしてもらったけど、トークンの減りもひどくない。
そして現状この動画の形で落ち着きつつある。
・敵は見つからなければ襲ってこない。頭の「?」がたまると見つかって、群れで追いかけてくる
・後ろからそっと近づくと捕まえられて、捕まえた敵は横を一緒に飛んで戦ってくれる
・倒すなら、ロックオンして溜めて一気に10発。連打よりこっちが強い
今までならこういう仕様変更でややこしいことになることが多いけど、
Opus5.5では起きても、すぐ直っていい感じ…
しかし、こういうことがプロトタイプで1日ちょっとで可能だということがわかったことは大きい✨
あとはエフェクトをもうちょっと派手にしてもらうとかSEとかで大分変わりそう
雑魚敵もドローンも絵はMidjourney、3DはMeshy😊

