シリーズ説明
本シリーズで最終的に検証したい内容は、DMXで制御されたバカみたいな量のライト、それらすべてをキャラクターに当てても破綻しないレンダリングパイプラインの構築です。
実装の手段は選ばないため、普段展開している【UE5】◯◯◯ – Unreal Engine ◯.◯と比べると多少敷居が高く、また、実装の再現性を提供しないこともあるため、いつも以上に趣味嗜好が全開となります。
始まり
今度こそ、最終回、なのです。
成果物
観たい時に下までスクロールするのが面倒なので先に貼り付けます。
Rein Cloth
えちえち GPU Cloth Simulationとして進行していたものが形になったので、おまけから本編に昇格です。
内製のCPU及びGPUクロスシミュレーションです。
揺れモノって18禁感がないのにエッチだよね。ご満悦です。
生まれたてほやほやでセルフコリジョンが未完成だったり、コリジョンや自然な揺れ方が目標とする品質に達していませんが、とりあえずは実践投入です。少しずつ育てていくとします。
アルゴリズムはPBDとXPBDの選択式です。基本的には後者の方が結果が安定しますが、物理挙動を学ぶ際にお世話になったPBDさんも残しています。
UEには純正でChaosClothというCPUクロスシミュレーションが提供されていますが、相も変わらず汎用性の代償として膨大なパラメータ、そしてあまりにも現実的な物理挙動でゲームやセル系の映像作品では扱い熟すのが中々に難しかったりします。ChaosClothほどの複雑で多機能なモノは、それを扱い熟すための学習コストと、その機能自体を1から作成する自作コストに然程差はないと思っています。なので、欲望に身を任せて作ってみたのです。たしか鉄拳も内製のクロスシミュですよね。CEDEC2024で観た記憶があります。というかそこで他人が作っている事例を見たので、それなら私でも出来るやろと思えたのも発端のひとつです。面倒くさがりな筆者さんにおいてきっかけを与えてくれるイベントは重要なのです。諸刃の剣だけど。
ライティングパスの最適化
計測してみるとライティングに含まれるクリアパスが常駐的な負荷を叩き出しています。

クリアパスの最適化
単位はナノ秒なのでそこまで気に留める必要がないと思えちゃいますが、ディファードライティングは当然ながらライトごとにライティングパスが挿入されるため、普通に塵積案件、無視はできません。そもそもクリアパスが挿入されている理由に、後続のパスのブレンドモードにAddやMinを使っている、シャドウやライトファンクションが球や円錐のプリミティブで描画されており、書き込まれていない領域が発生するというのがあります。汎用性や安全性のために負荷を取っている感じです。トゥーンパス群においては汎用性という設計思想は一切不要なので、最初に投下するパスのブレンドモードをReplaceに設定、パスが一切投下されない場合はダミーバッファをフェッチという形で最適化をしていきます。書き込まれていない領域に関しては後ほどライティング計算の大改修をする際に解消されるので今は無視します。
シャドウのステンシル書き込みの最適化
シャドウは純正の負荷対策としてステンシルを書き込むフラスタムなプリミティブを投下した後に、先ほどのステンシルを元にテストしながらシャドウを書き込んでいます。純正パスであれば2重描画を加味してもある程度効果的な結果を得られるのですが、独自パスの場合においてはかえって悪化することがありました。本当にケースバイケースなので一概に悪いとは言い切れませんが、少なくともアベレージが悪化していることは事実でしょう。
一応効果的に作用するカットも存在はするはずなので機能を残しつつ、トゥーンのステンシルテストと併用して全体的に負荷を下げました。最終的には純正のステンシルテストな仕組みはオミットするかもしれませんが、一旦はこれで様子を見るとします。ちなみに純正の最適化効果が薄い理由としては、キャラに当てているライトが多すぎて基本的にシャドウのフラスタム内に収まってしまうので2重描画としての負荷が勝ってしまっている感じです。こういう場合は視錐台とカプセルでCPU内外した方が軽かったりします。無論カプセル数によって結果は変動しますが。
尚最終的にCoffeeLiveでは当てるライトが多すぎてほぼ常駐で影が落ちることが分かったので、純正のステンシルテストはオミットされました。
被写界深度の対応
被写界深度を設定すると映像作品感が増しますね。
ぱっと見はいい感じですが、半透明な衣装の後景がボケていなかったり、キャラクターにも被写界深度が適用される都合、輪郭線が薄くなったりボケたりして、セルルック感の損失に繋がっている箇所が見られます。キャラクターの品質は最優先なのでコンポジットパスを調整して解消していきます。
被写界深度の後にコンポジットすることで、キャラクターがボケることなく且つ半透明な衣装の後景が正しくボケるようになりました。改善後の見た目が少し白っぽいのはライトシャフトが乗っていることが原因です。コンポジットパスを変えたことでライトシャフト計算時にトゥーン深度が存在せずに位置関係が若干不正を起こしているんですよね。この部分はそもそもキャラにシャフトを乗せるべきかを比較するところからなので今は見逃します。
陰影の改修
当然ですがスポットライトは照射範囲内しか照らさないため、範囲外に出る際にスフィアマスクのような見た目になります。
これ自体は計算仕様で正しいのですが、陰影を2値化しているセルルックではライトの移り変わりが明らかに露出し過ぎており、雰囲気が台無しです。少なくとも筆者はこういう親和性の欠片もないブツ切りな見た目が嫌いです。
このタイミングでライトの基盤部分を改修するのは心が穏やかではないのですが、この見た目で動画を作ったら未来の私がブチギレる気がするので、正直乗り気じゃないですが、過去のうちに直しておきます。
スポットライトの改修
円錐と点の距離計算を自前の関数に置き換えます。純正の計算を流用してもいいのですが、目標とする絵が特殊な場合は、物理挙動な計算を無理に取り込んだところで破綻するのがオチです。自作しか勝たん。
先の距離計算の引数として突っ込んでいる点座標を任意のアクター座標に変更します。これでキャラクター全体が明るくなったり、暗くなったりします。物理挙動からは逸脱していますが、これにより入退出時に露出するスフィアマスク感を抑制しつつ、ライトが離れると徐々に暗くなるという最低限の要件は満たせます。
キャラクター全体で明暗を遷移することにより、局所的な挙動を抑制できました。これでライトが移り変わる際に雰囲気が損なわれることがなくなりましたね。ふふん。想定通りの動作で大変気分良きです。
陰影の変更後の見た目です。変更の副作用としてライトカラーが若干白飛びしていますが、後ほど改修を加えるのでスルーしてください。開発途中の絵ですが、我ながら良い出来です。スカートが揺ら揺らしているのがマジで刺さります。やっぱり揺れモノっていいですね。
ライトカラーの改修
スカートに注目すると分かりやすいですが、先の陰影と同様の問題がライトカラーでも発生します。

厄介なことにライトカラーは逆光を考慮する必要があります。左が先の計算を単純適用して逆光を無視、右がシャドウを適用して逆光を考慮した絵です。後ろから当てている橙色の加算度合いで逆光抑制の有無が分かると思います。
逆光を抑制すればライトの当て方がとても自然に見えます。問題なのはそれを抑制するのにシャドウを使用していることです。当然ながらシャドウは2値ではありません。結果として陰影で2値化した見た目を破壊してしまうのです。


逆光抑制の改修
可能な限り逆行を抑制しつつ現状の階調を壊さないようにシンプルなアクターのベクトルとライトベクトルによる内積で抑制しました。バックライトのカラーである橙色が乗っていないのが分かります。
エンジンシェーダーのホットリロードが便利
CoffeeLiveから導入したシェーダーのホットリロードがマジで便利です。イテレーションが爆速なのです。
内部実装を隠蔽しながらプラグインとして公開する方法を心得たので今後はもう少し色々と出せるかもです。あとはシェーダーファイルを隠せたら完璧なのですが、シェーダーってプロファイリングツールでキャプチャすると余裕で覗けちゃうんですよね。実装部分も解析すれば似たようなものですが、シェーダーは特に覗きやすいから困ります。使われる分には構わないんだけど、中身は見てほしくないという難しいお年頃なのです。
20周年らしい
たのしかった(こなみかん)


うどん Pro 3
とりあえず買ったけど、相変わらずブランド価格で草なのですわ。

柑橘ジャム
3LJという呼称があんまり好きじゃないので日本語化パッチを当てて、柑橘ジャムと呼んでいます。
続々と出荷されています。
むふふ。

お届け物
えへへ。

ゆずさんは安定の複数購入です。店舗特典があるのが悪いのです。

記録しようとしたけど品数多くて途中で飽きちゃった。










セレオブの時に残りの収納スペースがゼロになったんですよね。
さて、どうしようか。
いや、どうしようもないか。



好きなものに散財して眺める時間は有意義なものです。
シンプルに仕舞う場所がないから野ざらしになっているだけですが。
お仕事頑張った甲斐がありました。
えへへ。