Unreal Engineのプラグイン作ったり、機械学習で遊んだり。そろそろゲームも作ってみたい。 ソシアルナイト Lv.10
南末次
Joined November 2010
- Tweets1.8K
- Following4K
- Followers5K
- Likes1.1K
FreeTimeGsVanillaやmodern_3dgsなどいくつかFreeTimeGS非公式実装を試したものの、動きの激しいselfcap/danceの4125フレーム目前後等では論文相当の品質が出ず、MVTrackerの3D点追跡で速度初期化とかML-Depth-Proで点群初期化とかあれこれしたが、いろいろあってやっとそれなりの品質になったよ…！💃
VoroTracing
ちゃんとセルの集合になってておもろい。でも思ったよりセルが見えてしまうのね、特に遠景
球面調和関数じゃなくて八面体テクスチャでセルの色を表現するというのもおもろい。3DGSとかにも応用できそう
Magenta Realtime 2おもろそうだけどMac持ってないよ～😭という悲しみを胸にWindows+CUDAで動くように改造して、せっかくなのでUEで動くようにしました
ONNXのAttentionノード最適化が例によって大変だった…
ちなみに手元の環境ではJax実装よりちょっとだけ速くなってます
麻場 健司／MocapFor(Streamer|All)開発 retweeted
Unreal Engineでインタラクティブな音楽生成を可能とする Magenta Realtime 2 Plugin for UE をリリースしました！🎵
複数プロンプトの比率を動的に変えながらブレンドしたり、MIDI入力で楽器のように演奏したりできます。マップ上の移動に伴って楽曲が変化していく、などの使い方ができそう…🎹
小ネタ
所用で作ったトグルボタンを放流🐟～
UE標準であってもいいのにね
github.com/Akiya-Research-In…
ik_llama.cpp を試してみました🐟
ik_llama.cpp を Windows でビルドして動かしてみる｜株式会社空き家総合研究所 zenn.dev/akiya_souken/articl… #zenn
麻場 健司／MocapFor(Streamer|All)開発 retweeted
3D Gaussians Plugin v2.0 リリース！🥳
Maskedマテリアルと影の描画に対応しました～💡
- Directional light、Point light等の各種ライトからの影に対応
- LumenによるGIに対応
- 複数オブジェクトを重ねて描画可能（Translucentではできなかった…）
描画負荷は高いことに注意してください
UE5.3 & Quest3のShared Spacial Anchorで沼ったがどうにか動いたメモ😇
・Colocationの話はUE5.4以降
・ドキュメントはちゃんと全部追う
・AppIDをDefaultEngine.iniに追加する
・ShareAnchorsノードはバグっててFailure.Broadcastを2回したりエラーコードがuint8にcastされて値が違ってたりで注意🤮
UE5.7とUE5.3を往復してVisual Studioでのビルドが通らないとき、%AppData%\Unreal Engine\UnrealBuildTool\BuildConfiguration.xmlを書き換えると問題が解決することがあるという学びを得た
