WTR (@wtry1102) header
WTR (@wtry1102) profile picture

AI楽曲×作詞×イラスト 「夜坂瑠璃」とAIの共作でオルタナ・エモ系の歌を制作中 AI×SNS時代を歌詞とMVにしてる人 CPP/FlovaAI Capcut TapNow/KlingECP https://nitter.cf/t.co/UX85IO8vpL https://nitter.cf/t.co/HZG9LVuYah

Joined February 2014
Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)Photo by WTR (@wtry1102)
Pinned Tweet
#AIMV #klingai 『VoxelBuild』MV 完成。 今回のテーマは「AIで王道オルタナロック実写MVを成立させる」でした。 都市の曇天の下で歌う彼女と、白いボクセル空間で“積み上げる少女”。 「UNDO / rebuild(崩して、作り直す)」をモチーフに、オルタナロックMVとしての空気感と構成で仕上げました。 Klingリップシンクを用い、ほぼ全編リップシンク Grok生成による外ロケ風の歌唱シーンを軸に構成 白いボクセル空間の少女パートで対比演出 Filmoraでのカット/色/空気感の統一と映像と音楽の同期とテンポを重視し編集 特にフィルムライクなグレードで統一 AIMVでよくある“1構図の反復”ではなく、MV文法として見続けられる流れを目指しました。 この曲を作ったのは昨年末ですが、奇しくもここ最近界隈を賑わせているAI音楽の創作論について私なりの解釈を歌詞にした内容となってます。
🤖 Made with AI
7
14
2
142
21,989
Seedance 2.5 の4K生成を試しました。 CapCut Web版「動画スタジオ」で生成した30秒を、 そのまま拡大しても細部が残ります。 @capcutapp_jp #capcutseedance25 #capcutdraft #capcutcpp
27
「エルフと焼き芋」 噂のSeedance2.5flashを試してみる。 今日描いた手描き絵から Seedream5.5でキャラシート作ってテスト。 うーむ絵柄やラフタッチの維持は難しそうだが、一発ポン出しでこれなので、とりあえずプロンプトをしっかり設計すれば変な動きはしなさそう。 焼き芋の形と割り方がチョットあれだが・・・ #capcutcpp  @capcutapp_jp
ChatGPTに線画の雰囲気に合うような水彩タッチで塗ってみてとお願いしてコレ。 左側のケープの長さが右側の長さに合わせたのか、ラフの時の迷い線を参照したのか、短くなってるけど、こちらが描いた意図はある程度理解してくれている模様。(チェック柄とか。) 下絵ラフは手描き、塗りはAIみたいな使い分けが出来そう。
1
120
作ったキャラシート。 ラフで出した服の構図間違えが そのまま反映されちゃってますね
35
AI利用でのハイブリットフローだとこんなやり方も 手描きでラフ下描き ↓ ChatGPTで水彩着色(着色レイヤー化) ↓ クリスタで下描きラフと着色レイヤーの上から線画引き直し と着色部分の微修正 昔ペインターでよくやってた厚塗り着色の後の線画引きの応用フローだけど、これも厳密にいうとAIトレスになるんかね
1
373
ChatGPTに線画の雰囲気に合うような水彩タッチで塗ってみてとお願いしてコレ。 左側のケープの長さが右側の長さに合わせたのか、ラフの時の迷い線を参照したのか、短くなってるけど、こちらが描いた意図はある程度理解してくれている模様。(チェック柄とか。) 下絵ラフは手描き、塗りはAIみたいな使い分けが出来そう。
🤖 Made with AI
タブレット動作確認がてら久しぶりに手描きラフ。 Codexで作ったシンプルお絵描きソフト使って 筆圧も補正も一切なしの直描き。 補正無しだと笑っちゃうくらいヘロヘロな線になるね でもこれくらい軽いブラウザアプリのほうが 気楽に落書き出来て良いかも。
1
203
タブレット動作確認がてら久しぶりに手描きラフ。 Codexで作ったシンプルお絵描きソフト使って 筆圧も補正も一切なしの直描き。 補正無しだと笑っちゃうくらいヘロヘロな線になるね でもこれくらい軽いブラウザアプリのほうが 気楽に落書き出来て良いかも。
1
1
239
MUSE君(ごま)のリアクションが 👍←コレ以外してくれて思わずニッコリ☺️
130
「SALT STATIC LOUD」 GoogleColab環境下で ショートMVを制作しました。 Codex(GPT6.1Sol)で楽曲はSUNO MCP 画像をMidjourneyで作成し、 それを元に派生画像をGoogleColabで動作させたMiniMax-H3-Imageで生成 さらにGoogleColabで動作させた MiniMax-H3で動画生成。 GoogleColabはともにA100ハイメモリを利用。 仕上げのカラグレ・映像エフェクトはFilmora。 自分で構築した生成環境から、 映画のワンシーンのような映像を。
3
4
422
元のMidjourneyの画像と キャラシートと生成した派生画像。 Xって20枚画像アップできるようになったのね。
92
MiniMax-H3-ImageをColabで動かして、 Codex(6.1Sol)のチャットから画像生成・修正できるようにした。 (ClaudeCodeはFable回し過ぎて5時間制限にぶち当たってたのでCodexに任せた) 指示と画像はGoogle Drive経由で往復。 服の質感から構図演出まで、 生成結果を見ながら会話で詰められるのが面白い。 ローカルでこの質感だせるようになったんだな 参照も効くし編集も行ける。 A100利用は約65分、消費量は概算7.3 CUでした。
1
321
Seedream 5.5とFable5.2が来た 今作ってるコンテスト用の作品にテスト投入。 Seedream5.5はこれはメインになりそう。 今の作品、素材質感が重要だから、 ここで素材表現の向上した画像生成モデルの登場は助かる。 Fable5.2くんは優秀だが、クレジット消費が爆速なんでとりあえず、Opus5.5メインかな
1
206
プリビズ実験 ゆっくりとしたカメラコントロールと 浮遊する物体のコントロール プリビズはMUSEで制作し、 そのままAZ8CLIにリファレンス投げて生成。 AZ8Oxygenで生成。 桜吹雪とか雪が舞うみたいなのも プリビズコントロールできそう
2
210
MUSEを司令塔にした環境での制作検証 『AFTER CLOSE, ONE MORE SONG』 閉店後のお店で、眠たいイカメイドがモップと踊るショートMVです。 ■ 今回のワークフロー ・音楽:Suno MCP 経由で生成(Kawaii BASS系ダンスポップ、BPM140。テイクを延長・結合して45秒に) ・映像:AZ8 CLI でプロジェクトを操作し、AZ8「Oxygen」(MiniMax H3)で6ショット生成。 キャラシートと部屋シート、ショットごとの楽曲抜粋をリファレンスに渡し、プロンプトはH3向けの設計書式で組みました ・モーション/歌詞演出:EffectCraft。コンセプトは「ONE MORE ×N」で、フックに合わせて映像自体が×2→×4→×9→×25と増殖します。歌詞テロップは波形解析で歌唱タイミングに同期、ハートや幾何学模様はビートに合わせてラインアートで動かしています ・制作体制:司令塔は Muse。対話で指示を出し、Muse が AZ8 CLI と Suno MCP を動かし、自宅PCの Claude Code(Opus 5.5)に EffectCraft の実装を委任する、多段のAIエージェント連携で制作しました 土台は Tailscale+SSH(公開鍵認証)で、MUSE環境と自宅PCを常時接続。その上で「委任」は次の手順で回しました 1.MUSEが指示書(プロンプトやスクリプト)をファイルとして書く 2.scp でPCへ送り、PowerShell経由で Claude Code をヘッドレス実行(モデルは Opus 指定、使えるツールは事前に許可リストで明示) 3.成果物や報告ファイルを scp でMUSEへ回収し、検証してから報告 便利っちゃ便利なんだけど、ClaudeCodeアプリから直指示したほうが、リリックモーション精度やクオリティは高い気がする・・・ ただ、MUSEとの対話ですべての生成ツールがシームレスに使えるのはたしかに便利かも。 有料プランのMUSEWonderにしたらもっと違うのかな。 @AZ8_official @AZ8official_JP #AZ8
3
1
13
1,397
それと制作途中にMUSE自身にテストモック版を作らせたのがこちら。このフローだと本番生成前にMUSEの無料枠での動画生成で動画の雰囲気を掴めるので便利かも。 場合によってはここから深度マップ化させてモーションリファレンスとかに使えるかもしれん。
168
過去にGrokImage検証用に作った動画プロンプトを 今の生成動画モデルで試したらどうなるか やってたついでに MUSE君とOpus5.5くんのデザインセンスの 比較をしてみた。 架空の大学のオープンキャンパスCMを制作。 動画はMUSEで生成し、そこからCM作ってと指示。 👈MUSE 👉Opus5.5 やっぱOpus5.5くんのほうが洗練されてますね
3
313
プリビズ利用の利点ってコレなんですよね。 AIとの映像意思疎通のための 共通フォーマットとしての利用。 事前にプリビズを作り、自分の脳内映像とAIが考える映像のすり合わせがしやすいんですよ。そこからプリビズから字コンテ起こすという作業やるとより精度の高い動画生成プロンプトが出来る。 さらに応用としては、カメラワークと画角構図だけを抜き取ったカメラプリビズをつくって参照させるとキャラの動作や配置などは字コンテ、カメラやカット割りはプリビズって役割分けなんかも出来きちゃう。
プリビズtoプロンプト 作ったプリビズを敢えて参照させず、Opusにプロンプトを書き起こしてもらい、キャラ画像とプロンプトのみで生成 あれ…?こっちの方が良くない? 背景はプリビズのブロックアウトに影響されず、キャラも固くならない キッカーの形状が変だったり、コークスクリューっぽい縦回転狙ってたのがカメラロールに化けたりする課題はあるけど🤣 プリビズは作るが参照せず、そこからプロンプトを起こす 言語化しにくい部分を映像を見ながらエージェントと詰められるので、この方式が自分に合っているかも
1
1
1
3
362
液タブとの併用で自宅作業用に板タブ購入。 付属品無し未使用品のPTH-660 めっちゃ格安で買えた 配達員のおにーさんがめっちゃメロいイケメン君だった
1
244
DreaminaAIのブラックフライデー先行セールの basicプラン99%オフ月額30円に惹かれてつい契約。 2700クレジットが30円・・・。 破格すぎる。
2
160
🎸 I'M NOT DONE YET AZ8 Oxygen で歌って弾くところまで作った、Y2Kポップパンク風の縦型フルリップシンクのアニメMV。 NYの交差点にアンプを積んで「まだ終わらない」と叫ぶ女の子の話。 カトゥーン風キャラデザとアニメ演技の 制御のテストをしてみたくなり作成。 ⏱ 制作時間はキャラデザから完成まで約4時間 すべてOpus5.5に任せてプリビズ制作や動画生成、動画編集やカラグレ、VFX撮影やテロップ編集まで極力自分の手作業はノータッチでやってみました。 (修正指示などは出してます) 💳 AZ8 1,997クレジット(動画 1,076/画像 921) @AZ8_official @AZ8official_JP #AZ8
1
2
290