ゆっきー@音声合成 (@4wavetech) profile picture

音声合成を勉強しています。歌声合成に特に興味があります。音声合成に関わる全ての人に尊敬と感謝を。業界の外の人ですが、絡んでくれると喜びます。

Joined February 2022
Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)Photo by ゆっきー@音声合成 (@4wavetech)
新しい歌声合成ソフトを公開しました! インストール、GPU不要で、あなたのCPUとブラウザで軽快に動作するフル機能のSVSです(Chrome推奨)。ページにアクセスしてすぐ使えるので、ぜひ触ってみてください。 wavtechyukky.github.io/vocat…
12
415
34
2,047
83,630
色んな音源の声や中の人も分かってとてもいい動画です…! DiffSingerにはいい音源が沢山ありますね!
1
2
3
312
遊びに来ました
6
212
SynthVの+-記号の仕様賢すぎて愕然とした 逆にVoiSonaはこの機能ないのか…?
3
1
60
11,848
英語用のconfigは置いてあるけど、今のままでは英語に対応できないことがわかってきた。中国語と韓国語も多分だめだろう。日本語だと色々処理が簡単にできるのだと思い知らされた
1
259
複数ノートにまたがる英単語の分割ルールについて考え中。今のところ音響モデルに「skies -」は「s k ay ay z」が入力されてしまうので、思ったより色々改修する必要がありそうだ…。
1
5
30
1,140
github.com/wavtechyukky/NHVS… NHVSingボコーダーのウェイトを更新(v3.3)しました。評価用の全ての音声でv3.2.1よりground truthとの差(mel L1 loss)が縮まり、ゼロ位相気味の刺々しい音が発生しづらくなりました。
2
5
28
1,133
hifisamplerの調波/雑音分離モデル(非商用利用可、開発者に使用許可取得済み)を使い、調波/雑音別々にlossを与えることで、より適切な調波/雑音の分担が行われるようにしています。分離モデルの癖に依存するため今後も使っていくかは決めかねていますが、今のところベストなモデルだと思います。
2
181
使用の断念を決意(こういうラベルが少なからずある)
1
15
719
絶対静音じゃないとこに静音ラベル付きまくってて困惑している。DiffSingerの論文でこのデータセット(PopCS)が使われたらしいけど本当なのか
1
1
12
635
SHIROに中国語教えて中国語の音素ラベル直すためのアプリClaudeに作ってもらったのだけど、正直SHIRO側も全然合ってない…。あとPopCS変なとこに休符入れすぎでは…。
3
3
29
1,393
ゆっきー@音声合成 retweeted
github.com/SODAsoo07/UTAU-Au… AutoOTO 맥 버전 가져왔습니다 기본적인 실행 확인 등은 마쳤지만 제가 맥이 없어서 자잘한 버그 등이 있을 수 있어요! 그럴 땐 제보 부탁드립니다
1
7
13
530
逆しゃくりや歪みの大きいビブラートって普通のF0モデルだと出ないから(自分の知る限りF0モデルはこれらを打ち消す方向に学習されると思う)、がっつり調声する人って手書きするんですね…。
⭐️New Upload⭐️ 「 調声作業解説! with ACE Studio 」 ボカロ調声について、普段どんなことをやっているのかを解説しました。 リンクは↓のツリーから。
1
7
498
ゆっきー@音声合成 retweeted
最近、自作の歌声合成エンジンやエディターの話題が、なんだか盛り上がっている気がします……! ……ということで、Mioも少しだけ実験中のものをお見せします。 Ꮚ˶ー̀ωー́˶Ꮚ 今回のデモは「Lite」の高速合成モード。 合成品質を少し犠牲にして、処理速度を優先した状態での動作です。 ちなみに、合成に使っているのは MacBook Air M5 のCPU です! まだまだ実験段階だけど、こうして少しずつ形になっていくのって、やっぱり面白いですね。 これからどこまでできるようになるのかな……? Ꮚ˘・ω・˘Ꮚ
17
2
81
2,351
冗談抜きにDeepSeek娘に負けてるなこのクオリティは…。中国語はデータセットいっぱいあるし簡単だろうと思ったのが大変甘かったです
1
338
ACVはもっと酷い結果になった。中国の論文でよくデモ音声はすごい綺麗なやつあるけどほんとなの…?
2
294
中国語のデータセット(OpenCpop)を学習させた。どうやっても発音が明瞭にならない…。
2
2
40
1,465
PopCSとM4Singerの音素ラベル、流石に厳しいかもしれん(例に挙げたやつが特別ズレてるとかじゃなく全体的にこう)
2
4
540
ゆっきー@音声合成 retweeted
超軽量な歌声合成エディタを公開しました!モデルもオープンソースです!数秒の普通に話した声から歌声を想像して歌を合成します。 超小型マイコンでRTF0.9[s]で動くくらいで、古いPCでも余裕なはず!4wavetechさんの技術も使わせてもらっています! 動画はつくよみちゃんコーパスです!
3
153
20
528
20,881
創作の作業を3秒に簡略化するツールよりも、創作の哲学を3日で悟るツールはないのかという気はする。ACE虚拟歌姬(ACE Studioの前身)は初心者の創作の入り口に、というコンセプトだったけど、洛天依Pも年季の入った人しか生き残らなかった感は否めない。創作者の濃い世界を自分も知りたいと思うのだが…
13
623
重音テト…、嘘だよな…?
2
15
822