F0推定法「Harvest」

ノート用。 音声分析合成システム「WORLD」最後のピースとして、Harvestは元々統計音声合成向けとして「処理時間が長いで構わないから、対雑音性を高めて欲しい」という要請で着手し始めたモノ。 UTAU的いうと「(文字通り)究極の周波数表生成ツール」の作成の手助けになる可能性が秘めてる。 続きを読む
3
前へ 1 ・・ 14 15
M. Morise (忍者系研究者) @m_morise

UTAUって,ベースとなるシステムの更新が止まって外部からハックするシステムが伸びている状況だと記憶していて,その状況で今から技術者として参入するにはハードルが高すぎるんだよねw

2016-12-31 21:21:35
M. Morise (忍者系研究者) @m_morise

話題のえいごおんげーんって音声分析的にどのくらい難しいのかは興味がある.というより,今一番使われている合成エンジンって何なんだろ.

2016-12-31 21:25:04
M. Morise (忍者系研究者) @m_morise

ようやく歌声合成の研究に戻る算段が付きそうなので,UTAUを含めて最先端の状況を知っておきたいのである.

2016-12-31 21:28:46
M. Morise (忍者系研究者) @m_morise

tn_fndsがまだ現役でいることに驚きを隠し切れないw twitter.com/chiteico/statu…

2016-12-31 21:37:56
ちていこ @chiteico

補足すると「resampler」による声の変身感は根強い人気。本家の安心感も手伝い、切り替えない勢のユーザは多そう。「fresamp」「tn_fnds」「Moresampler」は出力音のテイストが違うため、調声者によって好みが分かれる印象。音源との相性によって使い分ける場合も。

2016-12-31 21:36:03
M. Morise (忍者系研究者) @m_morise

slideshare.net/khuasw/how-doe… とりあえずMoresamplerを勉強中.ソースコード落ちてるなら,分析合成部だけ最新版WORLDにするくらいはできそうかな.

2016-12-31 21:40:32
M. Morise (忍者系研究者) @m_morise

何気なくMoresamplerの日本語資料を見つけたのだけど,作ったの日本語ネイティブじゃないよねw日本語でチュートリアル作るとか恐ろしいなw

2016-12-31 21:41:26
M. Morise (忍者系研究者) @m_morise

なるほど,Moresamplerの仕組みは大体わかった.ソースコードは公開してなさそうかな.残念.

2016-12-31 21:50:00
M. Morise (忍者系研究者) @m_morise

あれ,そういえばwolrd4utauって今でも公開してるんだろか.

2016-12-31 21:51:21
M. Morise (忍者系研究者) @m_morise

world4utauのソースコードとUTAU ユーザー互助会で勉強する限り,フラグ管理部の実装は面倒そうだけど,基本的な機能だけならそこまで面倒じゃなく実装できる気がしてくるな.

2016-12-31 22:28:59
M. Morise (忍者系研究者) @m_morise

えいごおんげーんのお話を伺う限り,Harvest + D4C Love Trainを導入すればいい感じに品質が上がる気はする(子音が多い音源のF0推定精度向上と,摩擦音合成での品質UPが売り)

2016-12-31 22:32:50
M. Morise (忍者系研究者) @m_morise

UTAUでWORLDを導入する場合の課題は中間ファイルのサイズだな.これは5月を目安に発表する符号化法で解決するから,本気で実装するならそのタイミングかな.

2016-12-31 22:35:31
M. Morise (忍者系研究者) @m_morise

だとすると,年始を使っての実装はやめて,5月〆切の資料を先に執筆してしまおう.GWを目安に色々作る(予定は未定).

2016-12-31 22:38:28
M. Morise (忍者系研究者) @m_morise

ちなみにHarvestはアカデミアでの性能は間違いなく最強の一角に入りますが,商用ソフトだとAuto-TuneのF0が恐ろしく強いという噂.

2016-12-31 22:40:30
M. Morise (忍者系研究者) @m_morise

Auto-TuneをF0分析器として使うような仕組みを作れば,F0推定法はそれ以外いらなくなる可能性があるw

2016-12-31 22:44:56
M. Morise (忍者系研究者) @m_morise

とりあえずUTAU関連で何か作るのはGWと決めたので,三が日で資料70ページくらい書きます.

2016-12-31 22:45:54
前へ 1 ・・ 14 15