UTAU音源を使用して、DAW上でリアルタイムに歌声合成します。
— あっきー (@AckieSound) 2021年7月19日
UTAU音源をDAWで使うためのVSTプラグインを作ってみた https://t.co/aA9YRh7oIg #sm39054628 #ニコニコ動画
クローズドβテストを実施します。ご協力いただける方はDMでご連絡ください。現在のバージョンは不安定で制約も多いため、不安な方は安定版がリリースされてからのご利用をお勧めします。
— あっきー (@AckieSound) 2021年7月21日
UTAU音源をDAWで使うためのVSTプラグインを作ってみた https://t.co/nKJ4XGmOCX #sm39054628 #ニコニコ動画
音声はリアルタイムに合成していますので、歌詞を変えても、タイミングを変えても、ust自体がごっそり変わっても(周波数表作成が不要であれば)リアルタイムに反映されます。
— あっきー (@AckieSound) 2021年7月19日
このVSTプラグイン用に、リアルタイムに音声合成できる専用のエンジンを作成しました。resamplerとwavtoolが一体になったもので、WORLDを利用して作成しています。(WORLDは位相を考慮せずにオーバラップできるので、比較的簡単にリアルタイム合成できます)
— あっきー (@AckieSound) 2021年7月19日
UTAUエディタは、VSTプラグインとは独立して動作していて、ustファイルを書き換えるために使用しています。(VSTプラグインの画面として動作しているわけではありません)
— あっきー (@AckieSound) 2021年7月21日
VSTプラグインは、ustファイルの更新を検知して再読み込みを行い、プラグイン単体で音声合成しています。
— あっきー (@AckieSound) 2021年7月21日