AIボイスチェンジャーの話。
MMVC#
MMVCとは、天王洲アイル氏が開発・公開するボイスチェンジャーソフトである。機械学習(ディープラーニング)により**『誰でも』『好きな声に※』『リアルタイムで』『無料に』声変換できる**点が特徴。(MMVC:Real Time Many to Many Voice Conversionの略) – ニコニコ大百科
isletennos/MMVC_Trainer
AIを使ったリアルタイムボイスチェンジャー(Trainer)
Jupyter Notebook
809
73
RVC#
中国初のAIボイスチェンジャー。Retrieval-based-Voice-Conversionの略。
RVC-Project/Retrieval-based-Voice-Conversion-WebUI
Voice data <= 10 mins can also be used to train a good VC model!
Python
18438
2849
MMVCとRVCの比較#
GPU：RTX3060
| 訓練が必要 | 訓練に自分の声が必要 | 必要なデータ量 | 訓練時間 | 変換時のレイテンシ | ベースモデル | |
|---|---|---|---|---|---|---|
| MMVC | 必要 | 必要 | 数十分 | 1時間程度 | 0.3秒 | |
| RVC | 必要 | 不要 | 数十分 | 1分程度 | 0.6秒 | VITS |
注意点として、VRChatを立ち上げたままボイチェンをかけるとレイテンシが長くなる。