音声自動生成AI「MoeGoe」スレ★8 [386780362]

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:29:33.16

前スレ
githubで公開されている音声自動生成AI、日本のアニメキャラ2890名分の音声を学習素材に超速度で進化中★7
https://greta.5ch.net/test/read.cgi/poverty/1668949664/

ラブライブ全キャラ音声データセットが音声自動生成AI「MoeGoe」用に公開され話題に
https://www.youtube.com/watch?v=BtG99EOwuWE

githubで公開されている音声自動生成AI、日本のアニメキャラ2890名分の音声を学習素材に超速度で進化中
https://www.youtube.com/watch?v=aoq97CT0MUs

音声自動生成AI"MoeGoe"によるボイスドラマ
https://www.youtube.com/watch?v=4agKYtUWstU

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:30:01.96

※消滅済

2890名分のデータセット

GitHub - CjangCjengh-TTSModels
https://github.com/CjangCjengh/TTSModels#voistock

Japanese & English & Korean & Chinese
↓
Voistockの箇所

2022/11/23(水) 22:30:39.00

すごい

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:30:53.57

正式名称「VITS文本转语音生成模型」((Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech))

github
vits: Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech
https://github.com/jaywalnut310/vits

GitHub - innnky-vits-japanese- 端到端语音合成模型VITS，日语数据训练
https://github.com/innnky/vits-japanese

GitHub - Francis-Komizu-Sovits- An implementation of the combination of Soft-VC and VITS
https://github.com/Francis-Komizu/Sovits

GitHub - luoyily-MoeTTS- Speech synthesis model -inference GUI repo for galgame characters based on Tacotron2, Hifigan and VI
https://github.com/luoyily/MoeTTS

GitHub - Francis-Komizu-VITS- ACG Text-to-Speech
https://github.com/Francis-Komizu/VITS

VITS 语音合成完全端到端TTS的里程碑
https://blog.csdn.net/Terry_ZzZzZz/article/details/120458064

GitHub - CjangCjengh-MoeGoe- Executable file for VITS inference
https://github.com/CjangCjengh/MoeGoe

MoeGoe_GUI
https://github.com/CjangCjengh/MoeGoe_GUI

Moe TTS And Voice Conversion Using VITS Model
https://huggingface.co/spaces/skytnt/moe-tts

MoeGoeリリースノート
https://github.com/CjangCjengh/MoeGoe/releases

MoeGoe製作者のCjangCjengh氏
CjangCjengh
https://space.bilibili.com/35285881

moegoegui更新と感情控制模型の説明動画
2890人模型更新+使用方法介绍
https://www.bilibili.com/video/BV1mP4y1y7iU/

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:31:25.49

各キャラごとの声質に寄せつつ、日本語以外にも英語中国語韓国語で音声を生成することも可能なようだ

https://i.imgur.com/xvOmV0y.png
https://i.imgur.com/1nHgIjd.png
https://i.imgur.com/yvYkW6E.png
https://i.imgur.com/S9FjVrm.png
https://i.imgur.com/KgZo70z.png
https://i.imgur.com/kINKEVU.png

包含2890名动画角色的VITS语音合成模型
https://www.bilibili.com/video/BV1P8411Y7v5/

?2BP(1000) · 2022/11/23(水) 22:31:49.09

各キャラごとの声質に寄せつつ、日本語以外にも英語中国語韓国語で音声を生成することも可能なようだ

https://i.imgur.com/xvOmV0y.png
https://i.imgur.com/1nHgIjd.png
https://i.imgur.com/yvYkW6E.png
https://i.imgur.com/S9FjVrm.png
https://i.imgur.com/KgZo70z.png
https://i.imgur.com/kINKEVU.png

包含2890名动画角色的VITS语音合成模型
https://www.bilibili.com/video/BV1P8411Y7v5/

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:32:49.79

VITS 语音合成完全端到端TTS的里程碑
https://blog.csdn.net/Terry_ZzZzZz/article/details/120458064

moegoegui更新と感情控制模型の説明動画
2890人模型更新+使用方法介绍
https://www.bilibili.com/video/BV1mP4y1y7iU/

零基础炼丹秘籍 - 为自己喜爱的角色训练TTS（文字转语音）模型
TTS (text to speech) model for your favorite character
https://www.bilibili.com/read/mobile?id=17826415

デモページ
Audio Samples from "Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech"
https://jaywalnut310.github.io/vits-demo/index.html

VITS_TXT_to_Audio
https://github.com/alphanemeless/VITS_TXT_to_Audio

VITS长音声生成工具为你的小说，添加AI配音吧！（可可萝老师讲解）
https://www.bilibili.com/video/BV11d4y1r7cT/

論文
用于端到端文本到语音的具有对抗学习的条件变分自动编码器(Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech)
https://arxiv.org/abs/2106.06103

論文の解説動画
论文分享会 | 用于端到端文本到语音的具有对抗学习的条件变分自编码器
https://www.bilibili.com/video/BV1QB4y1U7ZK/

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:33:17.99

喜怒哀楽による読み上げの変化をパラメータ化しツール化

VITS情感控制语音合成

解説動画
可控制情感的绫地宁宁语音合成！基于VITS模型
https://www.bilibili.com/video/BV1Vg411h7of/

GitHub - audeering-w2v2-how-to- How to use our public wav2vec2 dimensional emotion model
https://github.com/audeering/w2v2-how-to

VITS情感控制语音合成
https://github.com/innnky/emotional-vits

感情を数字で指定できる、参数がパラメータ、样本がカタログのこと
「使用情感样本id作为情感参数」→「情感样本ID」

デモページ
nene-emotion
https://huggingface.co/spaces/innnky/nene-emotion

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:34:04.17

「vits　模型」で検索すれば配布されてるデータセットが結構出てくるが消えるのが早い、気になるデータセットがあれば早めにダウンロードしておいても良さそうだ

百度网盘(Baidu Drive)からダウンロードするには百度垢が必須
百度アカウント開設方法↓

このアプリをインスコ後、国コードで日本を選んでSMS認証すれば完了
https://adersaytech.com/tech-event/how-to-register-baidu-account.html

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:34:41.26

※百度网盘版は全て削除済み、嫌儲ディスコで再配布中

荒らし対策として、サーバーのメンバーに登録してから10分以上経過していないアカウントはチャットの参加を弾いているので予めご了承ください
参加後自動で弾かれた場合、recaptcha認証とアカウントのメール認証ができているか確認して下さい
嫌儲DISCORD部 - DISBOARD-
https://disboard.org/ja/server/313289774440120332

ラブライブ全キャラデータセット

LL全员语音模型 - 百度网盘(Baidu Drive)
パスワード r5k0
https://pan.baidu.com/s/1vHXah-GhzN31W6IkY6z6bQ

パスワード p2cn
https://pan.baidu.com/s/1vHXah-GhzN31W6IkY6z6bQ

パスワード mivq
zip解凍用パスワード LLSIFAS
https://pan.baidu.com/s/1jwvOmIvWjxFYR3EeQfjcdA

【【VITS】基于emotion-vits的LL全员语音模型】
https://www.bilibili.com/video/BV1jY411o7vv

Lovelive-VITS-JPZH Copied
https://huggingface.co/spaces/CarlDennis/Lovelive-VITS-JPZH

マギレコキャラ10人分のデータセット

パスワード mgrc

VITS的魔法纪录10人模型 - 百度网盘
https://pan.baidu.com/s/1ieZ9bisRPb6k7Nl-AH3hBg?pwd=mgrc
基于VITS的魔法纪录10人模型
https://www.bilibili.com/video/BV1Ne4y1y7uT/

ウマ娘
トウカイテイオー
ハルウララ
マチカネフクキタル
マチカネタンホイザ

パスワード wzsq

帝宝乌拉拉福来诗宝四人模型 -百度网盘
https://pan.baidu.com/s/1RsC-3WJfbv3pn7egGepcMA?pwd=wzsq

プリコネなかよし部データセット

パスワード znzk

好朋友部三人模型 - 百度网盘
https://pan.baidu.com/s/1A20m3NtIsxj_bjnU_6UlXw?pwd=znzk

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:35:53.34

～MoeGoeの使い方～

MoeGoeダウンロードして
https://github.com/CjangCjengh/MoeGoe/releases/tag/v3.0.1

MoeGoe_GUIダウンロードして
https://github.com/CjangCjengh/MoeGoe_GUI/releases/tag/v3.0.2

※消滅済↓
ここのリンクからモデルとコンフィグファイルをセットでダウンロードして
(Japanese & English & Korean & Chinese→Voistockの箇所)
GitHub - CjangCjengh-TTSModels
https://github.com/CjangCjengh/TTSModels#voistock

MoeGoe_GUI.exeを起動、MoeGoe.exeの位置とモデル(模型pth)、コンフィグ(配置・json)を指定したら
文本に文章入れて正規表現に変換できたら下のプルダウンメニューからキャラ名選んで保存ボタンで保存

MoeGoeリリースノート
https://github.com/CjangCjengh/MoeGoe/releases

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:36:42.81

MoeGoeローカルWebアプリバージョン
WebApp_MoeGoe
https://github.com/tasrr/WebApp_MoeGoe

MoeGoe_GUI日本語版
https://uploader.cc/s/rnt23lz3jv3bn9rygir7d8hlc98wlyir7sw8dn18ijkwo48bnnvefnwse2jltc5t.zip
https://greta.5ch.net/test/read.cgi/poverty/1668689965/82

日本語アクセント補正版
https://github.com/tasrr/WebApp_MoeGoe
https://greta.5ch.net/test/read.cgi/poverty/1668163297/90

基本がJA無しでチェックを入れた場合にJA付けますんver
https://uploader.cc/s/9lk9mgvbqd2akkbdvvu0pywr76pfh7z6osv54y9jmnevd4t5drvmykk4kuwu9b61.zip
https://greta.5ch.net/test/read.cgi/poverty/1668949664/53

※重要※/models/にフォルダ作ってモデルファイルを置いてないと使えませんver
※モデル変更時、本家でクリアしてる部分を強引に残すようにしたんで不具合あるかも
・モデル変更時の初回生成は少し時間掛かります
・Ctrl+→
　チェックある時は[JA]付けて、チェック入って無い時に[JA]があったら勝手に消します
https://uploader.cc/s/gkvfnftcz4hrujlh5i1t48a68oc41811mfc5xsxx7lrgasrkqczimmalj4pj46ql.zip
https://greta.5ch.net/test/read.cgi/poverty/1668949664/60

Voistock の config.json、最初の方の
text_cleaners:["cjke_cleaners2"],
を
text_cleaners:["japanese_cleaners2"],
に書き換えると[JA]が不要になる

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:38:34.42

GitHubの2890名モデルは消滅したが
moettsのsaved_modelの中の15が2890名モデルだったりする
https://huggingface.co/spaces/skytnt/moe-tts/tree/main/saved_model

2022/11/23(水) 22:39:33.06

MoeGoeでルイズに安倍の答弁喋らせているやつ面白かったわ

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:39:53.44

関連動画
プリコネキャラにごめゆいを言わせる動画、音声はすべて自動生成
【AI语音合成】用VITS给优衣说对不起公主连接17人模型
https://www.bilibili.com/video/BV1S24y1d74C/

なかよし部に中国語で喋らせる動画
【语音合成】基于VITS的好朋友部三人语音合成模型
https://www.bilibili.com/video/BV1JD4y167sQ

ルイズに喋らせる動画
【AI语音合成/VITS】来感受随时可以被钉宫辱骂的快感吧！
https://www.bilibili.com/video/BV1BP411G7P8/

ウマ娘&原神の声色再現動画
【AI语音合成】赛马娘&原神的中日结合模型尝试
https://www.bilibili.com/video/BV1UG4y1W7Ji/

VITS文本转语音生成模型の解説動画
【AI语音合成】基于VITS模型的优妮先辈语音合成
https://www.bilibili.com/video/BV1jY4y1c7JF

2022/11/23(水) 22:40:52.23

訛ってるぞ

2022/11/23(水) 22:46:47.60

vの声真似は？

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:47:41.60

嫌儲ディスコで2890名モデルを再配布します
ファイル名 baohan_2890min_model

2022/11/23(水) 22:50:17.93

今はこんなんでもこれからさらに進化していくんだろ？
もう声優要らなくなってくるじゃん

**鄧晟鉉** (ﾜｯﾁｮｲ ef4e-FINd) · 2022/11/23(水) 22:54:14.72

荒らし対策として、サーバーのメンバーに登録してから10分以上経過していないアカウントはチャットの参加を弾いているので予めご了承ください
参加後自動で弾かれた場合、recaptcha認証とアカウントのメール認証ができているか確認して下さい

※参加後翌日に自動で弾かれる方はアカウントの認証がrechaptchaが終わっていません
discordアカウント作成時の認証メールが迷惑メールフォルダに入っていないか確認してください

嫌儲DISCORD部 - DISBOARD-
https://disboard.org/ja/server/313289774440120332

2022/11/23(水) 22:54:24.66

再配布やめといたほうがいいんでは
開発グループに見つかったらほんとに全部停止させられそうじゃん

2022/11/23(水) 23:06:44.14

キャラ名書かないで配布すればいいのに

2022/11/23(水) 23:09:36.39

AI安倍晋三の新作であります
https://m.youtube.com/watch?v=kbHqmnm-jvE

2022/11/24(木) 05:15:08.38

元が停止したのに再配布は…

2022/11/24(木) 06:16:59.21

わしらは悪用なんてしないよ

2022/11/24(木) 06:28:45.57

安倍さんの音声データも入ってるのかな

2022/11/24(木) 10:44:39.60

いうて他のはもうしてるけどね

2022/11/24(木) 10:47:04.54

GUI_KAIファイルがとっ散らかっちゃってるんでまとめました
追加はデフォルトフォルダを変更出来るようにした位です
https://uploader.cc/s/g8t3tv9esr551uy8bddqnu345xdkgedn58vmrugwe83fjsh7hg58uevkw58lbqp6.zip

【デフォルトのフォルダを変えたい場合】
※今まで通りで良い場合は不要です
ルート(MoeGoe.exeがあるフォルダ）にcurrentpath.txtってテキストファイルを作って「モデルフォルダへのパス」と「音声出力先パス」を2行で書き加えてね
↓こんな感じ
https://i.imgur.com/nFTmbN7.jpg
https://i.imgur.com/FpvAqZG.jpg

2022/11/24(木) 10:48:21.38

エロボイスできるの？

2022/11/24(木) 10:49:06.06

画像みす
https://i.imgur.com/DmM60VO.jpg

2022/11/24(木) 11:41:32.17

guiに関してはもう至れり尽くせりだなあ

2022/11/24(木) 12:08:10.21

機種依存文字も入力させてよ

2022/11/24(木) 12:50:47.97

なんかずんだもんみたいやな

2022/11/24(木) 15:00:32.40

モデルの学習中に音源を足したらどうなるんだろう

2022/11/24(木) 15:26:51.77

音源追加は問題ないと思う