Seiren Voice(セイレンボイス)とは、Dwango Media Villageが開発した声変換技術 及び その技術を元に制作・販売している声変換ソフトウェアである。
※Seiren Voiceを利用した作品のニコニコにおける公式推奨タグは「SeirenVoice」(「_」無し)である。[1]
概要
株式会社ドワンゴの研究・開発部門である「Dwango Media Village」が開発した声変換技術。いわゆる「ボイスチェンジャー」。
リアルタイム性を捨て、品質に極振りしているのが特徴。入力された音声を「音素」「音高」「発音タイミング」に分解し、それをディープラーニング技術で再構築して声変換を行なっている。
開発者は、Dwango Media Villageの廣芝和之氏。ニコニコ技術部タグで話題になった「ディープラーニングの力で結月ゆかりの声になってみた」や、フリーの音声合成ソフトウェア「VOICEVOX」の開発者である「ヒホ」と同一人物。
2020年09月14日に、ブラウザ上で扱えるデモ版を公開。誰でも100人のさまざまな声になることができ、話題となった。[2]※製品化に伴い2022年5月にデモは終了している。
2022年3月25日、Seiren Voiceの製品化が発表され、同日、都内にて開催されたイベント「ボイスコネクト2」にてデモ展示、ハレスタにて行われた公開生放送番組「ソフトウェアトーク動画投稿祭応援しまくる祭
」にて製品説明が行われた。
そして、2022年5月17日、1度の延期を経て無事リリースされた。
製品版のSeiren Voiceでは、A.I.VOICEの収録データ、テキストデータを学習。そのため、現在発売されている「結月ゆかり」「琴葉茜・葵」共に、A.I.VOICEの声に近い形で再現される。
単なる朗読だけではなく、「歌」にも対応。鼻歌や軽く歌う程度であれば簡単に変換することができる。「歌モード」をオンにすることで、変換時にキーが変わらない様になり、音程が合いやすくなる。
ライブラリ一覧
- Seiren Voice 結月ゆかり
- Seiren Voice 琴葉茜・葵
- Seiren Voice 紲星あかり
- Seiren Voice 伊織弓鶴
- Seiren Voice ずんだもん
- Seiren Voice 東北イタコ
- Seiren Voice 東北きりたん
- Seiren Voice 東北ずん子
どちらのライブラリも、キャラクター立ち絵やキャラアイコンは描き下ろしや初出しのものになっている。
なお、「琴葉茜・葵」は二人揃って1つのライブラリとなっており、関西弁で話すと琴葉茜、標準語で話すと琴葉葵に近くなる模様(個人差アリ)。
関連生放送
関連動画
関連商品
Seiren Voiceは、ドワンゴジェイピーストア/A.I.VOICE Official Shopより購入可能。
関連リンク
- Seiren Voice 公式サイト
- Seiren Voice Twitter (@seiren_voice_25)
- Dwango Media Village 公式サイト
- 誰の声でも100人の声に変えられる声変換システム
2020.9.14
- 誰の声でも100人の声に変えられる声変換システム
- Dwango Media Village Twitter (@Dwango_DMV)
関連項目
- ボイスチェンジャー
- 結月ゆかり
- 琴葉茜・葵
- 紲星あかり
- 伊織弓鶴
- A.I.VOICE
- セイレーン - 名前の由来
- CUDA …Seiren VoiceはCUDAを利用しているので、NVIDIAのGPU(Compute Capability 5.0以上)を搭載したPCが必須になる。
脚注
- *https://twitter.com/seiren_voice_25/status/1527933018333073408
- *https://twitter.com/dwango_dmv/status/1305455662751653889
- 4
- 0pt