リアルタイム音声トランスフォーマーRVC w-okada's Voice Changer

今日はGitHub上のオープンソースプロジェクトを実行しました:w-okada RVC(Realtime Voice Changer)。今年の5月以降、このプロジェクトへの注目度が急上昇し、スター数も増加しています。


プロジェクト概要

プロジェクトアドレス - https://github.com/w-okada/voice-changer

RVC(リアルタイムボイスチェンジャー)は、さまざまな音声変換(VC)AIを基にしたクライアントソフトウェアです。サポートされている音声変換AIにはMMVC、so-vits-svc、RVC(リトリーバルベースのボイスコンバージョン)、DDSP-SVC、およびBeatrice JVS Corpus Editionが含まれます。

特徴的な機能

w-okada's RVCの大きな特徴は、サーバー-クライアント構成を使用してリアルタイムの音声変換を実現することです。別のコンピュータ上でMMVCサーバーを実行することで、ゲーム実況などの他のリソース集約型プロセスへの影響を最小限に抑えながら、この音声変換器をスムーズに動作させることができます。


使用方法

RVCはGoogle Colab上で実行できます。公式では専用のノートブックが提供されています:https://github.com/w-okada/voice-changer/blob/master/Realtime_Voice_Changer_on_Colab.ipynb。

体験

実行後、どんな音声を入力しても、リアルタイムで優しい卡通少女の声に変換されました。