SadTalkerを使用してデジタルヒューマンビデオを生成する

SD WebUIを使用してSadTalkerデジタルヒューマンビデオを生成する



その原理は以下の通りです(私は理解できませんでしたが、そのままコピーしました):



  1. 拡張機能にhttps://github.com/OpenTalker/SadTalker.gitをインストールする
  2. WebUIを再起動する
  3. インターフェースに「Sadtalker」があり、このタブをクリックする
  4. 左側に画像と音声をアップロードし、右側で「生成」をクリックすると、ビデオが生成されます。

D-IDよりも効果が良く感じられ、お金もかかりません(WebUIをローカルにデプロイする場合)。SDがない場合でも、Google Colabバージョンを使うことを検討できます:https://colab.research.google.com/github/Winfredy/SadTalker/blob/main/quick_demo.ipynb