SadTalkerインストール

SadTalker

SadTalkerとは、音声に合わせて口を動かすアニメーションを作成する機能拡張で、CVPR 2023で発表予定の最新のAI技術です。SadTalkerは、顔の画像とスピーチの音声から会話するムービーを作成する技術で、音声から頭部の姿勢や表情など3D情報を生成し、それを空間マッピングすることで最終映像を合成します

SadTalkerインストール手順

Word	Description
WebUIにgitから拡張機能をインストール	WebUIにhttps://github.com/Winfredy/SadTalkerから拡張機能をインストール
モデルファイルをダウンロード	https://drive.google.com/drive/folders/1Wd88VDoLhVzYsQ30_qDVluQr_Xm46yHTここからダウンロード
checkpointsフォルダ作成	checkpointsフォルダを作り、その中にダウンロードした2つのフォルダの中身を入れる
webui.batファイル書き換え	set SADTALKER_CHECKPOINTS=E:\stable-diffusion\stable-diffusion-webui\extensions\SadTalker\checkpoints
ffmpegインストール	ffmpegをインストールする
ffmpegのpathを環境変数に設定	環境変数を開いてffmpegのpathを環境変数に設定する

WebUIにgitから拡張機能をインストール

WebUIにhttps://github.com/Winfredy/SadTalkerから拡張機能をインストール

モデルファイルをダウンロード

https://drive.google.com/drive/folders/1Wd88VDoLhVzYsQ30_qDVluQr_Xm46yHTここからダウンロード

Links

SadTalker

SadTalkerインストール手順

WebUIにgitから拡張機能をインストール

モデルファイルをダウンロード

checkpointsフォルダ作成

ダウンロードしたファイルをcheckpointsに移動

webui.batファイル書き換え

ffmpegインストール

ffmpegの環境変数を設定する

更新記録