Wav2Lip

Wav2Lip 支持 local 和 omnirt 两种部署方式。当前推荐把它作为第一个真实 talking-head 验证模型：权重少、启动路径清晰，适合先确认 OpenTalking 的音频到视频链路。

项	值
模型 ID	wav2lip
Backend	local、omnirt、兼容 direct_ws
仓库默认值	local
推荐起步	Wav2Lip Local

选择哪种模式

模式	适合场景	入口
local	单机消费级 GPU 或 CPU 调试，不想先部署独立推理服务。	Wav2Lip Local
omnirt	希望 Wav2Lip 由独立 OmniRT 进程托管，或者评估 CUDA/NPU 运行时隔离。	Wav2Lip with OmniRT

权重目录

wav2lip/
  wav2lip384.pth
  s3fd.pth

local 模式默认放在 $OPENTALKING_HOME/models/wav2lip/；OmniRT 模式默认放在 $OMNIRT_MODEL_ROOT/wav2lip/。

相关教程

• Wav2Lip Local
• Wav2Lip with OmniRT
• Talking-head 模型

前端入口

模型或后端服务启动后，统一用 OpenTalking WebUI 访问：

终端

cd "$OPENTALKING_HOME"
bash scripts/quickstart/start_frontend.sh --api-port 8000 --web-port 5173 --host 0.0.0.0

远程服务器部署时，把本地浏览器端口映射到服务器 5173，再打开 http://127.0.0.1:5173。