一般是:
主要模块:
audio2motion(音频 → 动作/表情)motion2video(动作 → 人脸视频)通常在:
configs/*.yaml例如:
inference.yamlaudio2motion.yamlaudio:
sample_rate: 16000
fps: 25✅ 调参建议:
fps 要和视频一致(一般 25 或 30)motion_smooth: 0.8✅ 调参建议:
0.5 ~ 0.9mouth_scale: 1.0✅ 调参建议:
head_pose:
enable: true
scale: 1.0✅ 调参建议:
enable: falsescale: 1.2render:
resolution: 512
fps: 25✅ 调参建议:
256 / 384512 / 1024optimizer:
lr: 2e-4✅ 建议:
lrlr 或加 warmupbatch_size: 8✅ 建议:
max_epochs: 200✅ 建议:
aug:
flip: true
noise: 0.01✅ 建议:
| 问题 | 调参方向 |
|---|---|
| 嘴型不同步 | 检查 fps / audio 对齐 |
| 面部抖动 | 增大 motion_smooth |
| 嘴不动 | 增大 mouth_scale |
| 头太晃 | 减小 head_pose.scale |
| 视频模糊 | 提高 resolution |
| 显存炸 | 减小 batch / resolution |
✅ 先跑官方 demo,再改参数
✅ 一次只改一个参数
如果你能告诉我:
我可以直接给你具体参数配置示例。