全身动作转移——让图片里的人跳参考视频里的舞
典型场景
你有一张自己的半身照,又在网上看到一段你想学的舞蹈分解教学视频——用动作控制:
- 上传你的照片(参考图)
- 上传舞蹈分解视频(动作参考)
- 模型会让你照片里的人做出舞蹈里的动作
操作流程
- 进入动作控制模式(图生视频下的子模式)
- 上传参考图(想让谁动、长什么样)
- 上传参考视频(想做什么动作)
- 确认两个主体比例大致匹配(参考视频人物占比不能太大或太小)
- 选档位、生成
成功案例类型
| 案例 | 参考图 | 参考视频 | 效果 |
|---|---|---|---|
| 舞蹈教学 | 某张人物照片 | 网络上的舞蹈分解 | 照片人物学会同一段舞 |
| 武术动作 | 某张人物全身照 | 武术动作参考视频 | 照片人物做出同款拳脚 |
| 体育动作 | 某张人物半身照 | 健身教学视频 | 照片人物完成同款健身动作 |
已知局限
- 动作太复杂:连续高难度翻转或特技动作,模型可能跟不上
- 主体不匹配:参考视频是儿童动作,参考图是成年人——效果可能怪异
- 消耗高:动作控制的灵感值消耗比普通图生视频贵 2-3 倍,先确认消耗再点生成
和动作笔刷的分工
- 小动作(眨眼、摇尾巴)→ 动作笔刷更灵活更便宜
- 大动作(跳舞、武术)→ 动作控制效果更好
- 两者可以配合:动作控制负责全身大动作,动作笔刷微调局部