DreamAct 动作迁移——把任意视频的动作和表情移植到你的照片上
DreamAct 是什么
DreamAct 是 DreamFace 于 2024~2025 年间推出的动作迁移技术,官方称其为「目前市面上最先进的动作迁移技术」。简单说就是:你提供一段参考视频(比如一个人跳舞、一个宠物卖萌、一个演员做手势),再提供一张目标照片(比如你自己的照片、一个卡通形象、一个品牌角色),DreamAct 会把参考视频里的动作和表情完整迁移到目标照片上,同时保持:
- 光照条件一致(不会出现脸是白天但身体在黑夜的违和感)
- 空间位置一致(动作不会飘)
- 身体比例自然(不会出现手脚长短变形)
这个功能在 TikTok 等平台上引发了大量「让我的脸跟着热门舞蹈动」「让卡通角色做真人动作」的潮流内容。
DreamAct 能做什么
根据官方文档和用户反馈,DreamAct 支持以下几类动作迁移:
| 动作类型 | 说明 | 效果 |
|---|---|---|
| 面部表情 | 把参考视频中人物的表情迁移到目标面部 | 比如让一张静态照片露出惊讶、大笑的表情 |
| 手势与上半身动作 | 把手势、头部转动、肩部动作等迁移过去 | 比如让角色挥手、点头、做 OK 手势 |
| 全身舞蹈 | 完整迁移一段舞蹈动作 | 热门 TikTok 舞蹈挑战的核心玩法 |
| 动物面部动作 | 让宠物照片跟着参考视频做表情 | 猫咪眨眼、狗狗歪头 |
| 场景内角色替换 | 把视频里的某个人物换成你的照片,同时保留场景动作 | 比如把舞蹈视频里的主角换成你 |
DreamAct 的使用流程
1. 选择入口
在 DreamFace 工作台中找到「DreamAct」功能入口。
2. 上传参考视频
参考视频需要满足几个要求:
- 分辨率:建议 720p 以上
- 人物/主体清晰:参考动作的主体要明确,不能被遮挡
- 时长:建议 10~30 秒(太长的动作迁移时间也会相应变长)
- 背景:越简洁效果越好,复杂背景可能干扰动作提取
3. 上传目标照片
和数字人生成器对照片的要求类似:
- 清晰、正面、光线均匀
- 如果是全身动作,目标照片最好也包含全身
4. 选择迁移模式
DreamAct 可能提供以下模式选择:
| 模式 | 适合场景 |
|---|---|
| 只迁面部表情 | 静态照片做表情变化 |
| 迁上半身动作 | 手势、头部转动、肩部动作 |
| 全身动作 | 舞蹈、全身表演 |
| 场景内角色替换 | 在已有视频里替换某个人物 |
5. 生成
点击生成后,DreamFace 会:
- 从参考视频中提取动作骨架和表情特征
- 分析目标照片的面部结构和身体比例
- 把提取的动作「套」到目标照片上,同时调整光照和空间位置
- 输出最终视频
DreamAct vs 普通数字人视频
DreamAct 和之前讲的数字人视频(Avatar Video)是两条不同的能力线:
| 维度 | 数字人视频 | DreamAct 动作迁移 |
|---|---|---|
| 输入 | 照片 + 脚本/音频 | 参考视频 + 目标照片 |
| 驱动力 | 文本/音频驱动面部说话 | 参考视频的动作驱动身体 |
| 核心能力 | 说话 + 表情 | 全身动作 + 表情 |
| 适用场景 | 口播、讲解、对话 | 舞蹈、表情变化、趣味创作 |
| 生成速度 | 快 | 中等(取决于动作复杂度) |
两者可以组合使用——先用 DreamAct 给数字人做一个舞蹈动作,再用 Avatar Video 叠加说话能力,最终得到一个会跳舞又会说话的视频。
使用 DreamAct 的最佳实践
参考视频的选择很重要
好的参考视频应该是:主体清晰、动作完整、背景简洁、光照均匀。差的参考视频会让迁移效果大打折扣。
目标照片和参考视频的匹配度
如果目标照片是全身照,参考视频也最好是全身动作;如果目标只有脸,就选面部表情类的参考。不匹配会让动作显得生硬。
先短后长
第一次试 DreamAct 时,先用 5~10 秒的短视频做参考。效果满意了再尝试更长的动作。
免费版额度
DreamAct 属于比较消耗算力的功能,免费版每日 5 次的额度会比较紧张。建议在效果好、参考视频准备充分的时候再用。
常见问题
DreamAct 能迁移哪些身体部位
目前 DreamAct 支持面部、上半身和全身三个级别的动作迁移。手部细节和手指动作可能还有提升空间。
为什么迁移后动作有「飘」的感觉
通常是参考视频的背景太复杂,或者目标照片的角度和参考视频差异太大。换换参考视频或选个角度更匹配的目标照片试试。
可以把多人视频中的某一个人的动作单独迁移吗
可以,DreamAct 支持只提取参考视频中指定人物的动作。但多人视频的动作提取准确率比单人低。