DreamFace 中文文档 下载 App

DreamAct 动作迁移——把任意视频的动作和表情移植到你的照片上

DreamAct 是什么

DreamAct 是 DreamFace 于 2024~2025 年间推出的动作迁移技术,官方称其为「目前市面上最先进的动作迁移技术」。简单说就是:你提供一段参考视频(比如一个人跳舞、一个宠物卖萌、一个演员做手势),再提供一张目标照片(比如你自己的照片、一个卡通形象、一个品牌角色),DreamAct 会把参考视频里的动作和表情完整迁移到目标照片上,同时保持:

这个功能在 TikTok 等平台上引发了大量「让我的脸跟着热门舞蹈动」「让卡通角色做真人动作」的潮流内容。

DreamAct 能做什么

根据官方文档和用户反馈,DreamAct 支持以下几类动作迁移:

动作类型说明效果
面部表情把参考视频中人物的表情迁移到目标面部比如让一张静态照片露出惊讶、大笑的表情
手势与上半身动作把手势、头部转动、肩部动作等迁移过去比如让角色挥手、点头、做 OK 手势
全身舞蹈完整迁移一段舞蹈动作热门 TikTok 舞蹈挑战的核心玩法
动物面部动作让宠物照片跟着参考视频做表情猫咪眨眼、狗狗歪头
场景内角色替换把视频里的某个人物换成你的照片,同时保留场景动作比如把舞蹈视频里的主角换成你

DreamAct 的使用流程

1. 选择入口

在 DreamFace 工作台中找到「DreamAct」功能入口。

2. 上传参考视频

参考视频需要满足几个要求:

3. 上传目标照片

和数字人生成器对照片的要求类似:

4. 选择迁移模式

DreamAct 可能提供以下模式选择:

模式适合场景
只迁面部表情静态照片做表情变化
迁上半身动作手势、头部转动、肩部动作
全身动作舞蹈、全身表演
场景内角色替换在已有视频里替换某个人物

5. 生成

点击生成后,DreamFace 会:

  1. 从参考视频中提取动作骨架和表情特征
  2. 分析目标照片的面部结构和身体比例
  3. 把提取的动作「套」到目标照片上,同时调整光照和空间位置
  4. 输出最终视频

DreamAct vs 普通数字人视频

DreamAct 和之前讲的数字人视频(Avatar Video)是两条不同的能力线:

维度数字人视频DreamAct 动作迁移
输入照片 + 脚本/音频参考视频 + 目标照片
驱动力文本/音频驱动面部说话参考视频的动作驱动身体
核心能力说话 + 表情全身动作 + 表情
适用场景口播、讲解、对话舞蹈、表情变化、趣味创作
生成速度快中等(取决于动作复杂度)

两者可以组合使用——先用 DreamAct 给数字人做一个舞蹈动作,再用 Avatar Video 叠加说话能力,最终得到一个会跳舞又会说话的视频。

使用 DreamAct 的最佳实践

参考视频的选择很重要

好的参考视频应该是:主体清晰、动作完整、背景简洁、光照均匀。差的参考视频会让迁移效果大打折扣。

目标照片和参考视频的匹配度

如果目标照片是全身照,参考视频也最好是全身动作;如果目标只有脸,就选面部表情类的参考。不匹配会让动作显得生硬。

先短后长

第一次试 DreamAct 时,先用 5~10 秒的短视频做参考。效果满意了再尝试更长的动作。

免费版额度

DreamAct 属于比较消耗算力的功能,免费版每日 5 次的额度会比较紧张。建议在效果好、参考视频准备充分的时候再用。

常见问题

DreamAct 能迁移哪些身体部位

目前 DreamAct 支持面部、上半身和全身三个级别的动作迁移。手部细节和手指动作可能还有提升空间。

为什么迁移后动作有「飘」的感觉

通常是参考视频的背景太复杂,或者目标照片的角度和参考视频差异太大。换换参考视频或选个角度更匹配的目标照片试试。

可以把多人视频中的某一个人的动作单独迁移吗

可以,DreamAct 支持只提取参考视频中指定人物的动作。但多人视频的动作提取准确率比单人低。