DeepMotion

什么是 DeepMotion？

DeepMotion 是一款 AI 动捕与 3D 动画平台，围绕两个基于浏览器的产品展开：Animate 3D 用于将视频转换为动画，SayMotion 用于将文本提示转换为 3D 动作。该网站将这两个产品定位为无需穿戴动捕服、专业硬件或繁重搭建即可创建数字人物动作的方式。

Animate 3D 专注于基于视频的动作捕捉和身体追踪。SayMotion 目前处于公开测试阶段，将平台扩展到文本生成 3D 动画，并提供面向创作者的文档和导出选项，帮助他们通过提示词指导动作并将结果迁移到其他工具中。

DeepMotion 能做什么？

文本生成 3D 动画

在 SayMotion 中通过文本提示生成 3D 动画，采用基于浏览器的工作流程，无需专业硬件。

视频生成 3D 动画

通过在设备上或从在线来源上传或捕获视频，在 Animate 3D 中创建动画。

角色重定向与化身支持

将动作重定向到自定义 FBX、GLB 或 VRM 角色，或使用 Ready Player Me 和 Avaturn 等内置角色创建工具。

动作控制与细化工具

使用面部与手部追踪、物理模拟、脚部锁定、手部接触地面以及动作平滑等功能调整输出。

转描姿势编辑

借助 Rotoscope Pose Editor 直接在源视频上描绘角色动作，以获得更准确的动画结果。

适配工作流的导出

将完成的动画导出为常见制作格式，包括 FBX、GLB、BVH 和 MP4。

使用场景

“基于视频的角色动画”

创作者可以将录制的表演转换为 3D 动作，无需使用动捕服，然后将动画导出到制作流程中。

“由提示词驱动的动画原型制作”

编剧或导演可以用文本描述动作，并在 SayMotion 中生成 3D 动作草稿以便快速迭代。

“角色流程集成”

工作室可以将动作重定向到自定义 FBX、GLB 或 VRM 角色，并用平滑和接触工具细化结果。

“应用与工作流集成”

构建交互式体验的团队可以使用网站上提到的 API 或实时 SDK 路径，将 AI 动作捕捉接入应用程序。

“动作清理与细化”

需要更强控制的创作者可以使用 Rotoscope Pose Editor 和动作设置，根据源视频调整动画。

常见问题

Animate 3D 如何工作？

Animate 3D 的使用方式是在网页浏览器中上传或录制视频，然后选择角色并在导出前调整动作设置。

SayMotion 目前有哪些限制？

SayMotion 目前处于公开测试阶段，仅针对桌面端进行了优化，并且仅支持全身动画。手部和面部动画被标注为未来会考虑支持。

DeepMotion 可以导出哪些文件格式？

SayMotion 可导出 .FBX、.GLB、.BVH 或 .MP4 文件，Animate 3D 也支持 FBX、BVH、GLB 和 MP4 导出格式。

使用 DeepMotion 需要特殊硬件吗？

DeepMotion 提供基于浏览器的产品，Animate 3D 的云端体验可在任意设备上的网页浏览器中访问。SayMotion 需要互联网连接和网页浏览器。

DeepMotion 提供免费访问还是付费选项？

定价页面显示了 Animate 3D 和 SayMotion 的独立产品区域，以及 API 和文档链接。页面还表明可以免费创建账户，并提供升级和联系销售选项，适用于更高使用量或专业用途。