动作重建指南

从视频重建身体表演

JST-2 视频生成动作以录制的表演作为全身 3D 运动参考。任务是恢复可用于动画的动作,而不是替换成片视频中的人物。

查看真实 JST-2 生成示例

选择动作清晰可辨的影像

请使用你有权处理的影像。作为评估起点,建议选择单个清晰可见、全身入镜且相机移动较少的表演者。这是一项实用建议,而不是说明模型所支持的最大复杂度。

首次测试时,避免同时引入多种不确定因素。快速剪切、运动模糊和长时间遮挡,会使你难以区分输入局限与重建问题。请查看官方界面的最新文件、时长和上传要求。

可见运动提供证据,隐藏运动依靠推断

Viggle 表示,JST-2 重建可见运动,并利用学习到的动力学推断不可见身体部位的运动。因此,即便影像在整个动作中没有展示每个肢体,仍能生成完整的身体表演。

推断出的姿势不是对隐藏肢体的测量。请将重建的节奏和身体方向与原始影像对比,尤其注意转身或遮挡时段。手脚重新可见时,检查过渡是否仍然合理。

对比原始表演与重建结果

先评估节奏与速度变化,再关注精细细节。标记脚落地、躯干转向或手臂改变方向的时刻。将这些时刻与动画对照,不要仅依赖一张好看的静帧。

然后将结果用于目标角色,检查关节表现。Viggle 介绍了直接用于 JST-2 角色及兼容标准骨骼的能力。请检查实际导出和目标软件;兼容性并不意味着无需检查比例和方向。

将身体动作与场景轨迹分开

人物的行走动作可以很可信,但在重建环境中的位置仍未确定。JST-2 发布说明区分了全身动作与人物场景路径重建,并将后者描述为未来能力。

不要仅凭此次公告,就假定能恢复完整、经过相机标定的世界坐标轨迹。如果项目需要精确距离、道具接触或与实拍场景对齐,请单独评估这些要求。Viggle 也将进一步提高动作精度列为未来工作。

常见问答

视频生成动作会复制人物外观吗?

这里介绍的任务重建的是身体运动。角色外观属于独立资产或生成流程。将动作应用于另一个角色,不应与生成完整的人物替换视频混为一谈。

手或腿被遮挡时会怎样?

Viggle 介绍了使用学习到的动力学推断不可见身体运动的方法。由于输出是估计值,请仔细检查这些时段。更清晰的原始影像能提供更多可见证据,帮助你判断重建结果。

能恢复表演者在房间中的精确路线吗?

发布说明将从视频重建场景路径列为未来能力。当前有关全身动作的说明,不应被理解为对精确世界坐标轨迹、实测距离或与重建房间对齐的保证。

应该使用视频还是文本提示词?

当已有表演的节奏和姿势很重要时,选择视频;希望在没有参考影像的情况下指定动作时,选择文本。无论哪种结果,都需要在目标角色及计划使用的应用中检查。

查阅原始资料。

审核日期: . 模型能力说明引自 Viggle;实用建议为本站编辑指导。