动作重建指南
从视频重建身体表演
JST-2 视频生成动作以录制的表演作为全身 3D 运动参考。任务是恢复可用于动画的动作,而不是替换成片视频中的人物。
查看真实 JST-2 生成示例选择动作清晰可辨的影像
请使用你有权处理的影像。作为评估起点,建议选择单个清晰可见、全身入镜且相机移动较少的表演者。这是一项实用建议,而不是说明模型所支持的最大复杂度。
首次测试时,避免同时引入多种不确定因素。快速剪切、运动模糊和长时间遮挡,会使你难以区分输入局限与重建问题。请查看官方界面的最新文件、时长和上传要求。
可见运动提供证据,隐藏运动依靠推断
Viggle 表示,JST-2 重建可见运动,并利用学习到的动力学推断不可见身体部位的运动。因此,即便影像在整个动作中没有展示每个肢体,仍能生成完整的身体表演。
推断出的姿势不是对隐藏肢体的测量。请将重建的节奏和身体方向与原始影像对比,尤其注意转身或遮挡时段。手脚重新可见时,检查过渡是否仍然合理。
对比原始表演与重建结果
先评估节奏与速度变化,再关注精细细节。标记脚落地、躯干转向或手臂改变方向的时刻。将这些时刻与动画对照,不要仅依赖一张好看的静帧。
然后将结果用于目标角色,检查关节表现。Viggle 介绍了直接用于 JST-2 角色及兼容标准骨骼的能力。请检查实际导出和目标软件;兼容性并不意味着无需检查比例和方向。
将身体动作与场景轨迹分开
人物的行走动作可以很可信,但在重建环境中的位置仍未确定。JST-2 发布说明区分了全身动作与人物场景路径重建,并将后者描述为未来能力。
不要仅凭此次公告,就假定能恢复完整、经过相机标定的世界坐标轨迹。如果项目需要精确距离、道具接触或与实拍场景对齐,请单独评估这些要求。Viggle 也将进一步提高动作精度列为未来工作。
常见问答
视频生成动作会复制人物外观吗?
这里介绍的任务重建的是身体运动。角色外观属于独立资产或生成流程。将动作应用于另一个角色,不应与生成完整的人物替换视频混为一谈。
手或腿被遮挡时会怎样?
Viggle 介绍了使用学习到的动力学推断不可见身体运动的方法。由于输出是估计值,请仔细检查这些时段。更清晰的原始影像能提供更多可见证据,帮助你判断重建结果。
能恢复表演者在房间中的精确路线吗?
发布说明将从视频重建场景路径列为未来能力。当前有关全身动作的说明,不应被理解为对精确世界坐标轨迹、实测距离或与重建房间对齐的保证。
应该使用视频还是文本提示词?
当已有表演的节奏和姿势很重要时,选择视频;希望在没有参考影像的情况下指定动作时,选择文本。无论哪种结果,都需要在目标角色及计划使用的应用中检查。
查阅原始资料。
审核日期: . 模型能力说明引自 Viggle;实用建议为本站编辑指导。