长毛象站上办公桌,Simulon 把手机录像重新演一遍
手机放置虚拟资产,录下动作、台词和环境,Simulon 会重新生成一场表演。iPhone 已可用,Android 即将。
办公桌上站着一只长毛象,旁边是穿兽皮的原始人偶。镜头外,一位男士举起手机,对着它们录像。这是 Simulon 在 X 上发布的 Reality-Aware Rendering 演示,Robert Scoble 转发了 Divesh Naidoo 的介绍。
演示视频来自原推。画面里,手机先是拍摄工具,也成了场景编辑器。
Simulon 的说法很直接:用手机把神经资产放进现实位置,然后你演一段。停止录制后,Simulon 会渲染这条 take。渲染过程会读取录制里的内容,包括你做了什么、说了什么、周围是什么地方。虚拟资产会对这些信息做出反应。最终输出是重新生成的表演,不是对原始视频的复制。
这里的关键在输入的用法。传统 AR 或合成视频里,虚拟物体经常像贴在画面上的图层,知道自己的位置,却不太理解你的动作和台词。Simulon 把整段录制当作场景描述,让渲染器重新组织一次表演。重点不在把 3D 模型叠到视频上,而在让虚拟资产接住现场发生的事。素材没有展开技术细节,演示也只给了结果。但这个方向值得看。
对创作者来说,流程被压缩在手机里。iPhone 上放置神经资产,录下动作和台词,停止后等待渲染。需要改表演,就重新录一条,再生成一版。Android 版本即将推出。它解决的是场景合成里反复对位、手工调整的麻烦,至少从产品描述看是这样。实际好不好用,还要看重新生成时能不能稳定保留台词、遮挡、空间关系和资产外观。
发布时间: 2026-10-29 12:48