Wink Pings

Opus 5.5 的 20 个开源技能:先跑通,再收藏

动画、物理、3D、声音、交付,一份覆盖视频生产全流程的开源技能清单。工具不稀缺,稀缺的是跑通一条成片管线。

这份清单来自 X 用户 @hzxuang,整理的是 AI 模型 Opus 5.5 可用的 20 个开源技能,覆盖动画、物理、3D、声音和交付。所谓技能,就是模型可以调用的外部工具,这里指 20 个可以直接使用的开源项目,分别对应视频生产的不同环节。

清单本身没什么可挑剔的。真正值得讨论的是怎么用。

有网友在回复里说了一句大实话:"清单最大的坑不是缺技能,是全收藏、零交付。先用 Remotion 加 faster-whisper 加 FFmpeg 跑通一条成片管线,再按需补物理和 3D,否则 20 个链接最后只剩书签。"

这套组合可以直接落地。Remotion 用代码生成视频画面,faster-whisper 把配音转成字幕,FFmpeg 负责最终编码和封装。三个工具构成一条最小成片管线,其余 17 个按需扩展。

下面按类别列出全部 20 个项目。

视频引擎

Remotion:React 视频引擎,代码即视频。支持编程式生成、拖拽编辑、AI 代理三种工作流。注意许可证,商用需要单独获取。

Remotion 动画 Logo

Remotion GitHub

HyperFrames:HeyGen 开源的 HTML 转视频渲染器,Apache 2.0。把视频写成带 data 属性的 HTML 文件,用 headless Chrome 逐帧渲染。没有构建步骤,纯 HTML 即可运行,是少数为 AI 代理设计的视频工具。内置 450 多个组件,支持 GSAP、Lottie、Three.js 等动画方案。

HyperFrames 应用演示

HyperFrames GitHub

OpenCut:时间线编辑工具。

动画

Anime.js:轻量 JS 动画库,支持 CSS 属性、SVG、DOM 属性和 JS 对象。

Anime.js V4 Logo 动画

Anime.js GitHub

React Spring:弹簧物理动画库,React 生态通用。

GL Transitions:着色器过渡效果,GPU 加速的转场方案。

2D 与视觉

PixiJS:GPU 驱动的 2D 渲染引擎。

p5.js:生成式视觉,Processing 的 JS 版本。

Paper.js:矢量路径操作。

tsParticles:粒子效果。

物理

Matter.js:2D 物理,刚体、碰撞、重力。

Rapier:Rust 写的 3D 物理引擎,碰撞检测性能好。

3D

Three.js:Web 3D 场景的事实标准。

OGL:更底层的 WebGL 库,适合自定义着色器。

glTF Transform:glTF 资产优化。

声音与字幕

Chatterbox:配音,来自 Resemble AI。

Tone.js:合成器和音效。

faster-whisper:字幕转录,Whisper 的加速版本。

捕获与交付

OBS Studio:屏幕捕获。

FFmpeg:编码、转码、封装。


一些可落地的组合:

  • 产品发布视频:HyperFrames 或 Remotion 生成画面,Chatterbox 配音,faster-whisper 转字幕,FFmpeg 合成。
  • 数据可视化短片:p5.js 或 Three.js 出视觉,Tone.js 配乐,GL Transitions 做转场。
  • 批量渲染流水线:Remotion 批量渲染,OBS Studio 采集素材,FFmpeg 统一输出。

回到网友的建议。先跑通最小闭环,再按需加物理、3D、粒子。清单的价值在管线,不在收藏。

发布时间: 2026-10-27 23:32