Wink Pings

一张照片加一段录音,ComfyUI 里生成对口型说话视频

有人给 LongCat-Video-Avatar 1.6 补了 ComfyUI 节点,MIT 协议公开。单张照片加音频生成说话视频,480p 下 3.8 秒片段实测 5.6 到 7.7 分钟,长视频按窗口拼接。

Reddit 的 r/StableDiffusion 上,有人放了 LongCat-Video-Avatar 1.6 的 ComfyUI 节点。用法很直接:一张人像照片,加一段自己的录音,输出对口型的说话视频。项目 MIT 协议,代码和示例工作流都公开。作者说三个示例片段各跑一次,480p,seed 42,没有 LoRA,没有换脸,没有后期剪辑,视频带声音。

LongCat-Video-Avatar 1.6 示例

这套节点包建在 rookiestar28 的 1.5 节点包上,沿用 MIT 协议,原作者也做了完整署名。1.6 的变化包括官方 INT8 模型、8 步、用 mix_steps 切换 1.6 LoRA、音频不做响度归一化,以及自动在 SageAttention、FlashAttention 2、PyTorch 之间选。长视频按窗口处理,一个窗口 93 帧,大约 3.7 秒。模型文件首次运行下载约 25GB,只需要手动补一个 umt5 文本编码器。

作者只测了一张 5090 32GB 显存加 64GB 内存,Windows,480p。3.8 秒片段耗时 5.6 到 7.7 分钟,取决于 attention 和 mix_steps。每多 3.2 秒音频就多一个窗口,多 1.5 到 2.5 分钟。用 block streaming 时,480p 下模型本身占约 13GB 显存,但这不等于 12GB 显卡能跑。作者没试过 32GB 以下的卡。

省时间的办法也有实测数字:SageAttention 把 3.8 秒片段从 7.7 分钟降到 6.6 分钟,mix_steps 0 能降到 5.6 分钟。作者建议先拿 4 秒片段测试,只付一个窗口的成本。跟帖里有人问工作流是否暴露了 8 步蒸馏路径,帖子下没看到进一步回复。

作者给的经验比较具体:想让人物平静,就在提示词里写 hands relaxed;音频要干净,不要带音乐;先做 4 秒短测试;效果不对时换 seed,别反复重写提示词。

跟帖里也有人拿 MiniMax H3 和 Kandinsky S2V 1.0 Lite 做对照。作者的回复是,短镜头、电影感画面 H3 可能更合适,但 H3 也更重;这个节点的用途是从一张照片和自己的音频做长说话视频,靠窗口拼接,长度不被硬截断。他没做严格并排对比,所以这只是他的印象。

仓库和安装信息:仓库在 Pixelailabs/ComfyUI-LongCat-Avatar-PixelAILabs,安装步骤写在 readme。ComfyUI Manager 里选 Install via Git URL,粘贴仓库地址,重启。示例工作流在 这里,下载 .json 后拖进 ComfyUI。唯一手动放的文件是文本编码器 umt5_xxl_fp8_e4m3fn_scaled.safetensors,放到 models/text_encoders。其余模型首次运行会从官方仓库下载,来源是 LongCat-Video-Avatar-1.6 和 LongCat-Video。

发布时间: 2026-11-19 00:41