已有 LTXV latent 同时包含视频和音频时,将它接入 LTXVConcatAVLatent 的 video_latent,再把新的音频 latent 接入 audio_latent。按节点文档定义,这种输入情况下节点会保留输入中的视频流,并替换音频流。完成后还应核对输入类型、输出 latent 和 noise_mask;仅看到输出是联合 AV latent,并不能证明其中沿用了哪一路视频内容。
接线与输入判断
- 先辨认已有的联合 AV latent 和新的音频 latent,并给两者记下简短标识,供之后对照。判断输入时看实际类型标签,不要仅凭节点颜色。
- 添加
LTXVConcatAVLatent,把已有 AV latent 接到video_latent,而不是audio_latent;替换用的音频 latent 接到audio_latent。这里的关键是输入位置:特殊行为适用于已经包含视频和音频的 video 输入。 - 判断新音频能否适配视频 latent。节点会裁短较长的音频,或用零值填充较短的音频。如果两个 latent 在多于一个维度上不匹配,或者 batch、channel 维度不兼容,节点会报错。不能只依据文件名相同或大致时长接近来认定兼容。
- 将
latent输出接入预期的下游 AV 工作流。记录两个输入是否各自带有noise_mask,并将输出 mask 单独列入验收。文档定义的输出是打包后的 AV latent;如果输入缺少 mask,输出可能会为相应样本使用全 1 mask,因此不要预设 mask 原样保留。
用流清单验收前后变化
下表是作者建议的对照方式,具体输入和观察均为假设示例,不代表执行了节点或保证输出如此。请按实际工作流记录输入标识和 mask 观察结果。
| 检查项 | 假设的替换前记录 | 假设的替换后观察 | 判断方式 |
|---|---|---|---|
| 视频身份 | 原 AV 输入:scene-A | 将输出视频与 scene-A 对照 | 只有确认目标视频流沿用才通过 |
| 音频身份 | 原 AV 输入:audio-old;新输入:voice-new | 将输出音频与 voice-new 对照 | 确认替换的是预期音频流 |
| 输出类型 | 输入是联合 AV latent | 类型标签显示 LATENT,另行检查流内容 | 通用类型标签不能证明流身份 |
| Noise mask | 已记录原输入有无 mask | 记录输出 mask 是否存在及观察到的内容 | 单独记录差异,不假设未改变 |
| 适配结果 | 假设新音频 latent 短于视频 latent | 工作流完成后检查填充区域的生成行为 | 时长处理规则不等于声音结果合格 |
实际核对时,可比较已知的输入与输出流描述,或使用 ComfyUI 工作流中可用的检查方式。这是作者建议的验收方法;节点文档没有说明它会提供内置的流身份报告,也没有指定某种检查工具。
限制与失败处理
节点替换的是接入的新音频流,但这并不能证明音频语义合适、与目标事件同步或清晰可辨。需要判断这些性质时,应在下游工作流中试听最终媒体。官方说明了裁切、零填充、适配报错和组合 mask 的行为,但没有保证在这些 latent 操作之外还能保留特定波形。
若节点报适配错误,先比较两路输入的 latent shape,重点检查 batch 和 channel 维度。若流程完成但无法确认输出视频身份,沿连接追查 video_latent,再检查结果;不要因为输出端口有数据就认定视频已保留。若 mask 有变化,记录哪路输入提供了 mask,并把输出 mask 作为独立检查项,不要默认为其原样复制。
LTXVConcatAVLatent 官方文档说明了已打包输入的特殊行为、适配规则和输出。输入与 noise-mask 说明也值得对照,尤其是在短音频 latent 或缺失输入 mask 影响验收时。
video_latent 已经是 AV 时,节点会保留视频吗?
按文档说明,会保留该输入的视频流,并用提供的 audio latent 替换音频。
新音频较短时会怎样?
节点会用零值填充较短的音频 latent。文档说明填充区域不被 mask,模型可以在那里生成;这不保证最终生成特定声音,应检查下游结果。
输出仍是联合 latent,是否说明原 mask 没变?
不是。输出可能带有组合 mask;如果某个输入缺少 mask,节点会补上与样本形状匹配的全 1 mask。应独立检查并记录 mask。
来源与下一步
本文依据公开文档解释操作,并使用明确标注的假设验收示例,不是软件实测。控件与可用功能可能变化,请对照所引手册和你的安装版本。
若你在 Imagild 中继续创作,可将输入要求和验收清单带到微电影工作台。上文讨论的外部软件控件属于其各自产品。