ComfyPilotComfyPilot
文档 / 教程 / 在 ComfyUI 中使用 Sonilo:视频转音乐与文本转音频

在 ComfyUI 中使用 Sonilo:视频转音乐与文本转音频

在 ComfyUI 中使用 Sonilo 合作节点生成与视频同步的配乐:覆盖视频转音乐与文本转音频工作流

教程 video-to-music 更新于 2026-11-04

查看官方原文

在 ComfyUI 中使用 Sonilo:视频转音乐与文本转音频

在 ComfyUI 中使用 Sonilo 合作节点生成与视频同步的配乐:覆盖视频转音乐与文本转音频工作流

Sonilo 是一项由 AI 驱动的视频转音乐服务,能够为你的视频素材生成同步的配乐。它会分析视觉内容、节奏和情感线索,逐帧生成与你的时间线完全同步的音乐。

你可以直接在 ComfyUI 节点图中驱动音乐生成,与现有工作流无缝集成。

如需歌词生成歌曲,请参阅 Sonilo Music 1.5。

Sonilo 视频生成音乐擅长什么

  • 时长、节奏与情感对齐:音乐会精确匹配视频的时长、节奏和情感弧线,让配乐听起来就像是为内容量身创作的。
  • 实时生成:数秒内即可生成完整长度的高质量音乐,从而加快迭代速度,实现无缝衔接的创意工作流。
  • 可直接商用:所有已生成的音乐均包含商业使用权,可直接用于专业、品牌与制作环境,无需额外的授权许可。

使用场景

  • 广告与创意工作室:生成与产品视频、品牌广告片和社交媒体广告节奏相匹配的音乐。
  • 视频制作与后期公司:自动为大量视频素材生成配乐。
  • VFX 与动态图形艺术家:生成随视觉效果逐帧演进的音乐。
  • 内容创作者与代理机构:制作配乐同步、可直接发布的多格式视频。
  • 开发人员与流程工程师:通过 ComfyUI 将音乐生成直接集成到自动化工作流中。
[!TIP] 使用 API 节点需要保证你已经正常登录,并在受许可的网络环境下使用,请参考API 节点总览部分文档来了解使用 API 节点的具体使用要求。
[!TIP] > [tab] 本地用户 > > 请确保你的 ComfyUI 已经更新。 > > ComfyUI 下载 > ComfyUI 更新教程 > > 本指南里的工作流可以在工作流模板中找到。如果找不到,可能是 ComfyUI 没有更新。 > > 如果加载工作流时有节点缺失,可能原因有: > > 1. 你用的不是最新版(每夜版)。 > 2. 启动时有些节点导入失败。 > [tab] 云端用户 > > * Cloud 会在 ComfyUI 稳定版本发布后更新。 > > 所以,如果你发现本文档中有任何核心节点缺失,可能是因为新核心节点尚未在最新稳定版中发布。请等待下一个稳定版发布。

快速开始

1. 更新 ComfyUI

将 ComfyUI 更新到最新版本,或使用 Comfy Cloud。

2. 查找 Sonilo 工作流

打开工作流库,浏览模板,搜索 "Sonilo" 即可找到可直接使用的工作流。

3. 运行工作流

连接你的视频源,更新提示词,点击 Run 按钮或使用 Ctrl(Cmd) + Enter 开始生成。

Sonilo:视频配乐生成

根据视频素材生成同步配乐。输入视频即可生成与其节奏和情绪线索相匹配的音乐。

Sonilo:视频配乐生成工作流预览

[card] 在 Comfy Cloud 上运行 在 Comfy Cloud 中打开
[card] 下载工作流 下载 JSON,或在模板库中搜索 "Sonilo:视频配乐生成"

输入素材

将此文件上传到对应的 LoadVideo 节点:

[card] leopard\_rider.mp4 LoadVideo 节点 705 · leopard_rider.mp4
  1. 在输入节点中加载你的视频。
  2. (可选)添加文本提示词,引导所生成音乐的风格或情绪。
  3. 点击 Run 按钮或使用快捷键 Ctrl(Cmd) + Enter 开始生成音乐。
  4. 生成的音频将保存到 ComfyUI/output/audio 目录。

Sonilo:文本生成音乐

根据文本提示词生成高质量、制作级的音乐。

Sonilo:文本生成音乐工作流预览

[card] 在 Comfy Cloud 上运行 在 Comfy Cloud 中打开
[card] 下载工作流 下载 JSON,或在模板库中搜索 "Sonilo:文本生成音乐"

示例提示词:

  • Dreamy ambient electronic music, gentle rhythm, suitable for short videos
  • Futuristic electronic instrumental, sci-fi sense, ethereal and deep
  • Lazy jazz instrumental, saxophone, relaxing cafe atmosphere
  1. 输入描述你想生成的音乐的文本提示词。
  2. 点击 Run 按钮或使用快捷键 Ctrl(Cmd) + Enter 开始生成音频。
  3. 生成的音频将保存到 ComfyUI/output/audio 目录。