diff --git a/docs.json b/docs.json index ea807ba5..1244b5fa 100644 --- a/docs.json +++ b/docs.json @@ -419,6 +419,12 @@ "pages": [ "tutorials/partner-nodes/wan/wan2-7" ] + }, + { + "group": "Sonilo", + "pages": [ + "tutorials/partner-nodes/sonilo/video-to-music" + ] } ] } @@ -2507,6 +2513,12 @@ "pages": [ "zh/tutorials/partner-nodes/wan/wan2-7" ] + }, + { + "group": "Sonilo", + "pages": [ + "zh/tutorials/partner-nodes/sonilo/video-to-music" + ] } ] } @@ -4600,6 +4612,12 @@ "pages": [ "ja/tutorials/partner-nodes/wan/wan2-7" ] + }, + { + "group": "Sonilo", + "pages": [ + "ja/tutorials/partner-nodes/sonilo/video-to-music" + ] } ] } diff --git a/ja/tutorials/partner-nodes/sonilo/video-to-music.mdx b/ja/tutorials/partner-nodes/sonilo/video-to-music.mdx new file mode 100644 index 00000000..920741b5 --- /dev/null +++ b/ja/tutorials/partner-nodes/sonilo/video-to-music.mdx @@ -0,0 +1,74 @@ +--- +title: "Sonilo API ノード:ComfyUI 公式ワークフロー例" +description: "本記事では、ComfyUI で Sonilo パートナーノードの動画から音楽への変換(Video-to-Music)およびテキストから音声への変換(Text-to-Audio)機能を活用する方法について説明します。" +sidebarTitle: "Sonilo" +--- + +import ReqHint from "/snippets/ja/tutorials/partner-nodes/req-hint.mdx"; +import UpdateReminder from "/snippets/ja/tutorials/update-reminder.mdx"; + +Sonilo は AI を活用した動画から音楽への変換サービスで、映像に同期したサウンドトラックを生成します。映像の視覚的要素、ペース、感情的な手がかりを分析し、タイムラインにフレーム単位で同期した音楽を制作します。 + +ComfyUI のノードグラフから直接音楽生成を実行でき、既存のワークフローとシームレスに統合できます。 + +## 特長 + +- **尺・テンポ・感情の整合** — 動画の正確な尺、テンポ、感情の展開に合わせた音楽を生成し、コンテンツのために意図的に作曲されたようなサウンドトラックを提供します。 +- **瞬時の生成** — 数秒で高品質なフルレングスの音楽を生成し、迅速なイテレーションとシームレスなクリエイティブワークフローを実現します。 +- **商用利用対応** — 生成されたすべての音楽には商用利用権が含まれており、追加のライセンス手続きなしに、プロフェッショナル、ブランド、制作環境で即座に使用できます。 + + + + +## はじめに + + + + ComfyUI を最新バージョンに更新するか、[Comfy Cloud](https://www.comfy.org/cloud) をご利用ください。 + + + **ワークフローライブラリ**を開き、**テンプレート**を参照して「Sonilo」を検索すると、すぐに使えるワークフローが見つかります。 + + + 動画ソースを接続し、プロンプトを更新して、**Run** ボタンをクリックするか `Ctrl(Cmd)+ Enter` で生成を開始します。 + + + +## 動画から音楽への変換ワークフロー + +Sonilo の動画から音楽への変換ワークフローは、動画の視覚的要素、ペース、感情的な手がかりを分析して同期したサウンドトラックを生成します。 + + + Comfy Cloud で実行 + + +1. 入力ノードに動画を読み込みます。 +2. (任意)テキストプロンプトを追加して、生成する音楽のスタイルやムードを指定します。 +3. **Run** ボタンをクリックするか、ショートカットキー `Ctrl(Cmd)+ Enter` を使用して音楽生成を開始します。 +4. 生成された音声は `ComfyUI/output/audio` ディレクトリに保存されます。 + +## テキストから音声への変換ワークフロー + +スタイル、ムード、楽器構成を記述したテキストプロンプトのみで音楽を生成することもできます。 + + + Comfy Cloud で実行 + + +**プロンプト例:** + +- `Dreamy ambient electronic music, gentle rhythm, suitable for short videos` +- `Futuristic electronic instrumental, sci-fi sense, ethereal and deep` +- `Lazy jazz instrumental, saxophone, relaxing cafe atmosphere` + +1. 生成したい音楽を記述するテキストプロンプトを入力します。 +2. **Run** ボタンをクリックするか、ショートカットキー `Ctrl(Cmd)+ Enter` を使用して音声生成を開始します。 +3. 生成された音声は `ComfyUI/output/audio` ディレクトリに保存されます。 + +## ユースケース + +- **広告・クリエイティブスタジオ** — 製品動画、ブランドスポット、ソーシャル広告のペースに合った音楽を生成。 +- **映像制作・ポストプロダクション** — 大量の映像素材に対するサウンドトラック生成を自動化。 +- **VFX・モーショングラフィックスアーティスト** — 映像に合わせてフレーム単位で進化する音楽を生成。 +- **コンテンツクリエイター・エージェンシー** — 複数フォーマットにわたって同期した音楽付きのプラットフォーム対応動画を制作。 +- **開発者・パイプラインエンジニア** — ComfyUI を通じて自動化ワークフローに音楽生成を直接統合。 diff --git a/tutorials/partner-nodes/sonilo/video-to-music.mdx b/tutorials/partner-nodes/sonilo/video-to-music.mdx new file mode 100644 index 00000000..c01ba827 --- /dev/null +++ b/tutorials/partner-nodes/sonilo/video-to-music.mdx @@ -0,0 +1,74 @@ +--- +title: "Sonilo API Node Official ComfyUI Example" +description: "This article introduces how to use Sonilo Partner nodes for video-to-music and text-to-audio generation in ComfyUI." +sidebarTitle: "Sonilo" +--- + +import ReqHint from "/snippets/tutorials/partner-nodes/req-hint.mdx"; +import UpdateReminder from "/snippets/tutorials/update-reminder.mdx"; + +Sonilo is an AI-powered video-to-music service that generates soundtracks synchronized to your footage. It analyzes visuals, pacing, and emotional cues to produce music locked to your timeline, frame by frame. + +You can drive music generation directly from your ComfyUI node graphs, alongside your existing workflows. + +## Highlights + +- **Length, pace and emotion alignment** - Music is generated to match the exact duration, pacing, and emotional arc of your video, delivering soundtracks that feel intentionally composed for the content. +- **Instant generation** - Generate full-length, high-quality music in seconds, enabling faster iteration and a seamless creative workflow. +- **Commercial-ready usage** - All generated music includes commercial use rights, making it ready for use across professional, brand, and production environments without additional licensing complexity. + + + + +## Get started + + + + Update ComfyUI to the latest version, or use [Comfy Cloud](https://www.comfy.org/cloud). + + + Open the **Workflow Library**, browse **Templates**, and search for "Sonilo" to find a ready-to-use workflow. + + + Connect your video source, update the prompt, and click the **Run** button or use `Ctrl(Cmd) + Enter` to generate. + + + +## Video-to-music workflow + +Sonilo's video-to-music workflow analyzes your video's visuals, pacing, and emotional cues to generate a synchronized soundtrack. + + + Run on Comfy Cloud + + +1. Load your video in the input node. +2. (Optional) Add a text prompt to guide the style or mood of the generated music. +3. Click the **Run** button or use the shortcut `Ctrl(Cmd) + Enter` to start music generation. +4. The generated audio will be saved to the `ComfyUI/output/audio` directory. + +## Text-to-audio workflow + +You can also generate music purely from text prompts describing the style, mood, and instrumentation you want. + + + Run on Comfy Cloud + + +**Example prompts:** + +- `Dreamy ambient electronic music, gentle rhythm, suitable for short videos` +- `Futuristic electronic instrumental, sci-fi sense, ethereal and deep` +- `Lazy jazz instrumental, saxophone, relaxing cafe atmosphere` + +1. Enter your text prompt describing the music you want to generate. +2. Click the **Run** button or use the shortcut `Ctrl(Cmd) + Enter` to start audio generation. +3. The generated audio will be saved to the `ComfyUI/output/audio` directory. + +## Use cases + +- **Advertising and creative studios** - Generate music that matches the pacing of product videos, brand spots, and social ads. +- **Video production and post houses** - Automate soundtrack generation across large volumes of footage. +- **VFX and motion graphics artists** - Generate music that evolves with your visuals, frame by frame. +- **Content creators and agencies** - Produce platform-ready videos with synchronized music across multiple formats. +- **Developers and pipeline engineers** - Integrate music generation directly into automated workflows via ComfyUI. diff --git a/zh/tutorials/partner-nodes/sonilo/video-to-music.mdx b/zh/tutorials/partner-nodes/sonilo/video-to-music.mdx new file mode 100644 index 00000000..0f818e20 --- /dev/null +++ b/zh/tutorials/partner-nodes/sonilo/video-to-music.mdx @@ -0,0 +1,74 @@ +--- +title: "Sonilo 合作伙伴节点 ComfyUI 官方工作流示例" +description: "本文将介绍如何在 ComfyUI 中使用 Sonilo 合作伙伴节点的视频转音乐和文本转音频功能" +sidebarTitle: "Sonilo" +--- + +import ReqHint from "/snippets/zh/tutorials/partner-nodes/req-hint.mdx"; +import UpdateReminder from "/snippets/zh/tutorials/update-reminder.mdx"; + +Sonilo 是一项由 AI 驱动的视频转音乐服务,能够为你的视频素材生成同步的配乐。它会分析视觉内容、节奏和情感线索,逐帧生成与你的时间线完全同步的音乐。 + +你可以直接在 ComfyUI 节点图中驱动音乐生成,与现有工作流无缝集成。 + +## 亮点 + +- **时长、节奏和情感对齐** - 生成的音乐与视频的精确时长、节奏和情感弧线匹配,让配乐听起来像是专门为内容量身定制的。 +- **即时生成** - 在几秒钟内生成高质量的完整音乐,实现更快的迭代和流畅的创作工作流。 +- **商业可用** - 所有生成的音乐都包含商业使用权,可直接用于专业、品牌和制作环境,无需额外的授权流程。 + + + + +## 快速开始 + + + + 将 ComfyUI 更新到最新版本,或使用 [Comfy Cloud](https://www.comfy.org/cloud)。 + + + 打开**工作流库**,浏览**模板**,搜索 "Sonilo" 即可找到可直接使用的工作流。 + + + 连接你的视频源,更新提示词,点击 **Run** 按钮或使用 `Ctrl(Cmd) + Enter` 开始生成。 + + + +## 视频转音乐工作流 + +Sonilo 的视频转音乐工作流会分析你的视频的视觉内容、节奏和情感线索,生成同步的配乐。 + + + 在 Comfy Cloud 上运行 + + +1. 在输入节点中加载你的视频。 +2. (可选)添加文本提示来引导生成音乐的风格或情绪。 +3. 点击 **Run** 按钮或使用快捷键 `Ctrl(Cmd) + Enter` 开始音乐生成。 +4. 生成的音频将保存到 `ComfyUI/output/audio` 目录。 + +## 文本转音频工作流 + +你也可以纯粹通过文本提示来生成音乐,描述你想要的风格、情绪和乐器配置。 + + + 在 Comfy Cloud 上运行 + + +**示例提示词:** + +- `Dreamy ambient electronic music, gentle rhythm, suitable for short videos` +- `Futuristic electronic instrumental, sci-fi sense, ethereal and deep` +- `Lazy jazz instrumental, saxophone, relaxing cafe atmosphere` + +1. 输入描述你想要生成的音乐的文本提示。 +2. 点击 **Run** 按钮或使用快捷键 `Ctrl(Cmd) + Enter` 开始音频生成。 +3. 生成的音频将保存到 `ComfyUI/output/audio` 目录。 + +## 使用场景 + +- **广告和创意工作室** - 为产品视频、品牌广告和社交广告生成与节奏匹配的音乐。 +- **视频制作和后期公司** - 为大量视频素材自动生成配乐。 +- **VFX 和动态图形艺术家** - 逐帧生成与视觉内容同步演变的音乐。 +- **内容创作者和代理机构** - 为多种格式制作带有同步音乐的平台就绪视频。 +- **开发者和流程工程师** - 通过 ComfyUI 将音乐生成直接集成到自动化工作流中。