Skip to main content

Blog

DiffRhythm AI 指南:音樂生成 API、功能與提示詞範例

DiffRhythm AI 指南:音樂生成 API、功能與提示詞範例

生成式 AI 的發展已從圖像和影片擴展到音樂創作領域。DiffRhythm 就是這一領域的 AI 模型,專門設計用於根據提示詞生成具有靈活時長的音樂作品。

與依賴預設循環或模板的傳統音樂生成工具不同,DiffRhythm AI 專注於透過潛在擴散模型生成節奏、旋律和結構。這使得在不同風格和用途中實現更靈活、更具表現力的音樂生成成為可能。

DiffRhythm API

什麼是 DiffRhythm?

DiffRhythm

該模型可以基於以下內容生成音樂:

文字提示詞

風格選擇

結構線索

透過明確建模節奏,與早期的生成方法相比,DiffRhythm AI 能夠更可控地生成音樂序列。

主要功能:DiffRhythm AI API

端對端完整音樂

DiffRhythm API 讓開發者能在單一步驟中生成長達 4 分 45 秒的完整歌曲,無需拼接短片段或進行多階段工作流程。

基於擴散的音樂建模

該模型使用擴散技術逐步生成音訊,實現更可控且穩定的音樂輸出。

風格與場景驅動創作

使用者可以使用風格提示詞(如類型、情緒和節奏)來引導生成,塑造獨特的音樂作品。

純人聲生成

DiffRhythm AI API 支援純人聲生成,可產生獨立的人聲音軌,非常適合精煉歌詞或無伴奏專案。

多語言音樂

使用者可以無縫生成英文或中文歌曲,兩種語言都有自然的人聲表達。

DiffRhythm 的工作原理

DiffRhythm 的工作流程通常遵循三個步驟:

步驟 1:定義提示詞

使用者指定載荷,包括:

歌詞

時間範圍

風格

參考音訊

步驟 2:生成音樂

模型處理提示詞並使用基於擴散的音訊合成生成音樂,確保節奏一致性。

步驟 3:輸出與整合

生成的音訊可以匯出或整合到工作流程中,例如:

影片背景音樂

遊戲音訊

內容創作流程

DiffRhythm 提示詞範例

DiffRhythm API Docs

範例 1:Lo-fi 放鬆音樂

在這個範例中,我們將生成一首 Lofi 音樂。

DiffRhythm 輸出

Prompt:

[00:00.00]Soft piano intro with ambient pads [00:04.34]Tell me that I'm special [00:06.57]Tell me I look pretty [00:08.46]Tell me I'm a little angel [00:10.58]Sweetheart of your city [00:13.64]Say what I'm dying to hear [00:17.35]Cause I'm dying to hear you [00:20.86]Tell me I'm that new thing [00:22.93]Tell me that I'm relevant [00:24.96]Tell me that I got a big heart [00:27.04]Then back it up with evidence [00:29.94]I need it and I don't know why [00:34.28]This late at night [00:36.32]Isn't it lonely [00:39.24]I'd do anything to make you want me [00:43.40]I'd give it all up if you told me [00:47.42]That I'd be [00:49.43]The number one girl in your eyes [00:52.85]Your one and only [00:55.74]So what's it gon' take for you to want me [00:59.78]I'd give it all up if you told me [01:03.89]That I'd be [01:05.94]The number one girl in your eyes [01:11.34]Tell me I'm going real big places [01:14.32]Down to earth so friendly [01:16.30]And even through all the phases [01:18.46]Tell me you accept me [01:21.56]Well that's all I'm dying to hear [01:25.30]Yeah I'm dying to hear you [01:28.91]Tell me that you need me [01:30.85]Tell me that I'm loved [01:32.90]Tell me that I'm worth it

風格:

範例 2:流行抒情曲

在這個範例中,我們將生成一首流行抒情曲。

DiffRhythm 輸出

Prompt:

[00:00.00]Where have you gone? [00:05.00]Tell me that I'm enough for you [00:08.20]Even when I feel unsure [00:11.50]Hold me closer, don't let go [00:15.00]I just need to feel secure [00:20.00]Strings begin to rise gently [00:24.00]Now I'm standing in the spotlight [00:27.50]Hoping that you'll see me clear [00:31.00]Chorus builds with stronger vocals [00:35.00]Tell me I'm the one you need

風格:

範例 3:中文 EDM

在這個範例中,我們將為電音愛好者生成一首中文 EDM 音樂。

DiffRhythm 輸出

Prompt:

[00:00.00]電子合成器漸入,氛圍鋪墊 [00:04.00]節奏漸強,低頻鼓點推進 [00:08.00]夜晚燈光閃爍,心跳跟著節拍 [00:11.50]城市節奏加快,感覺越來越快 [00:15.00]情緒堆疊,準備進入高潮 [00:18.50]重低音爆發,節奏全面釋放 [00:22.00]跟著音樂搖擺,不再停下來 [00:25.50]雙手舉起,讓節奏帶你飛 [00:30.00]旋律持續推進,層層疊加能量

風格:

DiffRhythm 的使用案例

內容創作

為影片、社群媒體和數位內容生成背景音樂。

遊戲開發

為遊戲環境和互動體驗創建自適應音樂音軌。

電影與媒體

為視覺敘事製作配樂和基於情緒的作品。

快速原型設計

無需手動作曲即可快速生成音樂概念。

關於 DiffRhythm AI 的最終想法

DiffRhythm 代表了向更結構化、更可控的 AI 音樂生成方向的轉變。透過專注於節奏和時序,該模型能夠實現更一致且音樂上更連貫的輸出。

憑藉其基於擴散的方法和靈活的提示詞系統,DiffRhythm AI 可以支援廣泛的創意工作流程,從簡單的背景音樂到更複雜的作品。

隨著 AI 生成音訊的持續發展,像 DiffRhythm 這樣的模型可能會在實現可擴展和便捷的音樂創作方面發揮重要作用。

立即開始測試 DiffRhythm API Key,透過 PiAPI 獲取您的 API 存取權限!

使用 PiAPI 解鎖 20 多個 AI 模型的強大功能——圖像、影片、聊天、音樂等。立即註冊,開始更智慧、更快速、更大規模的構建。