🌗 ACE-Step:邁向音樂生成基礎模型的腳步
➤ 融合擴散模型與深度學習,打造音樂 AI 的新世代
https://github.com/ace-step/ACE-Step
ACE-Step 是一個新穎的開源音樂生成基礎模型,它結合了擴散模型、Sana 的深度壓縮自動編碼器 (DCAE) 和輕量級線性變換器,旨在克服現有方法在生成速度、音樂連貫性和可控性之間的權衡。它利用 MERT 和 m-hubert 對齊語義表示,並在 A100 GPU 上僅需 20 秒即可合成長達 4 分鐘的音樂,速度是基於 LLM 的方法的 15 倍,同時在旋律、和聲和節奏方面實現了卓越的音樂連貫性和歌詞對齊。ACE-Step 支援多種語言和樂器風格,並提供歌詞編輯、風格變化等控制功能,目標是成為音樂 AI 領域的「Stable Diffusion」時刻。
+ 哇,這個模型速度真的很快!想像一下如果能用它快速產生音樂原型,對音樂創作簡直是革命性的改變。
+ 支援多語言功能太棒了!希望未來能看到更多語言的優化,讓更多人可以使用這個工具。
#人工智慧 #音樂生成 #深度學習
GitHub - ace-step/ACE-Step: ACE-Step: A Step Towards Music Generation Foundation Model

ACE-Step: A Step Towards Music Generation Foundation Model - ace-step/ACE-Step

GitHub
🌘 NotaGen:以大型語言模型培訓範式推進符號音樂生成的音樂性
➤ NotaGen: 推動符號音樂生成的音樂性
https://electricalexis.github.io/notagen-demo/
我們介紹NotaGen,一個符號音樂生成模型,旨在探索產生高品質古典樂譜的潛力。NotaGen採用預訓練、微調和強化學習範式,該研究提出了新的CLaMP-DPO方法,進一步提高生成質量和可控性。實驗證明NotaGen在符號音樂生成中超越基準模型,顯著推進音樂美學。
+ 精闢的總結,讓我更瞭解這個新型音樂生成模型的重要性。
+ NotaGen的創新精神在音樂技術領域中非常引人注目,希望能看到更多相關研究成果。
#音樂生成
SOCIAL MEDIA TITLE TAG

SOCIAL MEDIA DESCRIPTION TAG TAG

🌗 DiffRhythm:以潛在擴散快速簡單地生成完整歌曲的端到端模型
➤ 全新音樂生成的革命性突破
https://aslp-lab.github.io/DiffRhythm.github.io/
DiffRhythm是一個基於潛在擴散的完整歌曲生成模型,能夠在十秒內生成長達4分45秒的完整歌曲,具備高音樂性和可懂度。這個模型設計簡單,不需要複雜的數據準備,且只能依賴歌詞和風格提示進行推斷,符合可擴展性需求。
+ 這項技術真是太厲害了,能在短時間內生成完整的歌曲!
+ 我希望能看到更多基於這模型的創作,真的很期待!
#音樂生成
DiffRhythm: Blazingly Fast and Embarrassingly Simple End-to-End Full-Length Song Generation with Latent Diffusion

#開源分享 阿里巴巴開源的統一的音樂生成框架:InspireMusic,支持48kHz,可以生成音樂、歌曲及音訊,支持生成長音訊/完整音樂作品,音質很不錯

它結合了語義和聲學標記進行音樂生成,能更好的理解音樂含義以及情感,使得其生成效果更具表現力和感染力

支持文本生成音樂、音樂續寫、音樂重建 、改善音質等

支持多種音樂風格及風格控制,音樂結構完整、風格連貫

專案地址: github.com/FunAudioLLM/InspireMusic

#音樂生成 #InspireMusic #AIMusic #AI音樂

抖音同集團智能助手 推出 AI 音樂生成功能 11 種風格任選
除了比較為人熟悉的 TikTok 和抖音,中國科技公司字節跳動還有其他產品,智能 AI 助手「豆包」就是其中之一。日前字節跳動宣佈為豆包加入音樂生成功能,用戶只要輸入主題或自行創作的歌詞,再按指示完成音樂風格、情緒和音色等設置,就可以獲得由 AI 生成的歌曲。
The post 抖音同集團智能助手 推出 AI 音樂生成功能 11 種風格任選 appeared first on 香港 unwire.hk 玩生活.樂科技.
#人工智能 #字節跳動 #豆包 #音樂生成
https://unwire.hk/2024/08/10/daobao-ai-music-generator/ai/?utm_source=rss&utm_medium=rss&utm_campaign=daobao-ai-music-generator
抖音同集團智能助手 推出 AI 音樂生成功能 11 種風格任選

除了比較為人熟悉的 TikTok 和抖音,中國科技公司字節跳動還有其他產品,智能 AI 助手「豆包」就是其中之一。日前字節跳動宣佈為豆包加入音樂生成功能,用戶只要輸入主題或自行創作的歌詞,再按指示完成音樂風格、情緒和音色等設置,就可以獲得由 AI 生成的歌曲。

香港 unwire.hk 玩生活.樂科技
音樂生成工具 Suno 登陸 iOS 暫時只限美國 App Store
AI 音樂生成工具雖然效果令人歎爲觀止,不過也造成不少的版權爭議。最近其中一個熱門工具 Suno 就推出 iOS App,進一步使服務普及化。
The post 音樂生成工具 Suno 登陸 iOS 暫時只限美國 App Store appeared first on 香港 unwire.hk 玩生活.樂科技.
#人工智能 #Suno #音樂生成 AI
https://unwire.hk/2024/07/07/generate-that-tune-ai-music-app-suno-launches-on-ios/ai/?utm_source=rss&utm_medium=rss&utm_campaign=generate-that-tune-ai-music-app-suno-launches-on-ios
音樂生成工具 Suno 登陸 iOS 暫時只限美國 App Store

AI 音樂生成工具雖然效果令人歎爲觀止,不過也造成不少的版權爭議。最近其中一個熱門工具 Suno 就推出 iOS App,進一步使服務普及化。

香港 unwire.hk 玩生活.樂科技
🌘 在波形領域生成音樂- Sander Dieleman
➤ 在ISMIR 2019會議上分享了有關以深度學習處理音樂的教程。
https://sander.ai/2020/03/24/audio-generation.html
這篇博客文章討論了在波形領域生成音樂的相關議題,介紹了生成模型、基於概率和對抗式波形模型的最新研究狀況,並提出了觀察和討論要點。
+ 這篇文章對於生成音樂的相關技術提供了很好的概述。
+ 非常有趣的文章,讓我對音樂生成領域有了更深入的瞭解。
#音樂生成
Generating music in the waveform domain

This is a write-up of a presentation on generating music in the waveform domain, which was part of a tutorial that I co-presented at ISMIR 2019 earlier this month.

Sander Dieleman
🌘 andreasjansson/musicgen-looper - 在 Replicate 上運行 API
➤ 使用 andreasjansson/musicgen-looper 在 Replicate 上生成音樂循環
https://replicate.com/andreasjansson/musicgen-looper
andreasjansson/musicgen-looper 是一個音樂生成模型,可通過 API 在 Replicate 上運行。它可以從文本提示生成固定節奏的音樂循環,並使用 BeatNet 檢測節拍和下拍,使用 Rubberband 時間拉伸以匹配所需的節奏。然而,它也存在一些失敗的情況,例如 BeatNet 經常無法選擇正確的下拍,MusicGen 也無法生成人聲。
+ 這是一個很酷的工具,可以幫助音樂人快速生成固定節奏的音樂循環。
+ 這個模型的失敗情況似乎有點令人失望,但它仍然是一個非常有用的工具。
#音樂生成 #API #Replicate
andreasjansson/musicgen-looper – Run with an API on Replicate

Generate fixed-bpm loops from text prompts

🌗 MusicGen:簡單且可控的音樂生成
➤ 單一語言模型生成高質量音樂
https://ai.honu.io/papers/musicgen/
本文介紹了MusicGen,一種單一語言模型,可操作多個壓縮離散音樂表示流,即令牌。MusicGen由一個單階段變壓器語言模型和有效的令牌交錯模式組成,消除了級聯多個模型的需要,例如分層或上採樣。通過這種方法,我們展示了MusicGen如何在文本描述或旋律特徵的條件下生成高質量的樣本,從而更好地控制生成的輸出。我們進行了廣泛的實證評估,考慮自動和人類研究,顯示所提出的方法優於標準文本到音樂基準上評估的基線。通過消融研究,我們闡明了構成MusicGen的每個組件的重要性。
+ 這是一個非常有趣的研究,我很期待看到更多關於MusicGen的發展。
+ 這種方法將有助於音樂生成的發展,並為音樂家和製作人提供更多的創作靈感。
#音樂生成 #語言模型 #機器學習
MusicGen: Simple and Controllable Music Generation