YuE（樂）是一個開源的全歌曲生成基礎(chǔ)模型，通過給定的歌詞生成完整的歌曲音頻。解決了生成時長達(dá)數(shù)分鐘、同時包含人聲和伴奏的全歌曲的困難。

YuE能夠在長時序音樂的背景下，保持歌詞與音樂的高度一致性，生成旋律流暢且具備音樂性和可控性的歌曲。模型結(jié)合了語義增強的音頻分詞器、雙標(biāo)記技術(shù)和歌詞思維鏈等方法，使其能在多個音樂流派和風(fēng)格中進行多樣化的生成，包括重金屬、爵士、說唱等。

DEMO

文章里放不了的音頻，想看完整版的DEMO可以到這個鏈接里去看。

https://map-yue.github.io/

1、重金屬

2、說唱

3、兒歌

4、粵語歌

創(chuàng)新的音頻分詞器：采用語義增強的音頻分詞器，有助于更精準(zhǔn)地捕捉和生成音樂的細(xì)節(jié)。

雙標(biāo)記技術(shù)：通過雙標(biāo)記的方式，使得生成的歌曲在保持歌詞一致性的同時，也能保留高質(zhì)量的音樂性。

多樣化風(fēng)格生成：YuE支持多種音樂風(fēng)格的生成，包括金屬、爵士、說唱等，具備較強的風(fēng)格適應(yīng)性。

歌詞思維鏈：結(jié)合歌詞思維鏈技術(shù)，有助于在生成過程中更好地理解和表現(xiàn)歌詞的情感與主題。

項目鏈接

https://github.com/multimodal-art-projection/YuE

[超站]友情鏈接：

四季很好，只要有你，文娛排行榜：https://www.yaopaiming.com/
關(guān)注數(shù)據(jù)與安全，洞悉企業(yè)級服務(wù)市場：https://www.ijiandao.com/