
YuE开源的全歌曲生成基础模型
智能
2025-03-10 14:57
声明:该文章来自(开源AI项目落地)版权由原作者所有,K2OS渲染引擎提供网页加速服务。
YuE(乐)是一个开源的全歌曲生成基础模型,通过给定的歌词生成完整的歌曲音频。解决了生成时长达数分钟、同时包含人声和伴奏的全歌曲的困难。
YuE能够在长时序音乐的背景下,保持歌词与音乐的高度一致性,生成旋律流畅且具备音乐性和可控性的歌曲。模型结合了语义增强的音频分词器、双标记技术和歌词思维链等方法,使其能在多个音乐流派和风格中进行多样化的生成,包括重金属、爵士、说唱等。
DEMO
文章里放不了的音频,想看完整版的DEMO可以到这个链接里去看。
https://map-yue.github.io/
1、重金属
2、说唱
3、儿歌
4、粤语歌
技术特点
全歌曲生成:与传统的短音频生成不同,YuE可以生成完整的、数分钟长的歌曲,包含人声和伴奏,确保歌词与旋律的协调性。创新的音频分词器:采用语义增强的音频分词器,有助于更精准地捕捉和生成音乐的细节。
双标记技术:通过双标记的方式,使得生成的歌曲在保持歌词一致性的同时,也能保留高质量的音乐性。
多样化风格生成:YuE支持多种音乐风格的生成,包括金属、爵士、说唱等,具备较强的风格适应性。
歌词思维链:结合歌词思维链技术,有助于在生成过程中更好地理解和表现歌词的情感与主题。
项目链接
https://github.com/multimodal-art-projection/YuE
[超站]友情链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
排名
热点
搜索指数
- 1 丰收时节感悟总书记的“三农”情怀 7904735
- 2 深圳机场飞机被“五花大绑”防台风 7809399
- 3 疑追风观浪 香港一对母子被卷入海 7712899
- 4 盘点新疆的全国之“最” 7616030
- 5 驴肉价格上涨 中国正面临缺驴问题 7522214
- 6 用一条毛巾避免大窗玻璃离家出走 7428843
- 7 护网:社交账号不受控制?木马在作祟 7332953
- 8 鸿蒙智行秋季新品发布会 7235016
- 9 “晚1秒就撞 我肯定不惯着他” 7136081
- 10 中国每年吃掉约70亿只白羽肉鸡 7039215