
新闻分类
YuE开源的全歌曲生成基础模型
YuE(乐)是一个开源的全歌曲生成基础模型,通过给定的歌词生成完整的歌曲音频。解决了生成时长达数分钟、同时包含人声和伴奏的全歌曲的困难。
YuE能够在长时序音乐的背景下,保持歌词与音乐的高度一致性,生成旋律流畅且具备音乐性和可控性的歌曲。模型结合了语义增强的音频分词器、双标记技术和歌词思维链等方法,使其能在多个音乐流派和风格中进行多样化的生成,包括重金属、爵士、说唱等。
DEMO
文章里放不了的音频,想看完整版的DEMO可以到这个链接里去看。
https://map-yue.github.io/
1、重金属
2、说唱
3、儿歌
4、粤语歌
技术特点
全歌曲生成:与传统的短音频生成不同,YuE可以生成完整的、数分钟长的歌曲,包含人声和伴奏,确保歌词与旋律的协调性。创新的音频分词器:采用语义增强的音频分词器,有助于更精准地捕捉和生成音乐的细节。
双标记技术:通过双标记的方式,使得生成的歌曲在保持歌词一致性的同时,也能保留高质量的音乐性。
多样化风格生成:YuE支持多种音乐风格的生成,包括金属、爵士、说唱等,具备较强的风格适应性。
歌词思维链:结合歌词思维链技术,有助于在生成过程中更好地理解和表现歌词的情感与主题。
项目链接
https://github.com/multimodal-art-projection/YuE
[超站]友情链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/

随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 习近平同俄罗斯总统普京通电话 7904444
- 2 新华社:警惕对整治违规吃喝歪曲解读 7808714
- 3 刘强东点外卖 给骑手1000元小费 7713215
- 4 中国这些举措在世贸组织获赞 7618965
- 5 63岁中国农大校长全程站立拨穗14小时 7521051
- 6 曝英舰过航台湾海峡 解放军跟监警戒 7424976
- 7 周杰伦患强直性脊柱炎 近照弯腰驼背 7330358
- 8 敏感时刻 美“末日飞机”现异常动向 7233507
- 9 大连天空现“窟窿云” 7135345
- 10 差点没认出这是张柏芝 7039227