文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

sxkk20081年前智能百科183
随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。 除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。

随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。


这种开源的AI模型MusicGen,顾名思义其实就是一种深度学习语言模型,该模型基于谷歌2017年推出的Transformer模型,并采用Meta的EnCodec编译器将音频数据分解为小单元处理,让用户可直接根据文本提示和旋律提示创作音乐。


前段时间,Meta人工智能研究工程师Felix Kreuk还曾在Twitter上向大众展示了MusicGen的功能。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

据了解,Meta的介绍,由Synnaeve领导的团队曾使用了2万小时的授权音乐对MusicGen进行训练,其中包括来自内部数据集的来自媒体内容服务商ShutterStock和Pond5 10000首“高质量”授权音乐和390000首纯音乐。


与此同时,Meta自己还将MusicGen与市面上已有的音乐创作软件MusicLM(谷歌旗下)、Riffusion以及Mousai作了比较。


据Meta表示,无不管是在与文本的匹配度上,还是在作曲的可信度上,MusicGen的表现似乎更加惊艳,都更胜一筹。


目前,Meta尚未提供用于训练模型的代码,但提供了预训练模型。用户如果想要亲身感受,可以通过Hugging Face上的API体验MusicGen,除了文本提示外,还可搭配音频一同作为生成音乐的条件。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

在确定提示信息后,便可让MusicGen生成一段12秒的音频但生成音乐。不过可能需要一些时间,其具体等待时长将取决于同时在线的用户数量和用户所设置的提示信息。


从AI孙燕姿到MusicGen,从演唱到创作,AI已经全面入侵音乐领域。然而,MusicGen 能否能够成为一款优秀的音乐生成模型,可能还待更多用户的验证。

相关文章

厨电领域的物种演化: 方太高端全场景厨电打造“智能生活新物种”

厨电领域的物种演化: 方太高端全场景厨电打造“智能生活新物种”

 人类的文明史,本身就是一部新物种的创造史。每一个新物种诞生的背后,则是一次前所未有的资源获取方式的发现,一次独特“生态位”的精准卡位。 &ldqu...

大模型加速涌向移动端!ControlNet 手机出图只需 12 秒,高通 AI 掌门人:LLaMA 也只是时间问题

大模型加速涌向移动端!ControlNet 手机出图只需 12 秒,高通 AI 掌门人:LLaMA 也只是时间问题

大规模模型的革新浪潮正在迅猛地涌向移动应用领域。不久前,在 MWC 上,高通公司展示了一项引人瞩目的技术:仅用 15 秒的时间,通过手机运行稳定扩散算法,即可生成精美的图片。大规模模型的革新浪潮正在迅...

百度网盘推出基于 AI 的高级图搜功能,可使用“形容词”“地名”等查找图片

百度网盘推出基于 AI 的高级图搜功能,可使用“形容词”“地名”等查找图片

近日,百度网盘宣布推出基于AI技术的高级图像搜索功能,据称可以根据带有形容词的名词进行更准确的搜索,并能通过地名、物体名称和图片中的文字等要素查找所需的图片。近日,百度网盘宣布推出基于AI技术的高级图...

GPT的最大对手:谷歌Bard反击了 一张草图就能做网站

GPT的最大对手:谷歌Bard反击了 一张草图就能做网站

自从ChatGPT推出以来,除了添加联网功能,好像没有太多大的更新了。相比于平淡无奇的ChatGPT,其他AI大模型却各显神通、争奇斗艳。前OpenAI员工开发的Claude不仅增加了文档上传功能,传...

AI:插件, 在Chrome任何网站上使用AI聊天

AI:插件, 在Chrome任何网站上使用AI聊天

AI:插件无需 AI 聊天帐户,可在 Chrome 浏览器任何网站上使用 AI 聊天、 Bard 、 Bing 和 Claude,无需复制粘贴,支持一键编写、重写、总结、翻译、解释或回复任何文本。AI...

内置 AI 助手 Copilot 上线:微软 Win11 Dev 预览版 Build 23493 发布

内置 AI 助手 Copilot 上线:微软 Win11 Dev 预览版 Build 23493 发布

Copilot,一款微软在 Windows 11 中加入的 AI 助手,该 AI 助手是一个集成了在操作系统中的侧边栏工具,可以帮助用户完成各种任务。 早在微软 2023 年 5 月,微软就在 Bui...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。