• 我的订阅
  • 科技

deepmind开发音乐创作工具dreamtrack

类别:科技 发布时间:2023-11-21 17:02:00 来源:浅语科技

11月21日消息,Deepmind日前推出了一款名为Lyria的音频模型,可用于生成带有乐器和人声的音乐。此外Deepmind还通过与YouTube合作,整合Lyria模型开发了音乐创作工具DreamTrack,声称可令视频创作者“更有效率地将想法变为作品”。

研究人员介绍了当前通过AI模型生成音乐的挑战,这是因为音乐本身包含极高的信息密度,其中每一秒钟都可能拥有多个节拍、音符及和声。而这也使得“生成音乐”相较于“生成语言(文字转语音)”更为复杂,而对于AI模型来说,维持长音乐序列中的连续性也更为困难,这是因为模型需要在不同的乐句、诗节和长段落中,保持音乐的流畅性和一致性。

此外,由于音乐片段中经常同时包含多个声部和乐器,这也进一步增加了音乐生成的难度,相关音频模型必须能够协调多种声音和旋律,从而使生成的音乐更自然。

而Deepmind所开发的LyriaAI模型,便是针对上述痛点进行的尝试,这款模型的最大特点就是能够生成包含乐器和人声的高品质音乐。

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

此外,Lyria模型还擅长进行音乐变换和延续的任务,因此模型还能基于现有音乐片段生成出风格新颖或统一的后续片段。

研究人员同时强调,Lyria模型拥有细致的微调选项,可让用户精确生成音乐风格及表现方式,因此这款模型可以“满足专业音乐创作的需求,同时也可以让业余用户轻松上手”。

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

IT之家注意到,目前YouTube已经在短视频功能“Shorts”中应用Lyria模型,相关成果已经集成在YouTube的实验音乐创作工具DreamTrack中,用户可以用这款工具生成多样化的配乐,并可选用CharliePuth、CharliXCX、Sia等艺术家的音乐风格来创造出“全新演绎”。

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

据悉,用户可以在DreamTrack中简单地输入主题,之后即可选择一位艺术家,为短视频生成30秒的配乐、歌词、伴奏等内容。

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

此外,Deepmind还表示,研究人员正广泛地探索AI在音乐创作领域的应用,未来用户只需要哼唱,AI就会把旋律配成带有歌词的完整歌曲,也可以将古早的MIDI音乐转换为Remix版本,或为音轨添加各种乐器伴奏。

Deepmind同时提到,Lyria模型生成的所有内容,都会加上SynthID水印标记。这是一种辨识歌曲是否是由AI生成的水印机制,号称能够在不影响听觉体验的前提下,为AI生成的音乐嵌入“听众无法察觉的水印标记”。

deepmind开发音乐创作工具dreamtrack

▲图源Deepmind

研究人员提到,带有“声音水印”的音频,即便添加噪音,或是进行MP3压缩,甚至对变更音调速度,也都能够维持可检测性,而Lyria模型也可以通过检测歌曲中的SynthID,来确认歌曲中由Lyria模型生成的部分,从而更容易辨别音乐主题内容,方便生成后续音乐片段。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-11-21 18:45:04

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

中国首个音乐SOTA模型「天工音乐大模型」今日公测
...逻辑推理能力、语义理解能力、应对复杂需求能力、内容创作能力全面升级,并新增了多轮搜索与综合工具调用、图表绘制、研究模式、增强模式、改图扩图等多项AI能力,为用户带来全新AI体
2024-04-17 15:31:00
AIGC音乐的中场战事:从技术、产品到商业规则
...没闲着,AIGC音乐的中场战事已经拉开帷幕。“改变音乐创作的未来。”11月16日,DeepMind以这个言简意赅的标题发布了博客文章
2023-11-22 13:47:00
AI席卷音乐圈,索尼音乐率先“退出群聊”
...etallic Spheres In Colour”,邀请歌迷通过使用AI工具重新参与创作新专辑的音乐和封面。去年11月美国参议院举行的人工智能论坛上
2024-05-21 16:07:00
谷歌ai音乐创作工具musicfxdj全面升级
近日,谷歌DeepMind对其AI音乐创作工具MusicFXDJ进行了全面升级,为广大音乐爱好者带来了全新的创作体验。使得即便不具备音乐专业背景的普通人也能依靠AI技术
2024-10-27 03:38:00
一文详解AIGC:忘记概念,只聊落地
...片。图像生成:AIGC可以生成逼真的图像,例如生成艺术创作、食品或建筑设计中的草图和图表等。图像修复和增强:AIGC可以自动识别图片中的噪点、玻璃碎片或其他物体,并进行修复,
2023-06-10 15:00:00
AI替代演员和歌手?技术上已经实现
...燕姿的声音翻唱歌曲。人工智能对音乐最大的影响是它让创作变得更加容易,这也将对音乐产业带来深层次的变革。近日,网易云音乐与天桥脑科学研究院(TCCI)联合举办的一场“探索音乐创
2023-07-23 12:59:00
趣丸科技推出天谱乐大模型,可一键让视频开口唱歌
...生成效果达到专业级水准,极大地满足用户多样化的视听创作需求。目前,天谱乐大模型已全面接入趣丸科技旗下唱鸭APP,面向所有用户开放。用户可登陆唱鸭官网或下载APP限时免费体验。
2024-07-31 19:45:00
谷歌发布音乐AI工具MusicFX:一句话就能生成一首音乐
...能作曲的时代似乎又近了一步。12月14日,谷歌推出AI音乐创作工具“MusicFX”,仅需几句话,用户即可生成原创的音乐作品
2023-12-14 17:26:00
谷歌发布ai前沿成果,生成式ai迎来爆发
...生成音乐的AI模型,此前,可视化AI工具Riffusion也能自动创作音乐,还有DanceDiffusion,此外
2023-02-01 21:09:00
更多关于科技的资讯:
小米SU7爆燃遇难者母亲清空事故相关微博
快科技4月3日消息,日前,“小米SU7高速上爆燃致3人遇难”事件引发社会关注。今日,查询事故遇难者母亲“诗雨370491153”微博发现
2025-04-03 00:41:00
本文转自:人民日报海外版本报石家庄电(记者史自强)近日,2024河北省海外人才技术项目创新创业大赛总决赛暨颁奖仪式在石家庄市举办
2025-04-03 05:33:00
本文转自:人民日报第十二届中国网络视听大会上AIGC成为热议话题AIGC来了,影视创作准备好了吗?(解码·文化市场新观察)本报记者 刘 阳近日举办的第十二届中国网络视听大会上
2025-04-03 05:55:00
本文转自:人民日报刘涓溪研发中空纤维反渗透膜,建成国内首条反渗透复合膜生产线,研制海水淡化工程应用的反渗透组件……50余年来
2025-04-03 05:55:00
本文转自:人民日报【案情】某视频公司委托某榕公司根据该视频公司提供或确认的微短剧剧本,制作单集时长不超过3分钟的视频短剧
2025-04-03 06:15:00
加快技术创新  促进产业升级
本文转自:人民日报约1000家中国企业参展2025年汉诺威工业博览会加快技术创新 促进产业升级本报记者  刘仲华 徐 馨中国企业制造的人形机器人成为2025年汉诺威工博会的明星产品
2025-04-03 06:17:00
创新“膜”法,向海洋要淡水(讲述·一辈子一件事)
本文转自:人民日报中国工程院院士高从堦50余年研究海水淡化——创新“膜”法,向海洋要淡水(讲述·一辈子一件事)本报记者  顾 春高从堦(后排左)在指导学生做实验
2025-04-03 06:32:00
霸榜全球开源模型前三杭州日报讯 4月2日,全球AI开源圈炸锅了——杭州的3个大模型直接包揽Hugging Face榜单前三
2025-04-03 06:49:00
跨境电商出口平台数占全国三分之二杭州日报讯 在商业领域,资本流向往往是市场潜力的风向标,跨境电商正吸引各方投资者与资本市场的关注
2025-04-03 06:49:00
华为Pura X真的适配好了吗 我看鸿蒙玩得挺嗨的
不出意外的话,这几天大家应该都被华为Pura X 给刷屏了吧?前两天托尼也给大家聊了很多这机子的上手体验,文章发布以后
2025-04-03 07:11:00
国补价3699元起!小米15/Pro全系降价:最高降500元
每年的4月6日是米粉节,今年米粉节将至,对应的活动已经悄然开启。小米15和小米15 Pro迎来官方降价,最高降价500元
2025-04-03 07:11:00
运气爆棚!湖南一男子花4元买彩票中了1242万元:购彩需要理性
4月3日消息,近日,湖南邵阳县一彩民,以一张4元双色球彩票喜中双色球一等奖,2注共计1242万元。3月31日下午,有关单位为该投注站业主颁发奖牌
2025-04-03 07:11:00
苹果CEO蒂姆·库克套现股票:获利2400万美元
快科技4月3日消息,根据提交给美国证券交易委员会的一份文件,苹果首席执行官蒂姆·库克(Tim Cook)今天通过出售苹果股票获利超2400万美元(约1
2025-04-03 07:11:00
郑州一店把碰一下贴到招财猫上 支付宝:他才是喵机的爹
快科技4月3日消息,在河南郑州,有一家充满趣味的“火烧夹一切”小店,店里的老板堪称“创意鬼才”。他竟然把一张支付宝碰一下贴到了招财猫身上
2025-04-03 07:11:00
刘洋 云南省红河哈尼族彝族自治州个旧市发展和改革局摘要:本文基于数字治理视角,从技术应用、工作流程和制度调整、人才建设四个方面探讨档案管理转型的工作要点
2025-04-03 07:30:00