• 我的订阅
  • 科技

趣丸科技推出天谱乐大模型,可一键让视频开口唱歌

类别:科技 发布时间:2024-07-31 19:45:00 来源:爱云资讯

7月26日至29日,2024年第二十一届中国国际数码互动娱乐展览会(ChinaJoy)在上海新国际博览中心开幕。由趣丸科技打造的多模态配乐大模型“天谱乐”惊喜亮相,成为本届大会最具创新的展品之一。

天谱乐大模型不仅支持文生音乐、音频生音乐,还首创图片/视频生音乐功能,多模态输入能力超越Suno。用户仅需上传相册中的一张图片或一段不超过60秒的视频,即可生成与图像内容和基调高度适配的带人声唱词的完整歌曲,生成效果达到专业级水准,极大地满足用户多样化的视听创作需求。

目前,天谱乐大模型已全面接入趣丸科技旗下唱鸭APP,面向所有用户开放。用户可登陆唱鸭官网或下载APP限时免费体验。

业内人士表示,天谱乐无疑带来了AI音乐生成技术的重大突破,展示了AI在理解和创造多模态内容的先进能力,对短视频、影视和音乐行业带来了前所未有的挑战和机遇。天谱乐视频及文本生成歌曲案例视频生成歌曲,让同步视听生成变成现实

随着数字音乐和短视频文化的蓬勃发展,越来越多的年轻人享受音乐的方式已不再局限于单纯地听歌、K歌,呈现出从“听唱”转向“唱作”的消费偏好,青年群体参与音视频作品创作的需求意识逐渐上扬。为了更好地满足用户,解决这些应用中的实际需求,趣丸科技天谱乐大模型应运而生。

天谱乐大模型独创的“视频生成歌曲”功能,支持上传图片以及MP4、MOV等多种视频格式,生成的音乐曲风丰富、歌词与人声兼备。同时输出带有字幕和封面标签的成品视频,方便一键分享到社媒或好友。

对于普通用户,即使不会乐器不懂乐理也可以为Vlog、家庭录像增添背景音乐或创作专属歌曲来表达自己的态度与情感。对于专业人士,唱鸭网页端为广告、影视和音乐从业者提供音乐专家模式,具备更精准的参数控制和更高的创作自由度。

此外,“文生音乐”功能,用户在输入一段文字后,仅需等待15-20秒,即可生成长达3.5分钟的纯音乐。“音频生音乐”功能,提供“三键成曲”、“哼唱成曲”多种玩法。

天谱乐的强大,在于打破了AI在音乐理解和生成上的局限。据了解,天谱乐大模型由趣丸科技唱鸭团队研发。该团队自研了“多模态音乐生成大模型”技术,在安全合规下,让模型不仅可以根据视频画面的明暗、色彩、情绪的细微变化逐帧识别和理解,也可以理解音乐的和弦、旋律、歌词、演唱风格等复杂特征,最终生成高契合度的视频配乐。

关于团队的构成,趣丸科技副总裁贾朔介绍到“与典型的大模型研发团队不同,我们团队大部分都是有很强的技术和音乐背景的复合型人才。所以我们更有能力去辨别一个好的音乐结构、好的音乐作品应该长什么样子,然后通过技术创造出更有音乐审美与应用价值的产品。”

趣丸科技推出天谱乐大模型,可一键让视频开口唱歌

唱鸭天谱乐官网从技术到应用,释放AI的真正价值

音乐是有生命的,它不仅是一种艺术形式,更是情感交流和表达的方式。趣丸科技深知AI音乐工具不仅是技术的堆砌,更是用户情感的载体。通过技术创新降低音乐创作门槛,让用户不再受限于专业的乐理知识,复杂的音乐制作流程和昂贵的版权费用,就可以轻松通过音乐创作记录生活的切片,在创作中提升审美自觉和音乐生产能力。

以唱鸭为代表的AI音乐创作工具使人人参与音乐创作成为现实,也带来生产侧和消费侧的全面革新,其对影视和音乐行业的潜在影响不会亚于数字音乐和流媒体的兴起。

《2024中国音乐产业发展总报告》显示,2023年中国数字音乐产业规模达到893.45亿元,中国网络音乐用户规模达到7.26亿。高盛《MusicInTheAir》指出,预计到2030年,全球音乐市场(录制音乐、词曲版权和演出市场)的收入预计达到1637亿美元。在可预见的未来,音乐市场仍将保持旺盛发展势头。而随着生成式AI的推动和广泛应用,数字音乐产业价值将进一步凸显。我们也应该看到,生成式AI技术虽然解锁了巨大的市场空间和可能性,但也不能忽视其不完美的现状。贾朔表示,“让AI工具能通过人类的服从性测试,真正嵌入到内容创作者的工具流里面,解决创作过程中的实际问题,可能是行业内的整体挑战。”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-07-31 23:45:10

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

顶流大模型应用!天工AI不炫技,实测真正的生产力工具
...使用AI搜索的时候,希望搜到的内容可以图文并茂,直接一键粘贴,方便分享和引用。而天工AI搜索不但可以基于全网信息进行整合、提炼、归纳、总结,给出精准的搜索结果,还能以图文并茂
2024-06-29 09:39:00
“大模型+音乐”想象空间有多大?可自动谱词编曲,还能生成专属歌曲
封面新闻记者 欧阳宏宇从虚拟歌姬到一键编词作曲,大模型技术的普及,让音乐创作消费场景的持续扩大。9月15日,讯飞音乐在成都公布了助力音乐发展的多项计划。据讯飞音乐主理人郭嘉介绍,
2023-09-17 16:22:00
万兴科技AIGC概念迷雾:60秒文生视频能力遭质疑,开月薪10万招AI人才
...视频多媒体大模型,目前已迭代文生音乐、多语言对话、一键成片等近百项音视频原子能力。特别是在文生视频能力上,已实现不同风格、丰富场景及主题的连贯性,一键生成时长支持60秒左右。
2024-05-07 11:13:00
Adobe推视频生成大杀器!最长生成5秒视频,一键重拍成为现实,已开放公测
...新,一是帮助用户自动扩展开头片尾,二是模拟相机进行一键调参,三是实现视频一键重拍。1. 生成扩展:适合微小调整,视频最多延长2秒
2024-10-17 09:52:00
联通在线精彩亮相2023世界VR产业大会
...计图稿生成。AI视频:首创图神经网络实现完美转场,实现一键生成文案/故事视频、一键生成音乐MV。AI空间:通过AIGC技术实现现实场景的复刻,快速打造大空间建模。联通全真数字
2023-10-23 18:25:00
AI焕新升级 万兴科技旗下Wondershare Filmora上线AI动感字幕功能
...I能力在视频编辑领域的应用边界。在AI能力加持下,用户一键即可识别、生成丰富动效的字幕,大大简化制作难度、节省编辑时间的同时,也让视频的视觉吸引力大幅上升,提升观众的观看体验
2024-05-24 11:55:00
一日连发两款视频大模型,火山引擎要让每个人都能用上AI
...发布豆包视频生成-PixelDance、豆包视频生成-Seaweed两款AI大模型,并公布了多项AI大模型的全新升级
2024-09-25 15:00:00
英特尔Evo的AIGC超能力,用了都说“超给力”!
...眼前一亮的是将AIGC融入音乐、视觉创作之中,助力灵感一键生成,让算力放飞创作想象力。作为超强算力的“赞助商”,英特尔携Evo超能本全程参与,以在轻薄本上支持本地运行AIGC
2023-10-20 17:05:00
Sora炸圈后哑火,国产视频大模型接棒降门槛
...叙事的完整性,就必须在这些核心元素上实现全面可控。一键生成32秒视频生数科技上一次对外发声是在今年4月,清华大学人工智能研究院副院长、生数科技联合创始人兼首席科学家朱军教授发
2024-09-12 09:57:00
更多关于科技的资讯: