• 我的订阅
  • 科技

“紫东太初”2.0问世 可理解生成音乐和视频

类别:科技 发布时间:2023-06-17 07:40:00 来源:每日看点快看

本文转自:厦门日报

新一代国产人工智能大模型

“紫东太初”2.0问世 可理解生成音乐和视频 新华社北京6月16日电 在三维场景里实现精准定位,通过图像与声音的结合完成场景分析……中科院自动化研究所16日发布“紫东太初”全模态大模型,并首次对外实时展示了该模型在音乐理解与生成、三维场景导航、信号理解、多模态对话等方面的全新功能。

中科院自动化研究所所长徐波介绍,“紫东太初”全模态大模型是在多模态大模型“紫东太初”1.0基础上升级打造的2.0版本,在语音、图像和文本三模态的基础上,加入视频、信号、3D点云等模态数据,研究突破了认知增强的多模态关联等关键技术,具备全模态理解能力、生成能力和关联能力。

“紫东太初”2.0可以理解三维场景、信号等数字物联时代的重要信息,完成了音乐、图片和视频等数据之间的跨模态对齐,能够处理音乐视频分析、三维导航等多模态关联应用需求,并可实现音乐、视频等多模态内容理解和生成。

“从1.0到2.0,‘紫东太初’大模型打通了感知、认知乃至决策的交互屏障,使人工智能进一步感知世界、认知世界,从而延伸出更加强大的通用能力。”徐波说。

目前,“紫东太初”大模型在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域展现出一定的产业应用前景。

比如,在医疗场景,“紫东太初”大模型部署于神经外科机器人MicroNeuro,可实现在术中实时融合视觉、触觉等多模态信息,协助医生对手术场景进行实时推理判断。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-06-17 10:47:17

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...成宽输入一张图书馆的图片和一段汽车鸣笛的音频,“紫东太初”就能发现其中的问题,分析出这段音频不太可能出现在图书馆场景中;给出一张救护车图片、一段森林救火的视频和一段警笛音频,
2023-06-26 01:45:00
紧握根技术竞速大模型
...现产业应用前景“我是昇思开源社区的一名开发者,‘紫东太初’能否以中国国画的形式现场生成一幅竹林图片?”当一位现场观众提出要求,几秒钟后大屏幕上就出现了一幅竹林水墨画……峰会上
2023-06-19 09:03:00
全球首个全模态大模型紫东太初2.0发布,中科院王金桥:希望实现更类人的智能
...就是希望机器实现更类人的智能。”中科院自动化所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥告诉搜狐科技等媒体,人们认识世界70%的数据是靠视觉,10%靠
2023-06-18 15:00:00
中科院:自主研制新一代AI大模型紫东太初2.0问世
...动化研究所今天发布了该所研制的新一代AI大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等
2023-06-16 13:00:00
【汉王科技:正深度分析如何更好的转化“紫东太初”多模态大模型的应用成果】财联社6月27日电,汉王科技在互动平台表示,公司脱胎于中科院自动化所,其为公司持股5%以上的股东,公司与自
2023-06-27 22:41:00
WOT全球技术创新大会2024北京站:探索AI 的无限可能
...质量视频覆盖、沉淀满足实际业务诉求的平台AI能力?紫东太初多模态大模型有哪些创新实践?它的技术趋势展望与思考是什么?在多模态AIGC前沿探索专题,来自竞技世界、万物云、去哪儿
2024-05-31 18:24:00
...午在上海发布了该所研制的新一代人工智能大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等领
2023-06-16 12:08:00
长春“紫东长空”低空大模型正式发布
...空大模型,是长春市与中科院自动化所产业化公司中科紫东太初联合打造的国内首个低空行业大模型。把人工智能在数据融合、产业应用、综合管理等方面的技术优势应用于低空经济领域,通过打造
2025-02-19 15:05:00
“紫东太初号”主题列车上线
...:长江日报近日,武汉人工智能研究院首趟主题列车“紫东太初号”正式上线。“紫东太初号”主题列车位于武汉地铁2号线,以“紫气东来,好运连连”为主题,以“春日限定”淡雾紫色为主色调
2024-04-08 04:58:00
更多关于科技的资讯:
全程支持极客营创新 拟上市的嘉立创助力18项硬件原型完成开发
2025年8月上旬,一场为期5天的硬件创意盛会——2025极客营(首场硬件黑客松)在深圳科创学院成功举办。来自美国、英国
2025-09-04 08:34:00
原钻产量同比降11%+GIA分级升级 天然钻石稀缺性支撑价格体系
2025年上半年,全球钻石市场呈现显著结构性分化。在整体价格下行压力下,大克拉异形钻凭借独特稀缺性展现强劲韧性。6月拉斯维加斯JCK珠宝展高端展区人流如织
2025-09-04 08:39:00
浪潮通信信息亮相2025年南亚东南亚数字合作大会
近日,2025南亚东南亚数字合作大会在泰国召开。本次大会由云南省人民政府和泰国数字经济与社会部联合主办,以“促进区域数字合作
2025-09-04 10:01:00
浪潮通信信息亮相2025算网融合产业发展大会,数据中心产品荣获优秀案例
近日,以“开放、创新、融合、共赢”为主题的2025算网融合产业发展大会在北京召开。会上,浪潮通信信息申报的“浪潮预制模块化数据中心产品”
2025-09-04 10:02:00
中新经纬9月4日电 据路透社报道,法国数据保护机构周三表示,已对Alphabet旗下的Google(谷歌)处以3.25亿欧元(3
2025-09-04 10:04:00
河北新闻网讯(邓学军)近日,中国贸促会正式发布《中国好礼产业促进计划2025—2026年度推荐企业及产品名录》,承德避暑山庄旅游集团有限责任公司精心选送的“朕在凉快”折扇
2025-09-04 10:05:00
国产GEO工具破局者 小陌引擎在济南书写AI创新传奇
近日,在生成式AI重塑全球数字竞争格局的浪潮中,来自济南高新区齐鲁软件园的济南矩阵跃动智能有限公司,凭借自主研发的国内首个攻克大模型搜索优化难题的“小陌GEO对抗引擎”
2025-09-04 10:13:00
集萃智造产业化基地项目开工,开启规模化量产新篇章未来三年力争实现年产近万台智能机器人南报网讯(通讯员芦玲玲记者徐宁)记者昨天从江苏集萃智能制造技术研究所有限公司(以下简称“集萃智造”)获悉
2025-09-04 07:40:00
山东移动日照分公司携手山东鲜醇乳业打造5G智能工厂 全流程赋能乳业生产新标杆
鲁网9月3日讯在数字化浪潮推动传统产业转型升级的背景下,山东移动日照分公司助力山东鲜醇乳业有限公司成功入选《2025年5G工厂名录》
2025-09-03 17:12:00
当晚期肺癌患者仅需支付最低207元、最高千余元的保费,即可通过“穗新保”全额报销高达30万元的质子治疗费用,重燃高质量生活希望时
2025-09-03 17:13:00
山东移动日照分公司:数智转型,打造高端板材涂镀产业新标杆
鲁网9月3日讯日照市昱岚新材料有限公司招商引资项目总投资达 63 亿元,目标打造全国最具竞争力的马口铁生产基地。项目分三期建设
2025-09-03 17:14:00
短视频平台丰富了公众的日常生活,提供了公众所需的各类信息,近年来,越来越多的人通过短视频平台向公众传播医学知识,但这些内容并非全部真实可信
2025-09-03 21:24:00
夏末秋初求职盛宴,山东省人力资源市场喊你来“挑”工作啦!
金九银十求职季,山东省人力资源市场为广大求职者准备了一系列精彩纷呈的招聘活动,无论是刚踏出校园的应届生,还是寻求职业转型的职场人
2025-09-03 18:51:00
吉哒哒生炸鸡架盛唐荟店开业,凭差异化优势领跑行业
近日,炸鸡品类新势力——济南星瀚途旗下吉哒哒生炸鸡架盛唐荟店正式开业,持续引发市场关注。开业当日,现场食客络绎不绝,人气火爆
2025-09-03 18:57:00
豪米客鲜烤牛肉拌饭以特色引领韩式餐饮新潮流
当下餐饮行业竞争日趋白热化,同质化严重的赛道已难见增长红利,而那些能精准捕捉消费需求、构建独特记忆点的特色品类,正凭借差异化优势突围而出
2025-09-03 18:59:00