• 我的订阅
  • 科技

“紫东太初”2.0问世 可理解生成音乐和视频

类别:科技 发布时间:2023-06-17 07:40:00 来源:每日看点快看

本文转自:厦门日报

新一代国产人工智能大模型

“紫东太初”2.0问世 可理解生成音乐和视频 新华社北京6月16日电 在三维场景里实现精准定位,通过图像与声音的结合完成场景分析……中科院自动化研究所16日发布“紫东太初”全模态大模型,并首次对外实时展示了该模型在音乐理解与生成、三维场景导航、信号理解、多模态对话等方面的全新功能。

中科院自动化研究所所长徐波介绍,“紫东太初”全模态大模型是在多模态大模型“紫东太初”1.0基础上升级打造的2.0版本,在语音、图像和文本三模态的基础上,加入视频、信号、3D点云等模态数据,研究突破了认知增强的多模态关联等关键技术,具备全模态理解能力、生成能力和关联能力。

“紫东太初”2.0可以理解三维场景、信号等数字物联时代的重要信息,完成了音乐、图片和视频等数据之间的跨模态对齐,能够处理音乐视频分析、三维导航等多模态关联应用需求,并可实现音乐、视频等多模态内容理解和生成。

“从1.0到2.0,‘紫东太初’大模型打通了感知、认知乃至决策的交互屏障,使人工智能进一步感知世界、认知世界,从而延伸出更加强大的通用能力。”徐波说。

目前,“紫东太初”大模型在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域展现出一定的产业应用前景。

比如,在医疗场景,“紫东太初”大模型部署于神经外科机器人MicroNeuro,可实现在术中实时融合视觉、触觉等多模态信息,协助医生对手术场景进行实时推理判断。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-06-17 10:47:17

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...成宽输入一张图书馆的图片和一段汽车鸣笛的音频,“紫东太初”就能发现其中的问题,分析出这段音频不太可能出现在图书馆场景中;给出一张救护车图片、一段森林救火的视频和一段警笛音频,
2023-06-26 01:45:00
紧握根技术竞速大模型
...现产业应用前景“我是昇思开源社区的一名开发者,‘紫东太初’能否以中国国画的形式现场生成一幅竹林图片?”当一位现场观众提出要求,几秒钟后大屏幕上就出现了一幅竹林水墨画……峰会上
2023-06-19 09:03:00
全球首个全模态大模型紫东太初2.0发布,中科院王金桥:希望实现更类人的智能
...就是希望机器实现更类人的智能。”中科院自动化所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥告诉搜狐科技等媒体,人们认识世界70%的数据是靠视觉,10%靠
2023-06-18 15:00:00
中科院:自主研制新一代AI大模型紫东太初2.0问世
...动化研究所今天发布了该所研制的新一代AI大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等
2023-06-16 13:00:00
【汉王科技:正深度分析如何更好的转化“紫东太初”多模态大模型的应用成果】财联社6月27日电,汉王科技在互动平台表示,公司脱胎于中科院自动化所,其为公司持股5%以上的股东,公司与自
2023-06-27 22:41:00
WOT全球技术创新大会2024北京站:探索AI 的无限可能
...质量视频覆盖、沉淀满足实际业务诉求的平台AI能力?紫东太初多模态大模型有哪些创新实践?它的技术趋势展望与思考是什么?在多模态AIGC前沿探索专题,来自竞技世界、万物云、去哪儿
2024-05-31 18:24:00
...午在上海发布了该所研制的新一代人工智能大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等领
2023-06-16 12:08:00
长春“紫东长空”低空大模型正式发布
...空大模型,是长春市与中科院自动化所产业化公司中科紫东太初联合打造的国内首个低空行业大模型。把人工智能在数据融合、产业应用、综合管理等方面的技术优势应用于低空经济领域,通过打造
2025-02-19 15:05:00
“紫东太初号”主题列车上线
...:长江日报近日,武汉人工智能研究院首趟主题列车“紫东太初号”正式上线。“紫东太初号”主题列车位于武汉地铁2号线,以“紫气东来,好运连连”为主题,以“春日限定”淡雾紫色为主色调
2024-04-08 04:58:00
更多关于科技的资讯:
农行固堤支行积极拥抱金融科技,全力推动网点智能化转型与服务升级。大力推广手机银行、网上银行等线上渠道,引导客户体验转账汇款
2025-12-24 08:41:00
“您站好,用手机拍正面、侧面、背面三张照片。3分钟后,您不仅能知道最适合自己的衣服尺寸,还能在电脑上实时看到自己穿上这件衣服的虚拟效果
2025-12-24 08:42:00
日前,中国进出口银行深圳分行向纵腾集团子公司香港亿格有限公司发放境外投资贷款,精准助力企业提升跨境电商海外仓运营效能,为跨境电商行业高质量发展注入金融活水
2025-12-24 08:44:00
苏州市镇江商会副会长单位【旭智文化】荣膺2025年度省级专精特新中小企业称号
近日,江苏省工业和信息化厅正式公布2025年度省级专精特新中小企业名单。苏州市镇江商会副会长单位苏州旭智新文化科技有限公司凭借在数字展馆领域的创新研发
2025-12-24 09:03:00
浙江日报讯 (记者 朱银燕 共享联盟·上虞 张汉锋) “我宣布,在浙江绍兴上虞发起的‘与移动机器人连续对打羽毛球次数最多’挑战的最终成绩为1452次
2025-12-24 09:14:00
为迎接即将到来的年度业务“开门红”,张家口农商银行宣泰支行早部署、早行动,全面启动客户储备工作,通过一系列精准、贴心的举措
2025-12-24 10:11:00
京东方布局钙钛矿光伏 多项成果创世界纪录
大皖新闻讯 钙钛矿太阳能电池是依靠钙钛矿结构材料进行光电转换的一种新型光伏电池,可以在室内弱光条件下高效发电,为自动照明
2025-12-24 10:13:00
东古调味与淘宝闪购战略携手,深化即时零售布局
近日,国民调味品牌东古调味与淘宝闪购达成合作,启动“东古暖冬感恩季”主题活动。值得关注的是,双方的合作不仅限于商品推广
2025-12-24 11:04:00
不仅是黑科技,更是新生活:亮亮视野AR字幕眼镜获AIS与联合国双重认可
国际信息系统协会(Association for Information Systems, AIS)近日在美国纳什维尔举办的ICIS 2025大会上宣布
2025-12-24 11:04:00
创新赋能产业升级!千灯镇新增11家苏州市工程技术研究中心
近日,苏州市科学技术局公示2025年苏州市工程技术研究中心(第二批)新建拟认定名单,其中,来自我镇的11家企业成功上榜
2025-12-24 11:26:00
今日开启!“烟海e家”新用户1分钱领鸡蛋,手慢无!
发福蛋了!烟海e家客户端“新粉有特权,1分钱领鸡蛋”活动今日正式启动!即日起至28日24时,烟海e家新注册用户“1分钱+100积分”
2025-12-24 13:52:00
京东工业亮相京东品酒会 以创新持续助力工业产业万亿降本
12月23日,备受关注的京东品酒会在深圳鹏瑞莱佛士酒店举办,本次品酒会由京东工业和人头马携手呈现,不仅联合打造了一场融合美酒品鉴
2025-12-24 14:04:00
瑞金医院携手富士胶片揭牌培训基地 赋能医疗技术培训新未来
2025年12月21日,富士胶片智慧医疗技术培训中心(以下简称"该中心")迎来成立两周年之际,上海交通大学医学院附属瑞金医院胸外科腔镜/内镜(NBSTAT 课程)合作培训基地揭牌仪式于该中心隆重举行
2025-12-24 15:05:00
数智赋能,知行致远——上海大学悉尼工商学院SHU-UTS硕士项目学生走进商汤科技
为搭建理论与实践的桥梁,助力学生近距离感知人工智能产业前沿动态,近日,上海大学悉尼工商学院SHU-UTS硕士项目学生走进商汤科技
2025-12-24 15:05:00
浪潮华鼎:破局能源数智化转型,共筑安全高效新基建
近日,以“新质强国·数智赋能·绿色出海·共赢未来”为主题的第二届能源数智化论坛在北京举行。本届论坛由中国信息协会指导、中国信息协会能源工作委员会主办
2025-12-24 15:57:00