• 我的订阅
  • 科技

“紫东太初”2.0问世 可理解生成音乐和视频

类别:科技 发布时间:2023-06-17 07:40:00 来源:每日看点快看

本文转自:厦门日报

新一代国产人工智能大模型

“紫东太初”2.0问世 可理解生成音乐和视频 新华社北京6月16日电 在三维场景里实现精准定位,通过图像与声音的结合完成场景分析……中科院自动化研究所16日发布“紫东太初”全模态大模型,并首次对外实时展示了该模型在音乐理解与生成、三维场景导航、信号理解、多模态对话等方面的全新功能。

中科院自动化研究所所长徐波介绍,“紫东太初”全模态大模型是在多模态大模型“紫东太初”1.0基础上升级打造的2.0版本,在语音、图像和文本三模态的基础上,加入视频、信号、3D点云等模态数据,研究突破了认知增强的多模态关联等关键技术,具备全模态理解能力、生成能力和关联能力。

“紫东太初”2.0可以理解三维场景、信号等数字物联时代的重要信息,完成了音乐、图片和视频等数据之间的跨模态对齐,能够处理音乐视频分析、三维导航等多模态关联应用需求,并可实现音乐、视频等多模态内容理解和生成。

“从1.0到2.0,‘紫东太初’大模型打通了感知、认知乃至决策的交互屏障,使人工智能进一步感知世界、认知世界,从而延伸出更加强大的通用能力。”徐波说。

目前,“紫东太初”大模型在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域展现出一定的产业应用前景。

比如,在医疗场景,“紫东太初”大模型部署于神经外科机器人MicroNeuro,可实现在术中实时融合视觉、触觉等多模态信息,协助医生对手术场景进行实时推理判断。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-06-17 10:47:17

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...成宽输入一张图书馆的图片和一段汽车鸣笛的音频,“紫东太初”就能发现其中的问题,分析出这段音频不太可能出现在图书馆场景中;给出一张救护车图片、一段森林救火的视频和一段警笛音频,
2023-06-26 01:45:00
紧握根技术竞速大模型
...现产业应用前景“我是昇思开源社区的一名开发者,‘紫东太初’能否以中国国画的形式现场生成一幅竹林图片?”当一位现场观众提出要求,几秒钟后大屏幕上就出现了一幅竹林水墨画……峰会上
2023-06-19 09:03:00
全球首个全模态大模型紫东太初2.0发布,中科院王金桥:希望实现更类人的智能
...就是希望机器实现更类人的智能。”中科院自动化所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥告诉搜狐科技等媒体,人们认识世界70%的数据是靠视觉,10%靠
2023-06-18 15:00:00
中科院:自主研制新一代AI大模型紫东太初2.0问世
...动化研究所今天发布了该所研制的新一代AI大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等
2023-06-16 13:00:00
【汉王科技:正深度分析如何更好的转化“紫东太初”多模态大模型的应用成果】财联社6月27日电,汉王科技在互动平台表示,公司脱胎于中科院自动化所,其为公司持股5%以上的股东,公司与自
2023-06-27 22:41:00
WOT全球技术创新大会2024北京站:探索AI 的无限可能
...质量视频覆盖、沉淀满足实际业务诉求的平台AI能力?紫东太初多模态大模型有哪些创新实践?它的技术趋势展望与思考是什么?在多模态AIGC前沿探索专题,来自竞技世界、万物云、去哪儿
2024-05-31 18:24:00
...午在上海发布了该所研制的新一代人工智能大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等领
2023-06-16 12:08:00
长春“紫东长空”低空大模型正式发布
...空大模型,是长春市与中科院自动化所产业化公司中科紫东太初联合打造的国内首个低空行业大模型。把人工智能在数据融合、产业应用、综合管理等方面的技术优势应用于低空经济领域,通过打造
2025-02-19 15:05:00
“紫东太初号”主题列车上线
...:长江日报近日,武汉人工智能研究院首趟主题列车“紫东太初号”正式上线。“紫东太初号”主题列车位于武汉地铁2号线,以“紫气东来,好运连连”为主题,以“春日限定”淡雾紫色为主色调
2024-04-08 04:58:00
更多关于科技的资讯:
节日我在岗丨十堰高周波:抓创新赶订单 全力冲刺年度目标
十堰广电讯(全媒体记者 陈林)在国庆中秋假期,位于十堰经济开发区的十堰高周波科工贸有限公司抓创新赶订单,全力冲刺年度目标
2025-10-05 20:21:00
节日我在岗丨艾斯卓智能科技:节日不休 赶制订单
十堰广电讯(全媒体记者 耿吉国)放假不放松,生产不停工。国庆中秋长假,我市各生产企业铆足干劲抓生产、赶订单,奋力冲刺年度目标任务
2025-10-05 20:21:00
普阳钢铁工程机械用高强高韧宽厚板全国市场占有率名列前茅一块宽厚板的靶向发力——“铁疙瘩”怎样变成“金娃娃”(十)从矿山到港口
2025-10-05 07:47:00
人气旺 厦门多个商场假日客流爆棚、销售额亮眼
集美大悦城商圈内,小朋友和机器人亲密互动。(本组图/厦门日报记者 黄晓珍 摄)国庆中秋假期, 厦门SM购物中心潮玩店内人气火爆
2025-10-04 09:20:00
省数据和政务服务局发布公告公开征集一批河北省高质量数据集河北日报讯(记者解楚楚)9月26日,河北省数据和政务服务局发布公告
2025-10-04 08:03:00
央媒看太原9月30日,央视财经频道《经济信息联播》栏目以《双节市场备货足美食特产受青睐》为题,报道了假期到来,太原市各大综合市场提前备货
2025-10-04 07:17:00
厦门网讯(厦门日报记者 朱道衡)近日,2025鼓浪屿世遗文创作品征集活动启动。此次活动面向全国(含港澳台地区)高校、企业
2025-10-03 08:37:00
厦门网讯(厦门日报记者 楚燕 通讯员 石青青)长假期间,许多人从忙碌的工作中解脱出来,趁机好好休息。可是,如果休息方式不得当
2025-10-03 08:37:00
渤海之潮涌动着澎湃的脉搏,海河之畔镌刻着科技的印记。10年前,一颗带有“清华”基因的种子在天津这片沃土扎根;10年后,它长成一棵枝繁叶茂的参天大树
2025-10-03 09:25:00
太燃了!无人机空中展旗!高新区国庆“氛围组”已上线!
2025-10-03 23:48:00
抖音生活服务联合北京卫视发起“老板驾到”直播活动,吸引用户下单超100万元团购券
9月29日,抖音生活服务联合北京卫视发起“老板驾到”直播活动,助力北京国庆中秋消费。抖音用户在@北京卫视 直播间下单超1万次
2025-10-03 18:36:00
“FutureBOT未来引力”2025北京机器人文化节首日盛况 打造国庆科技打卡新地标
国庆首日,“FutureBOT未来引力”2025北京机器人文化节在北京昌平超极合生汇正式拉开帷幕,成为国庆假期极具科技温度的打卡地
2025-10-03 19:06:00
走到白石山巅的尽头,这家建在悬崖边的“云端咖啡厅”绝对让你惊呼。
2025-10-03 11:37:00
泰康人寿发布新品“泰康百万药无忧(庆典版)医疗保险”(以下‬简称“百万药无忧”),以广覆盖、易投保、强保障、低费率为优势
2025-10-03 09:17:00
厦门网讯(厦门日报记者 翁华鸿 通讯员 林雨新)在近日举行的2025全球数据管理峰会“数据要素分论坛暨大数据统计与人工智能技术创新管理研讨会”上
2025-10-03 08:38:00