• 我的订阅
  • 科技

“紫东太初”2.0问世 可理解生成音乐和视频

类别:科技 发布时间:2023-06-17 07:40:00 来源:每日看点快看

本文转自:厦门日报

新一代国产人工智能大模型

“紫东太初”2.0问世 可理解生成音乐和视频 新华社北京6月16日电 在三维场景里实现精准定位,通过图像与声音的结合完成场景分析……中科院自动化研究所16日发布“紫东太初”全模态大模型,并首次对外实时展示了该模型在音乐理解与生成、三维场景导航、信号理解、多模态对话等方面的全新功能。

中科院自动化研究所所长徐波介绍,“紫东太初”全模态大模型是在多模态大模型“紫东太初”1.0基础上升级打造的2.0版本,在语音、图像和文本三模态的基础上,加入视频、信号、3D点云等模态数据,研究突破了认知增强的多模态关联等关键技术,具备全模态理解能力、生成能力和关联能力。

“紫东太初”2.0可以理解三维场景、信号等数字物联时代的重要信息,完成了音乐、图片和视频等数据之间的跨模态对齐,能够处理音乐视频分析、三维导航等多模态关联应用需求,并可实现音乐、视频等多模态内容理解和生成。

“从1.0到2.0,‘紫东太初’大模型打通了感知、认知乃至决策的交互屏障,使人工智能进一步感知世界、认知世界,从而延伸出更加强大的通用能力。”徐波说。

目前,“紫东太初”大模型在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域展现出一定的产业应用前景。

比如,在医疗场景,“紫东太初”大模型部署于神经外科机器人MicroNeuro,可实现在术中实时融合视觉、触觉等多模态信息,协助医生对手术场景进行实时推理判断。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-06-17 10:47:17

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

...成宽输入一张图书馆的图片和一段汽车鸣笛的音频,“紫东太初”就能发现其中的问题,分析出这段音频不太可能出现在图书馆场景中;给出一张救护车图片、一段森林救火的视频和一段警笛音频,
2023-06-26 01:45:00
紧握根技术竞速大模型
...现产业应用前景“我是昇思开源社区的一名开发者,‘紫东太初’能否以中国国画的形式现场生成一幅竹林图片?”当一位现场观众提出要求,几秒钟后大屏幕上就出现了一幅竹林水墨画……峰会上
2023-06-19 09:03:00
全球首个全模态大模型紫东太初2.0发布,中科院王金桥:希望实现更类人的智能
...就是希望机器实现更类人的智能。”中科院自动化所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥告诉搜狐科技等媒体,人们认识世界70%的数据是靠视觉,10%靠
2023-06-18 15:00:00
中科院:自主研制新一代AI大模型紫东太初2.0问世
...动化研究所今天发布了该所研制的新一代AI大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等
2023-06-16 13:00:00
【汉王科技:正深度分析如何更好的转化“紫东太初”多模态大模型的应用成果】财联社6月27日电,汉王科技在互动平台表示,公司脱胎于中科院自动化所,其为公司持股5%以上的股东,公司与自
2023-06-27 22:41:00
WOT全球技术创新大会2024北京站:探索AI 的无限可能
...质量视频覆盖、沉淀满足实际业务诉求的平台AI能力?紫东太初多模态大模型有哪些创新实践?它的技术趋势展望与思考是什么?在多模态AIGC前沿探索专题,来自竞技世界、万物云、去哪儿
2024-05-31 18:24:00
...午在上海发布了该所研制的新一代人工智能大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等领
2023-06-16 12:08:00
长春“紫东长空”低空大模型正式发布
...空大模型,是长春市与中科院自动化所产业化公司中科紫东太初联合打造的国内首个低空行业大模型。把人工智能在数据融合、产业应用、综合管理等方面的技术优势应用于低空经济领域,通过打造
2025-02-19 15:05:00
“紫东太初号”主题列车上线
...:长江日报近日,武汉人工智能研究院首趟主题列车“紫东太初号”正式上线。“紫东太初号”主题列车位于武汉地铁2号线,以“紫气东来,好运连连”为主题,以“春日限定”淡雾紫色为主色调
2024-04-08 04:58:00
更多关于科技的资讯:
“只需站在这里拍1秒,就能生成和自己一模一样的数字分身?太神奇了!”3月5日,杭州城西银泰城的“数字未来+”华数银龄生活馆里
2026-03-09 07:13:00
今年两会期间,从“部长通道”上,工业和信息化部部长李乐成指出:“‘人工智能+’制造是一个必答题”;到会场外,全国政协委员
2026-03-08 22:36:00
她经济催热春日市场 撑起消费“半边天”
鲁网3月8日讯抽奖、满减、赠券、大额折扣……随着“三八”国际劳动妇女节到来,以女性消费为核心的“她经济”强势升温,成为春日消费市场的鲜明主线
2026-03-08 17:24:00
3月9日上午,一起探秘中国“机器人天团”
大皖新闻讯 北京、广东、浙江、安徽……这些地方的机器人,都各有什么本领,能如何让我们的生活和工作变得更加智能化?3月9日上午9时
2026-03-08 17:28:00
视频摄制:冯阳 霍艳恩 赵新宇 王思宁3月5日,北京。一场春雪为人民大会堂披上银装。十四届全国人大四次会议开幕会后,代表们陆续走出会场
2026-03-08 08:15:00
大河网讯(记者 谢岚 王紫仪 贺志泉 席茜)3月8日,我们把镜头对准全国人代会上的她身影,不定义她们该怎样,只记录她们正怎样。努力的她自闪耀!编辑:王晓颖审核 :莫韶华
2026-03-08 09:08:00
【宅男财经|财眼观两会】3月6日,财政部部长蓝佛安在十四届全国人大四次会议经济主题记者会上表示,对于老百姓日常消费,无论是商品还是服务
2026-03-08 09:34:00
【宅男财经|专家面对面】近期OpenClaw(昵称“小龙虾”)爆火,腾讯、小米等大厂纷纷布局。知名经济学家、国研新经济研究院创始院长朱克力表示
2026-03-08 10:19:00
今年政府工作报告提出,“因地制宜发展新质生产力,建设现代化产业体系”,热门赛道人工智能无疑是代表委员热议的高频词。全国人大代表
2026-03-08 08:55:00
厦门机器人应用场景拓展空间大
市民游客和机器狗互动。活动现场,市民游客观看机器人机器狗表演。厦门网讯(文/图 厦门日报记者 谭心怡)机器人组团“上春晚”
2026-03-08 08:24:00
胶东在线3月5日讯(通讯员常蕊徐冰鑫)近日,山东移动蓬莱分公司(以下简称“蓬莱移动”)成功助力烟台洛姆电子有限公司实现数智化升级
2026-03-08 03:03:00
300亿年误差不超过一秒!中国科大实现锶原子光晶格钟新突破
大皖新闻讯 3月7日,大皖新闻记者从中国科学技术大学获悉,近期该校潘建伟、戴汉宁、陈宇翱、彭承志等科研人员在光钟研制方面取得里程碑式进展
2026-03-07 17:23:00
3月6日消息,“晋e行”作为山西高速公路出行服务的“数字大脑”,自2022年正式上线以来,以数字赋能为核心,标准化运营为抓手
2026-03-07 18:15:00
2026雄安国际机器人大赛征集机器人领域新技术新产品新场景。
2026-03-07 18:40:00
中新经纬3月7日电 (谢婧雯)你下班了,站在公司楼下,掏出手机。以前打车,要打开打车软件、输入目的地、比价、选车型、确认呼叫
2026-03-07 18:52:00