• 我的订阅
  • 科技

Databricks推出目前最强开源 AI

类别:科技 发布时间:2024-04-01 12:06:00 来源:浅语科技

3月31日消息,Databricks近日在推出了一款通用大语言模型DBRX,号称是“目前最强开源AI”,据称在各种基准测试中都超越了“市面上所有的开源模型”。

Databricks推出目前最强开源 AI

从官方新闻稿中得知,DBRX是一个基于Transformer的大语言模型,采用MoE(MixtureofExperts)架构,具备1320亿个参数,并在12TToken的源数据上进行预训练。

研究人员对这款模型进行测试,相较于市场上已有的LLaMA2-70B、Mixtral、Grok-1等开源模型,DBRX在语言理解(MMLU)、程式设计(HumanEval)及数学逻辑(GSM8K)等基准测试上的表现较为突出。官方同时提到,DBRX在上述3项基准测试中也超越了OpenAI的GPT-3.5。

Databricks推出目前最强开源 AI

DatabricksAI部分副总裁NaveenRao向外媒TechCrunch透露,该公司花了两个月及1000万美元的成本来训练DBRX,虽然目前DBRX在整体成绩方面发挥较好,不过目前该模型需要使用4块英伟达H100GPU运行,因此还有待优化空间。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-04-01 18:45:22

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

英伟达H100霸榜权威AI性能测试 11分钟搞定基于GPT-3的大模型训练
...分割、两种负载的物体侦测)、语言(语音识别、大语言模型、自然语言处理)和推荐系统。简单来说,就是由不同的设备供应商提交完成基准任务所需要的时间
2023-06-28 07:00:00
11分钟训完gpt-3,英伟达横扫mlperf8项基准测试
...PT-3的大规模基准测试。MLPerfLLM基准测试是基于OpenAI的GPT-3模型进行的,包含1750亿个参数
2023-06-30 22:24:00
英伟达开源NVLM 1.0屠榜多模态!纯文本性能不降反升
【新智元导读】NVLM 1.0系列多模态大型语言模型在视觉语言任务上达到了与GPT-4o和其他开源模型相媲美的水平,其在纯文本性能甚至超过了LLM骨干模型,特别是在文本数学和编码
2024-09-24 13:36:00
英伟达h100gpu再创多项新纪录
...推出了新的测试项目,专门针对微调(Fine-tuning)大语言模型和图神经网络(GNN),而英伟达H100创下了多项纪录
2024-06-15 03:42:00
PyTorch官宣:告别CUDA,GPU推理迎来Triton加速新时代
...0%的Triton内核Pytorch最近发表了一篇技术博客,他们以两个模型——Llama3-8B和IBM的Granite-8B Code为例
2024-09-07 09:48:00
开源社区分水岭:Meta大模型Llama 3发布,参数最高或达4000亿
为了保持公司在AI(人工智能)开源大模型领域的地位,社交巨头Meta推出了旗下最新开源模型。当地时间4月18日,Meta在官网上宣布公布了旗下最新大模型Llama 3
2024-04-19 15:58:00
苹果开源7B模型,训练过程数据集一口气全给了,网友:很不像苹果
苹果最新杀入开源大模型战场,而且比其他公司更开放。推出7B模型,不仅效果与Llama 3 8B相当,而且一次性开源了全部训练过程和资源
2024-07-23 09:33:00
疯狂一夜!美国AMD、谷歌纷纷亮出大杀器,人类迎来巨变前夜?|钛媒体焦点
...迄今为止功能最强大、最通用的多模态人工智能(AI)大模型:Gemini(中文称“双子座”)。具体来看,谷歌最新发布的Gemini 1
2023-12-07 13:02:00
英伟达h100gpu在mlperf基准测试创造6项新记录
...PT-3的大规模基准测试。MLPerfLLM基准测试是基于OpenAI的GPT-3模型进行的,包含1750亿个参数
2023-11-10 02:18:00
更多关于科技的资讯:
第二届“科创·柳叶湖”合成生物制造创新创业大赛巅峰对决即将开锣!
第二届“科创·柳叶湖”合成生物制造创新创业大赛将于2026年1月15日至17日在湖南常德举行。本届大赛以“合创万物 智引未来”为主题
2026-01-07 17:00:00
高品质鱼油赛道再迎里程碑:新加坡Biowell小金星Plus获TGA认证
在消费者对营养品品质与真实功效日益关注的背景下,国际权威认证成为衡量产品力的重要标尺。近日,新加坡专业营养品牌Biowell迎来关键进展
2026-01-07 17:00:00
编织数据天网 守护卫星星河
——记寰宇卫星技术主管贾淋淋在卫星与地面之间,无形的数据洪流日夜奔涌,构筑起现代航天测控的生命线。而在这条关键通道的背后
2026-01-07 17:00:00
大庆油田采油一厂第九作业区新中310采油班面对油田数字化建设的深入推进,油水井报表管理正经历从传统纸质向智能数字化的关键转型
2026-01-07 17:02:00
二元魂与京东京造深度联动,共建 AI 潮玩全龄陪伴生态
近日,京东京造携手 JoyInside 全新推出4 款 AI 产品,精准覆盖全家不同生活场景的陪伴需求。此次上新阵容中
2026-01-07 17:02:00
美学舒适双在线,ROSE CASTLE 玫瑰城堡|打造能传家的奢侈品级婚鞋
婚礼当天,新娘的足下承载着远超一双鞋的物理重量。它是踏入人生新阶段的仪式感起点,是全天候优雅姿态的基石,也是婚礼记忆中最具象的情感信物之一
2026-01-07 17:02:00
河北新闻网讯(刘富伟)日前,工业和信息化部、国家药品监督管理局联合发布《2025年人工智能医疗器械创新任务揭榜挂帅入围名单》
2026-01-07 16:56:00
人体工学品牌MS官宣2025营收破亿,未来三年剑指十亿目标
12月30日,国内人体工学显示器支架品牌MS在年度工作总结会上宣布:2025年MS营收突破亿元大关,并确立了未来三年营收向十亿迈进的目标
2026-01-07 16:57:00
同样的预算,别买“电子垃圾”!阿尔法蛋词典笔,平价背后的专业与安全
平价词典笔就选阿尔法蛋吗?是的,这是明智之选。 在预算有限时,家长往往面临“廉价山寨”与“高价品牌”的两难。阿尔法蛋词典笔打破了这种困境
2026-01-07 16:58:00
Coosea酷赛智能的下一站:聚焦核心技术,剑指智能硬件百万台增量市场
在全球智能硬件市场持续扩张的浪潮中,酷赛智能科技股份有限公司(以下简称“Coosea酷赛智能”)正以行业引领者之姿,稳步推进其战略布局
2026-01-07 15:10:00
杜蒿坨数字时代,指尖轻点就能完成金融业务,银行网点正在经历“瘦身”。据国家金融监督管理总局金融许可证信息查询系统粗略统计
2026-01-07 15:27:00
从仓库到接驳点,无人配送车上路厦门首次在开放道路上开展自动驾驶配送测试东南网1月7日讯 (海峡导报记者 江小聪) 近日
2026-01-07 15:51:00
王志顺国家税务总局近日通报,2025年前11个月,税务部门共查处1818名包括明星网红在内的“双高”人员,查补税款高达15
2026-01-07 15:57:00
科技赋能健康,倍轻松携AI+中医创新亮相2026 CES,全球化战略再提速
当全球消费科技的目光聚焦于拉斯维加斯威尼斯人会展中心,中国健康科技领军企业倍轻松(股票代码:688793)以全新姿态登陆2026年国际消费电子展(CES)
2026-01-07 16:21:00
百镜大战再添新军 思问AI眼镜如何脱颖而出
2026年1月10日,大湾区深中通道西人工岛,吸引人们的不只是网红打卡地、超级工程,还将有一场人工智能的科技秀:思问AI眼镜
2026-01-07 16:22:00