- 我的订阅
- 科技
我们正处于一个信息大暴发的时代，每天都能产生数以百万计的新闻资讯！
虽然有大数据推荐，但面对海量数据，通过我们的调研发现，在一个小时的时间里，您通常无法真正有效地获取您感兴趣的资讯！
头条新闻资讯订阅，旨在帮助您收集感兴趣的资讯内容，并且在第一时间通知到您。可以有效节约您获取资讯的时间，避免错过一些关键信息。
mistralai公司推出mixtral8x22b开源模型
类别：科技 发布时间：2024-04-12 01:34:00 来源：浅语科技
4月11日消息，MistralAI公司近日推出了Mixtral8x22B开源模型，共有1760亿个参数，Context长度（上下文文本）为6.5万个token，可以通过Torrent下载。
MistralAI公司自成立以来一直备受外界关注，“6人团队，7页PPT，8亿融资”不断缔造传奇，而且在得到微软的投资之后更是进入发展快车道。
该公司今天发布的Mixtral8x22B开源模型是个开源模型，官方目前放出了Torrent种子链接，文件大小为281GB。用户可以通过磁性链接直接下载，或者通过HuggingFace和PerplexityAILabs平台进行下载。IT之家附上相关截图如下：
Mixtral8x22B共有1760亿个参数，Context长度（上下文文本）为6.5万个token，不过为单一任务可以调用部分模型（440亿参数），因此使用起来更加灵活。
以上内容为资讯信息快照，由td.fyun.cc爬虫进行采集并收录，本站未对信息做任何修改，信息内容不代表本站立场。
快照生成时间：2024-04-12 09:45:13
本站信息快照查询为非营利公共服务，如有侵权请联系我们进行删除。
信息原文地址：
更多关于模型,公司,模型,上下文,参数,公司的资讯：
...个共享的表示形式，进而在模型中实现统一的时序对齐和上下文理解，这种编码方法，让模型能够更好地整合和理解不同类型的输入
2023-10-10 11:51:00
...ama 3已经开放了80亿（8B）和700亿（70B）两个小参数版本，上下文窗口为8k。Meta表示，通过使用更高质量的训练数据和指令微调
2024-04-19 15:58:00
...next-tokenprediction）进行训练，这种架构在生成文本和理解上下文方面表现出色。与其他同类开源模型相比
2024-11-09 00:21:00
...的的预训练模型也将开源模型窗口进行扩展，开放了4K的上下文窗口。当前，已有的开源模型窗口长度在2K以内——对一些长文本建模任务，以往模型的处理效果可能会有所制约。在需要引入外
2023-06-15 16:53:00
...言模型）和中文大模型榜单C-Eval排行榜已经爬升到1位。上下文窗口，意味着模型的“记忆力”。据介绍，Yi目前拥有200K上下文窗口，可处理约40万字的文本——这也是目前全球
2023-11-06 12:13:00
...正式宣布，旗下的Kimi智能助手，已支持200万字超长无损上下文，并于即日起开启产品内测。Kimi智能助手是月之暗面（Moonshot AI）基于自研千亿参数大模型打造的对话式 AI 助手产品
2024-03-21 12:36:00
...开发者大会上推出了0.0035美元/千tokens的Gemini Pro1.5，并将上下文长度拓展至200万tokens
2024-05-24 13:40:00
谷歌大改Transformer，“无限”长度上下文来了。现在，1B大模型上下文长度可扩展到1M（100万token，大约相当于10部小说）
2024-04-14 02:57:00
...答、对话、写作、翻译等功能，后者则可以完成处理200K上下文、多文档阅读理解，以及超长知识库构建等任务。
今年3月6日，零一万物官微宣布开源Yi-9B模型。据介绍，Yi-9
2024-05-07 18:33:00
更多关于科技的资讯：
近日，中北高新区企业天成半导体继12英寸双突破后，依托自主研发设备成功研制出14英寸碳化硅单晶材料，有效厚度达30毫米
2026-03-29 07:36:00
3月27日，在澳门特别行政区政府旅游局官方支持下，由高德与澳门通主办、金沙中国协办的“烟火城市发布会·澳门站”在澳门伦敦人举行
2026-03-29 01:16:00
荆楚网（湖北日报网）讯（记者唐天琪 通讯员郜峰）3月25日，武汉设计工程学院教师、“WEILEI未耒”品牌主理人包蕾携“等风来”2026秋冬高级成衣系列亮相中国国际时装周
2026-03-28 17:26:00
鲁网3月28日讯近日，泰安九识无人车品牌战略发布暨全市合伙人招募大会成功举办，各界嘉宾齐聚一堂，共同见证九识开启“全行业覆盖”的战略里程碑
2026-03-28 17:16:00
大皖新闻讯 3月27日，讯飞医疗（02506.HK）发布2025年度业绩报告，在“人工智能+医疗”行业黄金发展周期，讯飞医疗实现业绩高质量稳健增长
2026-03-28 17:04:00
中国青年报客户端讯（中青报·中青网记者尹希宁）近日，北京市门头沟区京西剧谷首家OPC（一人公司）落地。据了解，门头沟区近年来坚定实施“生态立区
2026-03-28 16:57:00
c3c7e07a5ef6985223a972e0e8fba82e东南网3月28日报道（记者 洪振威 林先昌）作为中国智慧高速与交通信息化领域规模最大
2026-03-28 14:53:00
中新网北京3月27日电 近日，亚朵酒店的中文楼层标识引发热议。餐厅名曰“相招”，洗衣房写作“出尘”，健身房唤作“汗出”……这些取自古典诗文的雅致命名
2026-03-28 14:57:00
中新经纬3月28日电 (谢婧雯 周奕航)“当理科生指挥AI打车时，他会说‘打快车回酒店’，但文科生会说‘打个能快速接上我的车
2026-03-28 16:50:00
鲁网3月27日讯春和景明，蓉城聚首。3月26日，第114届全国糖酒商品交易会在四川成都拉开帷幕，城发集团（青岛）旅游发展有限公司携青岛精酿矩阵——“新啤士”“天香怡然”“今牡丹”三大品牌牡丹啤酒参展
2026-03-28 08:24:00
鲁网3月27日讯近日，山东移动高唐分公司与山东时风（集团）有限责任公司达成深度合作，为其提供31部中国移动“和对讲”终端及配套调度管理平台
2026-03-28 10:08:00
3月17日，阅文集团（股票代码：00772.HK）发布2025年全年财报。数据显示，2025年阅文实现营业收入73.7亿元
2026-03-28 10:10:00
提到医院的战略决策，不少人会想到高大上的规划、动辄千万的投入，或是引进顶尖设备、招聘知名专家；而提到单病种分析，却觉得它只是病案室里枯燥的数据统计
2026-03-28 05:20:00