- 我的订阅
- 科技
我们正处于一个信息大暴发的时代，每天都能产生数以百万计的新闻资讯！
虽然有大数据推荐，但面对海量数据，通过我们的调研发现，在一个小时的时间里，您通常无法真正有效地获取您感兴趣的资讯！
头条新闻资讯订阅，旨在帮助您收集感兴趣的资讯内容，并且在第一时间通知到您。可以有效节约您获取资讯的时间，避免错过一些关键信息。
实测苹果M3 Ultra运行DeepSeek R1满血版：速度超过8卡A100！
快科技3月12日消息，近日，B站UP主“虽然但是张黑黑”分享了一段视频，展示了满血版苹果M3 Ultra运行6710亿参数的DeepSeek R1模型的测试结果，其速度甚至超过了8张A100显卡，而成本却低得多。
运行6710亿参数的DeepSeek R1模型通常需要一台搭载6-8张A100的专业级服务器，总价轻松超过百万元这对于普通用户来说几乎是不可能负担的。
然而满血版M3 Ultra仅需一台Mac Studio即可实现类似性能，性价比极高。
测试结果显示，在运行DeepSeek R1模型时，8张A100显卡的性能为16.41 Tokens/s，而满血版M3 Ultra在GGUF格式下达到15.78 Tokens/s，
切换到能发挥统一内存优势的MLX格式后，速度提升至19.17 Tokens/s，超越8张A100显卡，此外M3 Ultra在运行DeepSeek V3 6710亿参数模型时，速度也达到了19.66 Tokens/s。
不过这并不意味着M3 Ultra在所有场景下都能超越A100，单用户进行单一模型推理时，主要依赖内存带宽和容量，无法完全发挥A100的潜力，在多用户推理和大模型训练场景下，M3 Ultra则完全无法与A100相提并论。
此外，M3 Ultra在大语言模型推理速度测试中表现优异，无论是Llama 3.1 70B、Gemma2 27B还是Qwen 2.5 14B模型，其速度都明显优于其他M系列芯片，与M2 Ultra相比，速度分别提升了13%、34%和18%。
此次测试的满血版M3 Ultra配备了512GB统一内存，总价为74249人民币，对于大多数用户来说，如果不需要运行如此大规模的模型，可以适当降低统一内存容量，从而节省成本。
【本文结束】如需转载请务必注明出处：快科技
责任编辑：黑白
文章内容举报
以上内容为资讯信息快照，由td.fyun.cc爬虫进行采集并收录，本站未对信息做任何修改，信息内容不代表本站立场。
快照生成时间：2025-03-12 20:45:09
本站信息快照查询为非营利公共服务，如有侵权请联系我们进行删除。
信息原文地址：
