• 我的订阅
  • 科技

全球首款Transformer专用AI芯片Sohu发布:比英伟达H100快20倍

类别:科技 发布时间:2024-06-26 15:37:00 来源:浅语科技

快科技6月26日消息,据媒体报道,美国新兴的芯片创业公司Etched发布其首款AI芯片——Sohu。

这款芯片在运行大型模型时展现出了惊人的性能,其速度超越了行业巨头英伟达的H100高达20倍,即便是与今年3月才面世的顶尖芯片B200相比,Sohu也展现出超过10倍的优越性能。

Sohu芯片的最大突破在于它直接将Transformer架构嵌入芯片内部。据Etched公司负责人Uberti透露,Sohu采用了台积电的先进4纳米工艺制造,不仅在推理性能上远超GPU和其他通用人工智能芯片,更在能耗控制上达到了新的高度。

全球首款Transformer专用AI芯片Sohu发布:比英伟达H100快20倍

对于Transformer技术而言,Sohu无疑是目前市场上最快的芯片,其性能与其他产品之间存在显著的量级差异。值得一提的是,当前主流的AI产品如ChatGPT、Claude、Gemini和Sora等,均基于Transformer架构驱动。

作为世界上首款Transformer ASIC(应用型专用集成电路)芯片,Sohu的集成应用更是令人瞩目。据测试,一台配备8块Sohu芯片的服务器,其性能足以媲美160块H100 GPU的集群。

具体而言,集成8块Sohu芯片的服务器每秒能够处理高达50万的Llama 7B tokens,这一数据在业界堪称前所未有。

而打造这款杰出芯片的Etched公司,位于美国加州的库比蒂诺,尽管成立仅两年,团队规模也仅有35人,但其创始人——哈佛辍学生Gavin Uberti(前OctoML和前Xnor.ai员工)和Chris Zhu,与资深技术专家Robert Wachen和前赛普拉斯半导体公司首席技术官Mark Ross共同领导,已经成功研发出这款专为大模型AI设计的芯片,展现了其强大的技术实力和无限潜力。

全球首款Transformer专用AI芯片Sohu发布:比英伟达H100快20倍

【本文结束】如需转载请务必注明出处:快科技

责任编辑:鹿角

文章内容举报

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-06-26 18:45:02

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

ChatGPT掀AI热潮 这些芯片厂商将“狂飙”
...芯片的需求将暴增,给低迷的半导体行业带来一股暖流,英伟达、三星电子、SK海力士等都将受益。但是英伟达服务器用AI芯片方案存在发热和功耗过大的问题,谷歌、亚马逊AWS、三星电子
2023-02-14 14:00:00
官方确认:领克900将全球首搭英伟达Thor自动驾驶芯片
...产品信息:在今年第二季度,领克900将作为全球首款搭载英伟达Thor芯片的量产车型正式上市,同时搭载自研浩瀚智驾,此外
2025-02-14 19:22:00
实力“媲美”英伟达,壁仞科技最快年内赴港IPO
...点算力达到2000T以上,单芯片峰值算力达到PFLOPS级别,是英伟达A100的3倍,甚至还能对标H100。BR100的正式发布
2023-07-20 18:13:00
收入占比40%、电话会议点名16次,英伟达:推理端的需求被低估了
昨天凌晨,英伟达发布了2024财年第四季度财报,业绩再次超出预期。但比起亮眼的业绩,更让人印象深刻的是,英伟达在财报电话会议的一个观点:推理端的爆发,可能很多人还是低估了。据英伟
2024-03-02 13:38:00
博通股价两天涨超35%:看好定制化AI芯片需求,会撼动英伟达地位吗
博通(Broadcom)成为继英伟达和台积电之后全球第三家市值超过一万亿美元的半导体巨头,有望对英伟达霸主地位产生冲击
2024-12-17 18:11:00
英伟达特供芯片遇冷:阿里、腾讯不想要降级版,转向本土供应商【附人工智能芯片行业趋势预测】
(图片来源:摄图网)美国在2023年10月发布新规阻止英伟达向中国出售尖端人工智能芯片,英伟达并没有束手就擒,而是迅速为中国开发了特供芯片,以满足中国市场的需求。然而,据《华尔街
2024-01-08 11:51:00
英伟达深度布局+大模型全面赋能!自动驾驶芯片迎爆发期,受益上市公司梳理
...启“主驾位无安全员”的自动驾驶无人化测试。国际巨头英伟达在自动驾驶领域布局已久,拥有从算法到底层软件中间件再到芯片的全栈解决方案
2023-06-04 10:00:00
00后华裔小哥哈佛辍学组团挑战英伟达,史上最快AI芯片Sohu推理性能超H100二十倍!
...d又宣布了炸裂的新消息:已筹到1.2亿美元。 就在上周,英伟达的市值达到3.3万亿美元,超过微软成为全球第一。而Etched相信,自己的35人团队能够击败英伟达。他们的豪放
2024-06-27 09:25:00
GPU受限,国内AI大模型能否交出自己的答卷?
...的算力资源,GPU是大模型的最佳算力发动机。截至目前,英伟达的GPU芯片正在为全球绝大多数的人工智能系统提供最基础的算力支持。那么,在GPU受限的情况下,国内AI行业发展境况
2023-04-14 18:02:00
更多关于科技的资讯: