数码之家

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 32|回复: 0

[业界] AMD携手Cerebras押注低时延AI推理:每瓦每秒Token吞吐提升5倍

[复制链接]
发表于 3 小时前 | 显示全部楼层 |阅读模式

爱科技、爱创意、爱折腾、爱极致,我们都是技术控

您需要 登录 才可以下载或查看,没有账号?立即注册

x
IT之家 7 月 24 日消息,科技媒体 Wccftech 今天(7 月 24 日)发布博文,报道称在 Advancing AI 2026 活动中,AMD 宣布携手 Cerebras 公司,联合开发 AI 推理解决方案。
根据官方新闻稿,该方案主要针对超低延迟 AI 推理场景,将整合 AMD 的 Helios 机架级解决方案与 Cerebras 的晶圆级引擎,从而应对英伟达和 Groq 合作。
按照双方披露的路线,Helios 机架承担高性能、可扩展吞吐引擎角色,主要处理提示词与大上下文窗口。
Cerebras 的 Wafer-Scale Engine 则负责对内存带宽要求更高的 Token 生成与解码环节,强调超低时延表现,结合使用 2 个计算引擎,预估可以将每瓦每秒 token 数量提高 5 倍。IT之家附上相关截图如下:
Cerebras 介绍称,Wafer-Scale Engine 在单块互连硅片上无缝连接数十万个计算核心和数十 GB 的 SRAM,减少外部网络瓶颈对数据传输的影响。





您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|数码之家-技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2026-7-24 18:52 , Processed in 0.093600 second(s), 6 queries , Gzip On, Redis On.

Powered by Discuz!

© MyDigit.Net Since 2006

快速回复 返回顶部 返回列表