芯片设计
英伟达高管称Groq机架已全面量产 AI推理“低延迟”大战升温
📋总体概括
英伟达宣布Groq 3 LPX机架全面量产,将与Vera CPU和Rubin GPU一同部署于Nebius数据中心,年内上线。该技术源自去年200亿美元对Groq的收购授权。Groq架构集成500MB SRAM降低内存瓶颈,单机架整合256颗芯片,每秒可处理3400个token,瞄准低延迟AI推理市场,与AMD等展开竞争。
⚡关键信息
- ▸Groq 3 LPX机架全面量产,将部署于Nebius数据中心年内上线
- ▸源于200亿美元收购授权,单机架256颗芯片、每秒处理3400个token
- ▸低延迟推理成AI竞争焦点,可支撑高溢价token服务套餐
🔥犀利点评
200亿美元买来的不只是芯片,更是英伟达对推理时代的焦虑。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 财联社深度 阅读全文 →