资讯
天价内存把大厂逼成垃圾佬!拆退役服务器抠DDR4用
📋总体概括
快科技9月3日报道,谷歌供应链基础设施高级总监Nikhil Cherian透露,AI行业已从算力受限转向内存受限,高性能内存约占单台AI服务器物料成本75%。为突破瓶颈,谷歌硬件上建立内部回收供应链,拆解退役服务器回收DDR4模组,并设计转接器让新AI服务器降级使用旧内存;软件上则优化函数库、模型架构和KV Cache压缩,并推出TPU8t/TPU8i两款自研芯片缓解内存压力。
⚡关键信息
- ▸谷歌高管称AI行业已从算力受限转向内存受限,高性能内存约占单台AI服务器物料成本的75%。
- ▸谷歌建立内部回收供应链,专门重新导入退役服务器,拆取其中的DDR4内存模组循环使用。
- ▸谷歌设计了硬件转接器,使本应使用DDR5的新一代AI服务器在部分情况下降级使用回收的DDR4。
- ▸软件端谷歌持续优化底层函数库、模型架构和KV Cache压缩技术,降低单位算力内存消耗。
- ▸谷歌今年推出TPU8t(训练)和TPU8i(推理),后者单芯片配288GB HBM3e、8.6TB/s带宽及384MB片上SRAM。
🔥犀利点评
连谷歌都要拆旧服务器抠内存条,这比任何涨价公告都更能说明DRAM短缺的疯狂程度。内存成本吃掉服务器75%的物料预算,AI军备竞赛的瓶颈已从GPU转移到HBM和DRAM,三星、SK海力士、美光的议价权达到历史顶峰。用转接器降级DDR4是典型的饮鸩止渴,侧面证明需求远超供给,扩产周期跟不上。短期内内存价格没有回头的理由。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 驱动之家 阅读全文 →