记忆体杀手?新技术让多头丢盔弃甲
(彭博社资料照片)
TurboQuant的效率提升真正威胁是NAND快闪记忆体
分析师也很快意识到,并非所有记忆体市场领域都同样感到恐慌,TurboQuant的效率提升仅限于推论和键值快取,这代表真正的威胁来自NAND快闪记忆体,而非高频宽记忆体(HBM)。
HBM是辉达AI加速器的核心零件,也为微软(Microsoft)、Meta等公司的训练基础设施提供动力。彭博产业研究分析师希尔佛曼(Jake Silverman)撰文指出,由于需要将模型权重储存在GPU记忆体中,HBM的需求以及美光生产的DRAM需求可能不会受到影响,NAND的需求将面临更深远的长期影响。
大摩分析师表示,TurboQuant透过减少记忆体使用和数据传出,明显提升了推论效率,但他并没有降低对HBM等核心记忆体的需求。
韩媒也认为,该国两大记忆体厂商三星电子Samsung Electronics)和SK海力士(SK Hynix)预计将受惠于TurboQuant技术商业化。三星证券研究员表示,如果采用TurboQuant演算法,可以降低推论成本,需求将爆炸性成长。
[物价飞涨的时候 这样省钱购物很爽]
无评论不新闻,发表一下您的意见吧
TurboQuant的效率提升真正威胁是NAND快闪记忆体
分析师也很快意识到,并非所有记忆体市场领域都同样感到恐慌,TurboQuant的效率提升仅限于推论和键值快取,这代表真正的威胁来自NAND快闪记忆体,而非高频宽记忆体(HBM)。
HBM是辉达AI加速器的核心零件,也为微软(Microsoft)、Meta等公司的训练基础设施提供动力。彭博产业研究分析师希尔佛曼(Jake Silverman)撰文指出,由于需要将模型权重储存在GPU记忆体中,HBM的需求以及美光生产的DRAM需求可能不会受到影响,NAND的需求将面临更深远的长期影响。
大摩分析师表示,TurboQuant透过减少记忆体使用和数据传出,明显提升了推论效率,但他并没有降低对HBM等核心记忆体的需求。
韩媒也认为,该国两大记忆体厂商三星电子Samsung Electronics)和SK海力士(SK Hynix)预计将受惠于TurboQuant技术商业化。三星证券研究员表示,如果采用TurboQuant演算法,可以降低推论成本,需求将爆炸性成长。
[物价飞涨的时候 这样省钱购物很爽]
| 分享: |
| 注: | 在此页阅读全文 |
| 延伸阅读 |
推荐:



