与非网 · 半导体与工程·· 1 天前AI 评分75
2026 AI芯片微架构演进:从峰值算力转向有效算力
跨越屋顶线:2026 AI芯片微架构的演进逻辑
AI 导读
2026年10月SemiAnalysis对八款AI加速卡的实测显示,华为昇腾950PR中位算力利用率达86.0%排名第一,英伟达H100为75.5%、B200为65.4%、AMD MI355X为51.9%。文章以屋顶线模型解释大模型解码阶段受显存带宽限制,并指出智谱GLM-5将查询头从128降至64、计算密度降至120.8以贴合中国芯片122至150的拐点区间,单卡推理吞吐提升约一倍。
深度导读
2026年10月,SemiAnalysis针对八款主流AI加速卡、1,055种开源大模型常见矩阵运算的实测显示,华为昇腾950PR中位算力利用率达86.0%排名第一,英伟达H100为75.5%、B200为65.4%、AMD MI355X为51.9%。文章强调这是利用率而非性能排名,昇腾950PR绝对算力位于A100与MI300X之间,与H100、B300仍有差距;其利用率高部分源于英伟达和AMD旗舰卡满载时触及功耗上限降频,也源于昇腾矩阵核的多级片上缓冲设计。
文章用屋顶线模型解释瓶颈来源:峰值算力除以显存带宽得到拐点,预填充阶段计算受限,解码阶段每次只生成一个词却要重读全部权重和历史缓存,瓶颈落在带宽。DeepSeek的MLA架构通过压缩历史缓存把解码计算密度提高十倍以上,计算密度主要由查询头数量决定。DeepSeek-V3和R1每层128个查询头,计算密度241.8,与H800拐点258.2接近对齐。
受先进制程限制,2026年国内主力芯片拐点集中在122至150之间,包括天数智芯天垓122.5、华为昇腾950DT 125.0、摩尔线程S4000 130.2、沐曦曦云C600 138.9、海光深算三号140.0、百度昆仑芯P800 143.8、壁仞BR20X 150.0,比H800低近一半。智谱在GLM-5和GLM-5.3中把查询头从128减到64,计算密度降至120.8,落入中国芯片拐点区间,硬件不变下单卡推理吞吐提升约一倍。
第二道瓶颈出现在芯片内部:FP8、FP4等低精度格式普及后矩阵单元速度翻倍,向量单元和片上缓存未同步。Blackwell上矩阵单元与指数运算单元吞吐差距达1024倍,运行DeepSeek-V3时FP8实际利用率仅20%至37%。英伟达在芯片内将Rubin指数运算单元吞吐提升至4倍,芯片外斥资200亿美元收购Groq,用纯片上SRAM芯片组成机柜负责解码。
华为与DeepSeek选择在单颗芯片内部消化瓶颈:昇腾950将相关片上缓存扩至256KB并打通矩阵单元到向量单元直连通道,DeepSeek修改FlashMLA把计算放在向量单元完成;将缓存数值与缩放系数合并为连续记录使搬运次数减半;把昇腾后端合并进TileLang主干,单算子耗时从17.42微秒降至10.52微秒,提速40%。32颗昇腾950DT运行DeepSeek-V4.1-Flash结合投机解码,每生成一个词平均延迟4.33毫秒。昆仑芯P800、沐曦C600、天数智芯天垓300也各有减少数据搬运的尝试。
市场层面,2026年国内本土AI芯片供应量预计翻倍至约350万颗,上半年非GPU加速器出货量首次超过GPU;华为在国内加速卡市场份额接近三成,华为、阿里平头哥与寒武纪三家合计占非GPU市场95%份额,海光、沐曦、燧原、昆仑芯、壁仞、摩尔线程、天数智芯等已在运营商和互联网集群批量交付。
来源:与非网 · 半导体与工程 · eefocus.com