DeepSeek V3.1 发布,更令人好奇的是UE8M0 FP8
作者 | 董道力邮箱 | dongdaoli@pingwest.com
DeepSeek 推出了 V3.1 版本,简单过一下亮点:混合推理架构:一个模型同时支持思考模式与非思考模式。更高的思考效率:相比 DeepSeek-R1-0528,DeepSeek-V3.1-Think 能在更短时间内给出答案。更强的 Agent 能力:通过 Post-Training 优化,新模型在工具使用与智能体任务中的表现有较大提升。
但更让人好奇的是,DeepSeek 还在置顶留言里强调:UE8M0 FP8是针对即将发布的下一代国产芯片设计。
这句话放在当下的语境里,就显得耐人寻味——毕竟不久前,相关部门才约谈英伟达,要求解释 H20 芯片的安全风险。
也正因如此,几个技术性的名词才变得格外值得关注:参数精度到底是什么?为什么芯片会决定它的形式?
这些改动背后,或许预示着国内 AI 行业正在进入一个软硬件协同的新阶段。
1
看不见的小数点,决定了大模型的命运
在深度学习里,参数就是模型的大脑神经元之间的“权重”,训练时需要不断更新、存储、计算。精度(precision)就是用多少位二进制数来记录这些参数。
在介绍 FP8 之前,先得回到计算机最基本的问题:机器是怎么存数字的?
最简单的方式叫整数(int)。它就像算盘上的珠子,能表示的是一个个精确的格子:1、2、3、4。但整数没法表示 3.14 这样的圆周率,也很难处理科学计算中常见的极大值或极小值。
于是,科学家们发明了浮点数(floating point),也就是 FP8 中的 FP。顾名思义,小数点的位置是“浮动”的,既能写成 3.14159 这样的日常数字,也能写成 6.02×10²³ 这样天文级的指数。浮点数本质上就是把一个数字拆成三部分:符号位、指数、尾数。符号位决定正负,指数决定小数点的位置,尾数决定精度。
浮点数基本可以表示任何数字,代价是,同样的内存位数,用得越多,表示得越精确;用得越少,表示得越粗糙。
在很长一段时间里,FP32(32 位浮点数)是计算机的黄金标准,它精度高,范围广,几乎是科学计算、图像处理、AI 的通用方式。但当大模型的参数量级膨胀到数千亿甚至万亿,FP32 就显得臃肿了。每一条权重都要用 32 位去存,显存根本不够用,训练时间也被拖长。
于是,行业开始尝试降低精度。先是 FP16(16 位浮点数),后来是 FP8(8 位浮点数)。举个不恰当例子,就像把一张 4K 高清照片压缩成 480p 的小图,细节损失在所难免,但能存更多张,还能传输得更快。
用英伟达技术博客里的一张图可以直观的看出来,同样用 H100,FP8 的速度远远高于 FP16。
训练大模型时,最大的瓶颈不是算法,而是算力和显存。NVIDIA 官方博客指出,FP8 在不显著牺牲模型效果的前提下,能让吞吐量翻倍、显存占用减半,这是训练 GPT 级别大模型时极具吸引力的优势。
换句话说,在大模型这种追求“规模胜过精度”的赛道上,FP8 成了必然选择。
延伸阅读:
阿里国际站B2B中小企业峰会在美国开幕,AI成了关注焦点
9月5日,阿里国际站在美国举办全球最大的B2B中小企业峰会CoCreate2025。当天,全球有近800万中小企业观看了...
奢侈品虚假抢购、AI专家虚假宣传……一批直播电商违法违规案例公布
消费者在直播间付款成功的奢侈品包,被告知未抢拍成功,原来是公司采用虚假抢购方式进行虚假营销;采用AI虚拟数字人技术生成老...
10.88亿美元!恒瑞医药再次“NewCo”出海
9月5日,恒瑞医药宣布与美国Braveheart Bio公司就其自主研发的心肌肌球蛋白(Myosin)小分子抑制剂HRS...
NAND 原厂闪迪 Sandisk 针对全部渠道通路和消费类产品涨价 10%
IT之家 9 月 5 日消息,综合 CFM 中国闪存市场和《电子时报》两方报道,NAND 闪存原厂之一的闪迪 Sandi...
吉利银河星耀 6 内饰图公布,今晚全球首秀
IT之家 9 月 5 日消息,吉利银河星耀 6 将于今晚迎来全球首秀,官方现已公布这款电混家轿的内饰图。从图上可以看到,...