4月29日消息,消息下月据国内媒体报道称,发成深度求索可能会在下个月有所行动,本较推出下一代AI大模型DeepSeek-R2。消息下月 报道称,发成DeepSeek-R2大模型将会采用一种更先进的本较混合专家模型(MoE),其结合了更加智能的消息下月门控网络层(Gating Network)以优化高负载推理任务的性能。 有分析师预计,发成DeepSeek-R2的本较定价可能显著低于OpenAI同类产品,预示着其可能颠覆现有AI服务的消息下月定价模式。 此外,发成还有相关消息显示,本较DeepSeek-R2预计比GPT-4成本下降97%;并且是消息下月在昇腾卡上做的训练,主打一个全方位全产业链的发成自主可控。 据相关人士透露的本较情况,DeepSeek-R2的总参数量可能会达到1.2万亿,比DeepSeek-R1的6710亿参数增加大约一倍。 DeepSeek-R2是一款基于华为昇腾910B(Ascend 910B)芯片集群训练的模型,在FP16精度下达到512PetaFLOPS的计算能力,芯片使用效率为82%。 据华为实验室统计,这个性能相当于英伟达上一代A100训练集群的91%左右。至于这些是不是真实的,还有待观察,但看起来确实更强大、更自主了。 |
Flinks
Links