【CNMO 科技消息】CNMO 注意到,在最新一期的 SuperCLUE 中文大模型通用基准测评中,华为盘古 718B 模型获得开源第二的好成绩。
CNMO 获悉,此次测评通过数学推理、科学推理、代码生成、智能体 Agent、幻觉控制、精确指令遵循六个维度进行核心能力评估,共计 1260 道题目,全面检验大模型的综合实力。综合开源、国产两个维度来看,前三名依次为:DeepSeek-V3.1-Terminus-Thinking、openPangu-Ultra-MoE-718B 和 Qwen3-235B-A22B-Thinking-2507。其中,拥有 7180 亿参数体量的华为盘古 718B 模型,并未依靠简单的数据堆砌,而是凭借独特的 " 思考 " 能力脱颖而出。
在质量优先方面,团队构建指令数据质量评估体系,结合规则、模型和人工三重审核机制,有效清理低质量样本;多样性覆盖上,从领域和任务类型两个维度进行设计,运用去重和压缩选样算法,保证数据覆盖广度且避免冗余;复杂度适配环节,通过推理步骤、概念抽象度、计算复杂度等指标量化任务难度,并利用自迭代拒绝采样策略,重点训练中高难度任务。这种对数据质量的严格把控,成为了提升模型在复杂场景下推理能力的关键因素之一。