从“算算力”到“核Token”——中国信通院面向算力集群Token评价系列标准第二次研讨会召开
《基于Token计量的算力能力评价指标体系》系列行业标准研讨会于6月4日在北京顺利召开。来自华为、海光、寒武纪、壁仞科技、燧弘华创、联想、烽火通信、未来网络、中国电力、有电能源科技、移动研究院、移动设计院、咪咕、电信数智、蓝耘科技、仪电智算、软通智算、无锡数字、北京易威科技、九章云极、阶跃星辰、易点天下、钛动科技、中国信通院等20+单位的多位专家参与本次研讨会。

会议围绕面向算力集群的Token全维度评价系列标准体系编制工作开展专题研讨。
与会专家结合大模型技术迭代与算力集群测评科研需求形成共识,当前算力集群性能研判已从硬件峰值参数核验,转向以有效Token产出为核心、技术指标与综合保障统筹考量的系统化量化研究阶段。研讨厘清体系研究总体思路:整套标准以文本推理为主干研究方向,循序渐进向代码生成、多模态拓展研究、经济性测算研究、配套支撑能力研究延伸布局,整体划分为硬性技术、经济性、配套能力三项评价分册,形成分层递进、覆盖全维度的标准化评价架构。

体系遵循文本推理主干标准→专项场景扩展标准→经济性评价标准→配套能力评价标准的建设逻辑:
一是以硬性技术评价为基础,先行落地《基于Token计量的算力能力评价指标体系研究(文本推理场景)》主干标准,锚定文本推理基础算力效能评价;在此之上延伸拆分代码生成、多模态两大专项场景评价规范,分别制定对应Token能效评价方法,补齐细分技术场景量化评价依据,完成技术维度全场景标准搭建。
二是依托经济性评价分册,编制《面向算力集群的Token产出经济性评价指标》,从单位Token投入产出、细分业务收益、全链路成本分摊核算层面,建立市场化、可量化的经济测算准则,补齐算力投入效益评价维度。
三是完善配套能力软性评价分册,出台《面向算力集群的Token配套能力评价方法》,围绕场景适配、平台运营治理、运维管控全流程软性能力设置评价规则,形成技术、效益、运维三位一体的完整评价闭环。
整套系列标准统筹算力技术性能、投入经济效益、平台配套保障三类核心要素,可为各类智算集群、大模型推理平台开展算力测评、项目选型、成本管控、平台验收等工作提供系统化规范依据。
下一步,为持续深化面向算力集群的Token评价系列标准体系研究、打磨完善全系列标准文稿,中国信通院拟在7月CCSA TC1 WG4工作组相关会议组织专题研讨工作。
现诚挚邀约芯片研发、整机制造、智算平台、大模型研发、高校科研院所等全链条相关单位持续深度参与系列标准研究编制工作,共同研讨完善硬性技术、经济性、配套能力三类分册内容,围绕文本推理、代码生成、多模态等细分场景评价细则建言献策。
中国信通院将联合各参会单位接续优化整套评价体系,稳步推进标准研究落地,为算力集群评测体系规范化建设、大模型算力相关技术研究攻关提供规范支撑。
联系人:
阮老师 18519220329 ruandi@caict.ac.cn
何老师 17801778925 hexudong@caict.ac.cn
吴老师 18810669396 wumeixi@caict.ac.cn


