近日，由国家电网有限公司输变配现场运维人工智能应用技术实验室自主研发的人工智能算法模型评测平台完成升级。该平台可对电力场景下人工智能模型进行全流程自动化评测。本次新增的大模型评测模块，为公司人工智能模型的性能评价、选型应用及安全准入提供了技术支撑。

人工智能算法模型评测平台由数据管理、评测管理、报告管理等模块组成，评测范围覆盖传统目标检测模型及大模型。升级后，模型封装所需的访问路径、端口号、启动命令等参数由固定配置改为可显示配置，无需因单个参数不符重新打包，评测报告由人工编制、线下流转改为自动生成、线上审批流转。同时，新升级的大模型评测模块也实现了全流程自动化运行，降低了人工干预带来的偏差风险，评测全过程透明可查，保障了结果可信度。

据了解，输变配现场运维人工智能应用技术实验室由国网福建省电力有限公司承建。在该公司电力科技部、数字化部、设备部的指导下，该实验室前期牵头制定了公司企业标准《人工智能模型评价导则》，并基于这一标准自主研发了人工智能算法模型评测平台，具备模型功能性、鲁棒性、推理效率等多维度综合评测能力。该平台可定期对变电智能巡检场景下模型的发现率、精确率等核心指标进行自动评测，并辅助研发人员开展模型定向优化训练。该平台评测结果为工作人员提供了模型选型参考依据。