PERFORMANCE CRITERIA

以项目指标核对测试数据

以下为验收目标,非实测结果
主流模型适配与动态部署
≥50类
分类去重后,逐类验证部署与调用
模型参数量下降
≥50%
以实际参数总数统计,非文件大小
模型性能损耗
≤10%
与参数量指标对同一模型联合判定
有效多模态数据样本
≥1,000万
有效内容、唯一标识与持久化存储

性能测试方法

查看统计口径与计算公式

参数量下降率 =(原模型参数量 − 压缩模型参数量)÷ 原模型参数量 × 100%。降低位宽、文件大小或显存占用不等于参数量下降。

越高越好的性能指标:损耗率 = max(0,(原模型得分 − 压缩模型得分)÷ 原模型得分) × 100%。越低越好的指标反向计算差值;基线必须为正数。

同一模型配对须同时满足参数量下降率 ≥50% 和性能损耗率 ≤10%。计算使用未四舍五入的值进行判断,不得拼接不同配置的结果。

“主流模型”和“类”的划分须测试前确认。样本计数排除空内容、副本及重复导入;需另行验证多模态覆盖、持久化和实际管理能力。页面输入总量不能替代这些证据。