选第三方软件评测机构,最容易踩的坑不是没资质,而是有资质,但资质范围不包括你要测的东西。一份盖了CMA章的报告,如果机构的能力附表里没有对应标准或测试类型,在验收或招投标步骤照样可能被认定为无效。
标准一:资质范围是不是包括测试需求
登录全国认证认可信息公共服务平台(cx.cnca.cn),确定证书状态为有效,而不是暂停或撤销;
要求机构提供 《能力范围附表》 ,逐项核对要测的标准号(如GB/T 25000.51-2016)和检测对象(如就绪可用软件产品)是不是被确定列出;
如果机构只说能做GB/T 25000.51却拿不出附表中对应的标准编号,直接否决-它的资质可能在其他领域,不在你的软件上。
政府项目、司法举证、招投标场景,优先选择CMA加CNAS双资质。CMA赋予国内法律效力,CNAS体现国际互认的技术能力;如果招标文件写CMA或CNAS均可,选CNAS合规且被广泛采纳。
标准二:测试团队是不是持证
测试人员是不是持有软件评测师(人社部/工信部软考中级)或 ISTQB 等专业认证;
从业年限检查避免由经验不足的人员主导性能、安全等专项测试;
安全测试要确定机构是不是配备人工渗透测试团队,而不是仅靠自动化扫描工具扫一遍;
性能测试用的是 LoadRunner 还是仅 JMeter,往往反映测试数据的专业深度。
标准三:测试依据是不是为现行有效的国家标准
测试依据直接决定报告是否可采纳。正规机构根据GB/T 25000.51等现行国家标准,设计正向用例加反向用例,包括正常流程和异常输入;不规范的机构只测功能能不能跑通,几天就出报告,内容空洞。
要求机构在方案中写明所根据的标准全称和编号,核对是不是为现行有效版本(如GB/T 25000.51-2016),排除已废止标准或机构自编的内部规范;
警惕隔天出报告:一份严谨的功能、安全、隐私合规报告,测试和分析一般至少需要5个工作日以上。
标准四:流程是不是透明、可追溯,缺陷是不是留痕
正规机构会先理解你的需求,独立制定《测试方案》,而不是被动接收开发方提供的用例;方案应由建设方、开发方、测评方三方评审签字;
合同中要求使用独立的缺陷管理工具(如 Jira),并给你开通只读权限,能实时查看缺陷从提交到修复再到回归的完整状态流转;
正规机构会区分测试执行人和报告签发人,签发人需有授权签字人资质。
标准五:盖章报告是不是完整,报告是不是可复现
一份经得起推敲的交付包应包括:测试计划、测试用例文档、缺陷记录清单(含严重程度和复现步骤)、盖CMA/CNAS章的正式报告,以及可追溯的测试原始记录。
合作前索要一份脱敏的报告样例,直观判断测试项是不是全面、缺陷描述是不是可复现、结果是不是有数据支撑;
核对报告是不是包含:测试环境描述、用例执行统计、缺陷等级分布、遗留缺陷逐条风险说明。
标准六:价格是不是落在合理区间,低价是不是意味着缩水
价格不是越低越好,而是低到不合常理时,必然有步骤被压缩。报价低于市场均价30%的机构,可能在测试步骤、人员投入上缩水。
要求报价单列清人员单价、工具使用费、环境搭建费、报告费。
误区
双证齐全不等于报告万能 。CMA章在国内政务验收、招投标中具有法定证明作用,但CNAS报告在纯粹的国内司法鉴定或仲裁证据场景下,并不直接等同于司法鉴定意见,能否被采纳还取决于报告质量、测试程序合规性和法院审查。选机构时,先确定报告的用途(验收、招投标、司法、出海),再反推需要的资质组合。
先拿能力附表筛掉资质范围不一致的,再用脱敏报告样例 、三方评审方案筛掉流程粗放的,在剩下的两三家里面,按价格透明度和交付物完整度做选择。