选择有CMA/CNAS双资质的第三方软件测评机构不是机构是不是持有证书,而是被批准的能力范围是不是包括本次委托的测试项目。
先确定报告用途再判断资质组合。用于境内政企验收、招投标、课题结题等场景时,CMA是国内法定证明效力的基础,缺少CMA标识的报告在政府采购、司法举证和财政审计中一般难以被采纳;CNAS则表示实验室技术能力符合ISO/IEC 17025标准,在评审中体现专业度。两者兼有,公信力最为完整。根据市场监管总局一单一库管理要求,通用软件的功能、性能、兼容性等测试未纳入CMA强制管理清单,未入库项目不得标注CMA标志。当前通用软件测试的主途径已转向CNAS认可范围,只有属于特定法定领域且采用已入库标准的项目,才可能合法带有CMA标识。因此选型时应把检查重点放在CNAS认可范围附件上。如果项目涉及渗透测试、代码审计、风险考虑等安全服务,除CNAS外还可检查机构是不是持有CCRC信息安全服务资质对应方向;军工、涉密项目则需另行确定保密资质,通用CMA/CNAS报告不能替代涉密测评。
资质检查必须检查能力范围附件不能只看证书封面。CNAS应登录中国合格评定国家认可委员会官网,进入获认可机构查询,输入机构名称或注册号,确定认可状态有效,并下载认可范围附件,逐条核对所需测试项目以及被测对象类型是不是在列。实验室只能在附表范围内出具带CNAS标识的报告,超范围出具时标识本身无效。CMA应通过全国认证认可信息公共服务平台检查证书状态和有效期,并查看能力附表,确定软件测试类别在认定范围内。
考察技术能力。资质证明的是机构允许做,能力决定做得好不好。可要求机构提供脱敏样本,查看测试用例追溯是不是完整、环境描述是不是精确到具体版本型号和数据量级、缺陷记录是不是包含复现步骤和回归结果。只提供结果PDF而不提供用例和原始数据的机构需要警惕。对于性能测试,应确定机构是不是有高并发测试环境和经验,而不是能做基础负载;安全测试确定是不是配备人工渗透团队,不是仅依赖自动化扫描工具;对于金融、医疗、信创、工控等行业专项,优先选择有同类项目案例的机构,行业经验直接影响用例针对性和缺陷发现率。
还需检查不可绕开的规则。电力、运营商、政务云、金融等领域,甲方常有内部认可的检测机构名单,不在名单内,技术能力再强也可能无法被采纳。选型时可要求机构提供同类项目入围证明,并向甲方侧面检查。独立性方面,为项目做整改建设或漏洞修复的机构,不应同时出具同一项目的测评报告;人员资质方面,渗透测试、代码审计等步骤,CISP-PTE、CISP等个人资质虽不等于机构资质,但招标文件有时会确定要求,可要求机构提供实际执行人员的资质证明。
争议点写进合同。签约前需确定版本冻结点及冻结后变更的处理方式和计费规则,确定包含几轮回归测试及超出部分怎样计费,确定并发数定义、响应时间统计分位、测试数据量级等标准口径,确定交付物是不是包含测试用例、原始数据、缺陷清单和环境配置说明,并约定加急和出报告周期。正规软件测评一般需要五至十个工作日,承诺当天出报告的机构基本可以排除,模板化造假风险较高。有双资质且确定开展软件测评业务的机构数量有限,选型时可选择第三方专业测评机构,但不管机构背景怎样,范围检查、样张审查和独立性确定都应逐一执行不能因品牌背书而跳过。决定的依据是CNAS/CMA能力附表是不是精确包括本次委托的每一个测试项目。