信创软件验收测评一般以GB/T 25000.51《系统和软件工程 系统和软件质量要求和评价(SQuaRE) 第51部分:就绪可用软件产品(RUSP)的质量要求和测试细则》为基础质量框架,同时结合T/EGAG 019-2023等信创项目验收规范、项目合同和招标文件中的特殊约定。由于信创环境组合多样、性能基线差别明显,验收标准不应简单套用通用软件阈值,而应围绕环境组合加业务场景形成可检查、可追溯的验收清单。
一、信创软件第三方验收测评标准框架
综合现行标准和行业实践,信创软件第三方验收测评标准可归纳为七大类:环境适配和兼容性、功能适配和完整性、性能和稳定性、数据和接口、安全合规、可运维性和维护性、标准符合性和资质要求。上述标准既包括传统软件质量特性,又突出信创项目特有的环境适配、真替真用和自主可控要求。
(一)环境适配和兼容性标准
环境适配和兼容性是信创软件验收测评的第一要务规则,主要证实软件在国产软硬件环境中的基本生存能力和迁移适应能力。具体标准包括:安装成功率和启动成功率,即在目的环境组合(如鲲鹏、飞腾等CPU和麒麟、统信等操作系统组合)上的安装和启动情况;环境包括率,即实际测试的环境组合数占项目要求的目的组合总数的比例;硬件和基础软件兼容性,包括对国产CPU、操作系统、数据库、中间件、浏览器及外设的功能调用是不是正常、是不是存在冲突;可移植性,即软件是不是绑定单一信创环境,能否在不同国产CPU和操作系统组合间迁移。该类标准直接决定信创软件能否进入后续业务证实步骤。
(二)功能适配和完整性标准
功能适配和完整性标准重点证实重要业务在信创环境下能不能跑通、结果对不对。主要标准包括:途径通过率,即重要业务端到端流程在信创环境下执行成功的比例;功能一致性,即信创版本和原版本或需求规格之间的功能包括对比,是不是存在功能缺失或降级;边界和异常处理能力,即在国产环境下边界功能、报错和降级表现是不是和设计预期一致;以及真替真用检查,即应用是不是已产生真实业务数据、使用率是不是达到合同标准、是不是存在非信创业务并行或终端混用等情况。该类标准是判断信创替代是不是从能用走向真用的重点。
(三)性能和稳定性标准
性能和稳定性标准用于考虑软件在国产基础软硬件上的运行表现和不断服务能力。由于信创环境性能基线一般不同于传统x86环境,测评应重视:操作的P95/P99响应时间;TPS、并发用户数支撑能力及并发条件下的操作成功率;CPU、内存、磁盘I/O、网络等资源占用率;连续运行时长、系统可用率、故障恢复时间等稳定性标准。上述标准的具体阈值应在项目启动前,由使用方结合业务实际和现有系统基线共同约定,并在验收测评中按约定场景和数据量级进行证实。
(四)数据和接口标准
数据和接口标准用于保证信创迁移或系统集成过程中数据不丢失、不错误,接口互联互通。主要标准包括:数据迁移或初始化后的完整性、一致性、准确性检查通过率;和第三方系统(含信创组件)的接口调用成功率及字段一致率;数据导入导出操作的准确性和完整性。对于涉及多系统协同的信创项目,接口连通性和数据一致性往往是验收中的高风险点,应作为重点检查内容。
(五)安全合规标准
信创验收的安全要求一般比通用软件更为严格,强调自主可控和合规基线。通用安全标准包括数据加密(传输和存储)、权限控制、认证机制、安全漏洞和后门扫描、日志审计等。信创安全合规标准还包括国产密码算法应用、信创安全基线符合性,以及通过源码扫描分析开源代码占比和风险组件情况,考虑代码自主率和供应链安全。该类标准既重视软件自身安全能力,也重视国产化真实程度和供应链风险。
(六)可运维性和维护性标准
可运维性和维护性标准用于证实交付后运维团队能否在信创环境下“接得住、管得好”。具体包括:自动化部署、版本升级、回退操作的可行性;备份和恢复流程的可执行性和数据完整性;能否接入信创环境下的监控体系,告警是不是准确及时;界面元素、提示信息、帮助文档在国产操作系统和浏览器下的显示和可用性等易用性和可辨识性标准。对于长期运行的信创系统,可运维性直接影响后续运营成本和服务连续性。
(七)标准符合性和资质要求标准
验收结果的可信度依赖于测评根据和机构资质。测评根据一般包括GB/T 25000.51、T/EGAG 019-2023等标准,以及项目合同和招标文件中的特殊约定。出具报告的第三方机构宜有CMA(检验检测机构资质认定)和CNAS(实验室认可)双重资质,以保证报告的法律效力和公信力。该类标准虽不直接评价软件产品本身,但组成验收测评结果有效性的基础条件。
二、建议
信创软件第三方验收测评应坚持标准为基、场景为纲、合同为据的原则。第一,应在项目启动阶段确定目的环境组合、业务场景、数据量级和验收阈值,避免验收阶段临时确定标准。第二,应围绕环境组合×业务场景设计测试用例,包括安装启动、流程、接口数据和安全合规等共性要求,也包括项目特有的外设兼容、性能基线和真替真用要求。第三,应看重测评机构资质和测评过程的可追溯性,保证测评报告能够支撑项目验收和后续审计。对于验收中发现的问题,应建立整改复测机制,形成测评-整改-复测-结果的流程。
信创软件第三方验收测评标准不是通用软件质量标准的简单移植,而是在传统质量模型基础上叠加信创环境适配、真替真用、安全合规和自主可控等特有方面的复合标准体系。环境适配和兼容性是第一要务规则,功能适配和完整性是要求,性能和稳定性、数据和接口、安全合规、可运维性和维护性共同组成运行保障,标准符合性和资质要求则决定验收结果的可信度。只有围绕具体环境组合和业务场景形成可检查的验收清单,并在项目前期约定合理阈值,才能客观评价信创软件是不是真正实现可用、好用、安全、可控的替代目的。