星云精准测试平台通过电子标准院的软件测试工具能力评价
星云精准测试本质是一套强大的计算机测试辅助分析系统,通过对源代码的插桩分析出代码的静态结构信息,运行插桩后的代码,测试工程师通过人工或自动化的执行用例,软件示波器通过采集到的这些数据,进行相关密集运算,得到测试数据。结合之前已有的代码静态结构信息,在星云客户端可实现用例与函数直接的互相追溯,再通过星云测试工具的企业项功能,缺陷定位、用例聚类分析、回归测试用例和最小测试用例集得到相应的测试数据,星云测试通过报表的形式展示测试数据,导出批量测试报告。
序号 | 测试项 |
1. | 应用范围 |
2. | 所解决工业问题的影响范围 |
3. | 先进性程度 |
4. | 工业知识的创新性 |
5. | 应用验证情况 |
6. | 知识产权 |
软件维度测试项——产品质量:
序号 | 测试项 |
1. | 产品文档 |
2. | 功能性 |
3. | 性能效率 |
4. | 兼容性 |
5. | 易用性 |
6. | 可靠性 |
7. | 信息安全性 |
8. | 维护性 |
9. | 可移植性 |
软件维度测评项——使用质量:
序号 | 测试项 |
1. | 经济和社会效益 |
2. | 费效比 |
3. | 客户满意度 |
4. | 抗风险性 |
测试依据:
T/CESA 1046-2019《工业APP分类分级和测评》。
动态测试可评价项:
序号 | 分类 | 能力项 |
1. | 动态测试执行的输入 | 测试设计 |
2. | 基于风险的优先级排序 | |
3. | 动态测试执行 | 测试执行控制和自动化测试执行 |
4. | 捕获和回放 | |
5. | 关键字驱动测试用例 | |
6. | 测试对比 | |
7. | 调试 | |
8. | 动态分析 | |
9. | 监测 | |
10. | 覆盖率测量 | |
11. | 信息安全性测试 | |
12. | 接口测试 | |
13. | 测试数据仓库 | 测试数据准备和测试数据生成 |
14. | 压力测试和负载测试 | |
15. | 容量和容积测试 | |
16. | 数据验证和确认 | |
17. | 数据库验证和确认 | |
18. | 测试环境 | 仿真器和模拟器 |
19. | 单元测试框架 | |
20. | 自动化环境设置 | |
21. | 运行环境管理 |
代码分析可评价项:
序号 | 分类 | 能力项 |
1. | 代码分析的输入 | 代码审查 |
2. | 代码分析 | 代码分析器 |
3. | 基于代码的安全测试 |
测试管理可评价项:
序号 | 分类 | 能力项 |
1. | 测试计划 | 测试管理 |
2. | 测试资产 | 测试资产配置管理 |
3. | 质量记录报告 | 事件管理 |
4. | 缺陷管理、缺陷跟踪、错误跟踪 | |
5. | 测试管理 | |
6. | 测试完成报告 | 测试管理 |
7. | 验证和确认报告 | 为验证和确认报告提供数据基础 |
8. | 验证和确认报告 | |
9. | 测试状态报告 | 测试监测 |
测试依据:
《软件与系统工程 软件测试工具能力》(报批稿,计划号:20190837-T-469)
序号 | 测试项 |
1. | 产品文档 |
2. | 功能性 |
3. | 性能效率 |
4. | 兼容性 |
5. | 易用性 |
6. | 可靠性 |
7. | 信息安全性 |
8. | 维护性 |
9. | 可移植性 |
《工业APP分类分级和测评》是贯彻和落实工信部《工业互联网APP培育工程实施方案(2018-2020年)》(工信部信软[2018]79号)要求,满足地方政府和广大企业实际需求的一项重要标准,并入选工业和信息化部2020年团体标准应用示范项目。经过多次行业企业测评验证和行业内专家广泛论证并推动国家标准立项工作,2020年8月7日国家标准化管理委员会下达了2020年第二批推荐性国家标准计划,正式下达《工业软件 工业APP分类分级和测评》(计划号:20202626-T-469)国家标准立项计划。
02测评结果代表行业高水平工业APP分类分级测评工作自2019年开展以来,通过系统测试和专家评审等方式对工业APP按照T/CESA 1046-2019中的19条指标进行测评,目前已有业内多家企业通过测评,测评的工业APP涉及研发设计类、生产制造、运维服务类、经营管理类,为监管方、评价方提供认定和评估评价工业APP的依据。
03测评结果权威可信工业APP分类分级测评依托国内首家获得CNAS认可工业APP分类分级检测能力的实验室-中国电子技术标准化研究院赛西实验室实施测评及管理,测评结果具备行业普遍权威性。
为帮助产业打造具备我国自主知识产权的软件测试工具供给能力,同时也利于用户对测试工具进行评估遴选,中国电子技术标准化研究院联合权威专家和各有关单位,研究形成了《软件与系统工程 软件测试工具能力》国家标准 (计划号:20190837-T-469),软件测试工具能力评价工作完全按照国家标准的要求进行。
02评价结果代表行业高水平软件测试工具能力评价工作自2021年开展以来,以国家标准为起点,为软件测试工具的需方、供方、维护方和独立评价方开展工具的研发、评估和选型提供了支撑。目前已有业内7家企业通过第一批软件测试能力评价,通过企业的产品也在行业内得到了广泛认可。
03评价结果权威可信软件测试工具能力评价工作依托国家标准《软件与系统工程 软件测试工具能力》的牵头方——中国电子技术标准化研究院,评价结果具备行业普遍权威性。
产品委托测试依托由CNCA(国家认证认可监督管理委员会)批准、CNAS(中国合格评定国家认可委员会)认可的中国电子技术标准化研究院赛西实验室实施测试及管理,测试结果具备行业普遍权威性。
附:第一批软件测试工具能力评价已通过的名单
序号 | 工具名称 | 具备能力 | 提供单位 |
1 | “金戟”一体化软件测试平台 | 动态测试执行类、代码分析类、测试管理类 | 北京航天自动控制研究所 |
2 | HiSim工业控制系统半仿真自动化测试工具 | 动态测试执行类 | 上海浦东软件平台有限公司 |
3 | RDCloud(研发云)测试管理应用 | 测试管理类 | 中兴通讯股份有限公司 |
4 | Sunwise通用自动化动态测试套件工具 | 动态测试执行类 | 北京轩宇信息技术有限公司 |
5 | 星云精准测试平台 | 动态测试执行类、代码分析类、测试管理类 | 苏州洞察云信息技术有限公司 |