DB11 T 1012-2019 软件产品备案测试基本技术规范.pdf

《DB11 T 1012-2019 软件产品备案测试基本技术规范.pdf》由会员分享，可在线阅读，更多相关《DB11 T 1012-2019 软件产品备案测试基本技术规范.pdf（24页珍藏版）》请在麦多课文档分享上搜索。

1、ICS 35.080 L 77 DB11 北京市地方标准 DB11/T 1012 2019 代替 DB11/T 1012 2013 软件产品备案 测试 基本技术规范 Basic technical specification for filing test of software product 北京市 市场 监督 管理 局 发布 2019 一 06 一 18 发布 2019 一 10 一 01 实施 DB11/T 1012 2019 I 目 次 前言 . II 引言 . III 1 范围 . 1 2 规范性引用文件 . 1 3 术语和定义 . 1 4 基本技术要求 . 3 5 测试要求 .

2、5 6 软件评价 . 6 7 测试报告要素 . 6 附录 A（资料性附录）测试报告样本 . 8 参考文献 . 16 DB11/T 1012 2019 II 前 言 本标准按照 GB/T 1.1 2009标准化工作导则 第 1部分：标准的结构和编写 给出的规则起草。 本 标准 代替 DB11/T 1012 2013软件产品登记测试通用技术规范 。 与 DB11/T 1012 2013相比 主要 技术 变化如下： 更改 标准名 为软件 产品备案 测试 基本技术规范 ； 调整和补充了术语和定义； 有关技术要求的表述由 4 个特性调整为 6 个特性 ， 增加了 “易安装性”和 “信息安全性”，“用 户

3、文档”调整为“用户文档集”， 相关的子特性也做了修改、调整和补充 （ 见 4.1.1.1、 4.1.5.1 和 4.1.5.4） ； 增加了嵌入式软件产品相关要求说明； 修改 了附录。 本标准由北京市经济和信息化 局 提出并归口。 本标准由北京市经济和信息化 局 组织实施。 本标准主要起草单位：北京软件与信息服务业促进中心、北京软件产品质量检测检验中心（国家应 用软件产品质量监督检验中心）、北京尊冠科技有限公司（国家电子计算机质量监督检验中心）、中国 软件评测中心、国家信息中心软件评测中心、北京通和实益电信科学技术研究所有限公司、 中国泰尔实 验室、信息产业信息安全测评中心、北京精科评测技术有

4、限公司、北京泰瑞特检测技术服务有限责任公 司、北京中电众维软件评测中心、航天中认软件测评科技（北京）有限责任公司、 信息处理产品标准符 合性检测中心、北京中科卓信软件测评技术中心、国家工业信息安全发展研 究中心评测鉴定所。 本标准主要起草人：徐淼、张婧瀛、纪君、王威、何凤梅、阳小珊、朱璇、史伟超、刘根、吴娓娓 、 霍思雯、彭博、李刚、董晶晶、朱航、毛泽杰、崔彩杰、赵国亮、武辰、胡陈勇。 本标准 代替标准 的 历次版本发布情况为 ： DB11/T 1012 2013。 DB11/T 1012 2019 III 引 言 为促进北京市软件产业发展，规范软件产品检测机构相关服务，方便软件企业切实享受国

5、家税收优 惠政策，根据 关于软件和集成电路产业企业所得税优惠政策有关问题的通知（财税 2016 49号） 的文件精神， 修订 DB11/T 1012，形成了本标准 。 软件产品 备案测试是指检测机构依据本标准区分非嵌入式软件产品和嵌入式软件产品，验证软件产 品的用户文档集、 易安装性、 功能性、信息安全性、易用性和中文特性，出具测试报告供企业用于享受 税收优惠政策的测试活动。 软件产品 备案测试旨在 验证软件产品的真实性， 软件产品备案测试结果和测试报告不作为软件产品 质量判定的依据，不作为 软件产品信息 安全保护 程度判定 的 依据。 DB11/T 1012 2019 1 软件产品备案 测试

6、 基本技术规范 1 范围 本标准规定了非嵌入式软件产品和嵌入式软件产品备案的基本技术要求、测试要求、软件评价和测 试报告要素等。 本标准适用于检测机构对软件产品进行备案测试。 2 规范性引用文件 下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文件。 凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T 2312 信息交换用汉字编码字符集 基本集 GB/T 11457 2006 信息技术 软件工程术语 GB/T 13000 信息技术 通用多八位编码字符集（ UCS） GB 18030 信息技术 中文编码字符集 GB/T 25000.1

7、 2010 软件工程 软件产品质量要求与评价（ SQuaRE） SQuaRE指南 GB/T 25000.51 2016 系统与软件工程 系统与软件质量要求和评价（ SQuaRE）第 51部分：就绪可 用软件产品（ RUSP）的质量要求和测试细则 3 术语和定义 下列术语和定义适用于本文件。 3.1 软件产品 software product 一组计算机程序、规程以及可能的相关文档和数据。 注： 产品包括中间产品和意图用于开发方和维护方使用的产品。 GB/T 25000.1 2010，定义 4.49 3.2 嵌入式软件 embedded software a）大的系统的一部分并能执行其某些需求的

8、软件。 b）嵌入式计算机系统所用的软件。 注 1： 改写 GB/T 11457 2006，定义 2.539。 注 2： 例如，用于航天器或快速传输线系统中的软件，家用电器自动控制软件，设备仪器计算模块软件等。 3.3 非 嵌入式 软件 non-embedded software 除嵌入式软件之外的软件。 DB11/T 1012 2019 2 3.4 用户文档集 user documentation 随同软件提供的协助用户使用该软件的信息。 GB/T 25000.51 2016，定义 4.1.26 3.5 易安装性 installability 在指定环境中，软件能够成功地安装和 /或卸载的有效

9、性和效率的程度。 3.6 软件功能 software function 软件中算法的实现，利用该实现，最终用户或软件可以执行某一工作任务的部分或全部。 注： 功能不一定是最终用户可调用的（例如：数据的自动备份保存） 。 GB/T 25000.51 2016，定义 4.1.14 3.7 功能性 functional suitability 在指定条件下使用时，软件提供满足明确和隐含要求的功能的程度。 3.8 信息安全性 security 软件能够保证得到授权的用户、其他产品或系统能正常访问相关的信息或数据的程度。 3.9 易用性 usability 在指定的使用周境中，软件在有效性和满意度方面为

10、了指定的目标可为指定用户使用的程度。 3.10 中文特性 Chinese characteristics 软件支持中文编码和中文显示、处理的程度。 3.11 软件样品 software samples 提供给检测机构进行测试的软件产品。 3.12 黑盒测试 black box testing 忽略系统或部件的内部机制，只集中于响应所选择的输入和执行条件产生的输出的一种测试 。 GB/T 11457 2006，定义 2.142 3.13 评价 evaluation 决定某产品、项目、活动或服务是否符合它的规定的准则的过程，相对于测试项，是对测试的结果 给出“符合”、“不符合”或“不适用”等结论性

11、陈述的活动或过程。 注 ： 改写 GB/T 11457 2006，定义 2.571。 3.14 测试项 testing item 是测试目标的软件项。 DB11/T 1012 2019 3 GB/T 11457 2006，定义 2.1709 4 基本技术要求 4.1 非 嵌入式软件 产品 4.1.1 用户文档集 4.1.1.1 标识和标示 应包含软件生产厂商的名称和邮政或网络地址。 4.1.1.2 完备性 应说明用户可以调用的所有功能。 4.1.1.3 正确性 应没有有歧义的信息。 4.1.1.4 一致性 用户文档集中的各文档不应自相矛盾、互相矛盾。 4.1.1.5 易理解性 应采用该软件产品

12、特定读者可理解的术语和文体，使其容易被该软件产品主要针对的最终用户群理 解。 4.1.2 易安装性 易安装性要求包括： a) 如果用户能够实施安装，软件应可遵循软件安装手册进行安装； b) 应提供用户软件移去或卸载的步骤，如采用卸载向导进行自动卸载、从控制面板中的添加 /删 除中进行卸载或直接删除对应的文件夹等。 4.1.3 功能性 4.1.3.1 可识别 可识别方面的要求包括： a) 安装之后，软件产品的功能应是可识别的； b) 安装之后，软件产品名称和版本号应是可识别的。 4.1.3.2 可执行 可执行方面的要求包括： a) 在给定的限制范围内，使用相应的环境设施、器材和数据，用户文档集中

13、描述的功能是可执 DB11/T 1012 2019 4 行的； b) 一个功能执行应返回需求所要求的结果； c) 功能的前置条件满足的情况下，应触发对应功能的行为； d) 对一个功能进行两种完全相同的操作，软件产品应返回同一个结果； e) 应合理处理非预期的执行过程，保证不对原软件造成破坏； f) 测试用例应在被测软件产品上运行通过。 4.1.3.3 一致性 软件实际操作的结果应与用户文档集描述的预期结果一致。 4.1.4 信息安全性 信息安全性要求包括： a) 软件应按照用户文档集中定义的信息安全性特征来运行； b) 软件应对访问权限进行管理。 4.1.5 易用性 4.1.5.1 可辨识性

14、可辨识性要求包括： a) 有关软件执行的各种问题、消息和结果应是易理解的； b) 源自软件的消息应设计成使最终用户易理解的形式； c) 屏幕输入格式、报表和其他输出对用户来说应是清晰且易理解的。 4.1.5.2 易学性 借助用户接口、帮助功能或用户文档集提供的手段，最终用户应能够学习如何使用软件功能。 4.1.5.3 易操作性 功能、界面设计应方便用户操作和控制。 4.1.5.4 用户差错防御性 具有严重后果的功能执行应可逆，或者给出明显警告，执行前要求确认。 4.1.6 中文特性 4.1.6.1 中文显示和处理 除专业术语外， 对话框、菜单、图标、窗口、帮助信息等界面的信息应为中文显示，中文

15、字符应能 正常显示和处理。 4.1.6.2 字符集支持 自带字库的软件应支持中文编码，中文字符编码规则为 GB/T 2312、 GB/T 13000或 GB 18030中的一 种。 DB11/T 1012 2019 5 4.2 嵌入式软件产品 4.2.1 用户文档集 基本技术要求同非嵌入式软件产 品，见 4.1.1。 4.2.2 功能性 基本技术要求同非嵌入式软件产 品，见 4.1.3。 4.2.3 信息 安全 性 适用时 ， 基本技术要求同非嵌入式软件 产品，见 4.1.4。 4.2.4 易用性 适用时 ， 基本技术要求同非嵌入式软件产品 ，见 4.1.5。 4.2.5 中文特性 适用时 ，

16、 基本技术要求同非嵌入式软件产 品，见 4.1.6。 5 测试要求 5.1 测试准备 5.1.1 对被测软件产品的现场要求 被测软件产品的软件样品，包括用户文档集，应提供到测试现场。 适用 时应对软件样品进行病毒检 查，确保软件样品未被病毒感染。 5.1.2 对 测试环境 的现场要求 测试所需的、在用户文档集中已指明要求的 测试环境 应提供到测试现场，包括软硬件环境、网络环 境、 其他 辅助设备以及相关技术资料等。 5.2 测试内容 5.2.1 非嵌入式软件产品 非 嵌入式软件 产品测试内容应包含用户文档集、 易安装性、 功能性、信息 安全性、 易用性和中文特 性 6个方面。其中，用户文档集和

17、功能性属于必测项 ；对于 服务器 端软件 ， 易安装性可不进行测试 且 不 做评价 ； 对于 无用户界面的软件产品，易用性和中文特性可不进行测试且不做评价； 对于 用户文档集和 用户界面中无信息安全性描述的 软件产 品 ，信息安全性可 不进行测试且不做评价 。 5.2.2 嵌入式软件产品 嵌入式 软件测试内容 包含用户文档集、功能性、信息 安全性、 易用性和中文特性 5个方面。其中， 用户文档集和功能性属于必测项 ；对于 无用户界面的软件产品，易用性和中文特性可不进行测试且不做 DB11/T 1012 2019 6 评价； 对于 用户界面和用户文档集中无信息安全性描述的 软件产品 ，信息安全性

18、可 不进行测试且不做评 价 。 5.3 测试方法 5.3.1 用户文档集审查 通过对用户文档集的 审 查，验证其是否符合 4.1.1的 要求。 5.3.2 易安装性测试 通过对被测软件产品进行安装 和 卸载， 验证其是否 符合 4.1.2的 要 求。 5.3.3 功能性测试 针对用户文档集中对于功能的描述，采用黑盒测试方法设计测试用例，验证 其 是否符 合 4.1.3的要 求。 5.3.4 信息安全性测试 采用黑盒测试方法设计测试用例，验证其是 否符合 4.1.4的 要求。 5.3.5 易用性测试 从用户的角度对被测软件产品的安装、功能、用户界面、系统辅助等进行测试，验证 其 是否符 合 4.

19、1.5 的要求。 5.3.6 中文特性测试 对被测软件产品的对话框、菜单、图标、窗口等界面进行检查，验证其是否符合 4.1.6的 要求。 6 软件评价 6.1 测试项评价 在测试中，对每一个测试项给出测试结果。测试结果分为： 符合； 不符合； 不适用。 6.2 整体评价 根据测试项的评价结果，对软件进行整体评价，评价结果分为： 通过：所有测试项的测试结果均为“符合”或“不适 用”，则软件产品的测试结果为 “ 通过 ” 。 不通过：测试项的测试结果存在“不符合”，则软件产品的测试结果 为 “ 不通过 ” 。 7 测试报告要素 7.1 报告标识 DB11/T 1012 2019 7 测试报告应有唯

20、一性标识，一般为报告编号，由检测机构自行定义。 7.2 基本信息 基本信息应包括样品名称（包含简称）、版本 /型号、委托单位名称、委托单位地址、联系人、联 系电话、邮政编码、电子邮件、生产单位名称、来样日期、测试单位名称、测试地点、测试日期、样品 内容及数量、产品简介、测试依据以及测试人员、审核人员、批准人员签字等， 参 见附录 A。 7.3 测试结论 测试结论应包括测试依据、测试内容、各测试项的测试结果概述和被测软件的整体评价， 参 见附录 A。 7.4 测试环境 测试环境应描述实际测试环境，包括但不限于软硬件环境、网络环境、辅助设备、技术资料等，以 及软件样品的病毒检查情况， 参 见附录

21、A。 7.5 测试内容 测试内容应以表格的形式表现被测软件产品的用户文档集、 易安装性、 功能性、信息 安全性、 易用 性和中文特性 6个特性中所有适用的测试项，并包含具体的测试结果， 参 见附录 A。 7.6 缺陷列表 缺陷列表应给出测试过程中发现的被测软件产品缺陷，包括但不限于缺陷编号和缺陷情况详细描述。 测试过程中未发现软件缺陷，该部分略去， 参 见附录 A。 DB11/T 1012 2019 8 附录 A （ 资料 性附录 ） 测试报告样本 （ LOGO） No: 报告编号 软 件 产 品 备 案 测 试 报 告 样品名称 : 软件产品名称 简称 版本 /型号 : 版本 /型号 委托单

22、位 : 委托单位名称 生产单位 : 生产单位名称 报告日期 : XXXX 年 XX 月 XX 日 嵌入式软件 非嵌入式软件 （检测机构名称） 非嵌入式软件 嵌入式软件 DB11/T 1012 2019 9 声 明 1. 本报告无本检测机构（测试报告）专用章无效； 2. 本报告无测试人员、审核人员、批准人员签字无效； 3. 本报告涂改无效； 4. 未经本检测机构书面批准，不得复制报告（完整复制除 外）； 5. 本报告检测数据仅对来样负责； 6. 如对测试报告有异议，请于收到报告之日起十五日内向 本检测机构提出申诉。 DB11/T 1012 2019 10 （检测机构名称） 软件产品备案测试报告

23、No：报告编号 第 1 页 共 6 页 样品名称 软件产品名称 简称 版本 /型号 版本 /型号 委托单位 委托单位名称 联系电话 委托单位固定电话号码 （无固定电话，填写手 机号码） 委托单位 地 址 委托单位地址 邮政编码 邮政编码 联系人 联系人 电子邮件 电子邮件 生产单位 生产单位名称 来样日期 XXXX 年 XX 月 XX 日 测试单位 检测机构名称 测试地点 测试地点 测试日期 XXXX 年 XX 月 XX 日 XXXX 年 XX 月 XX 日 样品内容 及 数 量 产品简介 应说明软件分类、适用领域、行业划分等（ 50 字以内） 测试依据 DB11/T 10122019软件产品

24、备案测试基本技术规范 XXXX （ 用户文档 ） 测试人员 审核人员 日期 XXXX 年 XX 月 XX 日 批准人员 日期 XXXX 年 XX 月 XX 日 DB11/T 1012 2019 11 （检测机构名称） 软件产品备案测试报告 No：报告编号 第 2 页 共 6 页 软件产品名称 简称 版本 /型号 测试结果 受 XXXX（委托单位名称）的委托， XXXX（检测机构名称）于 XXXX 年 XX 月 XX 日至 XXXX 年 XX 月 XX 日，对其 /XXXX（ 软件 生产 厂商 名称）开发的 “软件 产品名称 简称 版本 /型号 ”进行了软件产品备案测试。 XXXX（检测机构名称

25、）依据 DB11/T 10122019软件产品备案测试基本技术 规范地方标准中相关条款，参照 XXXX （ 用户文档 ） ，分别对其用户文档集、易 安装 性、功能性、信息安全性、易用性和中文特性 6 个方面进行了测试，测试结果表 明： 1. 软件 用户文档 完备、描述正确、内容一致、易理解 /（描述 缺陷）； 2. 软件可以安装 和 卸载 /（描述 缺陷）； 3. 软件提供了 XXXX 的功能，被测 软件 在测试期间可稳定运行 /（描述 缺陷）； 4. 软件提供了 XXXX 的信息安全功能 /（描述 缺陷）； 5. 软件各种信息可 理解 ，易学习，操作简便， 对 用户差错 可给出提示 /（描述

26、 缺 陷）； 6. 软件中文字符能够正常显示、处理，支持 GB/T 2312/GB/T 13000/GB 18030 （支持其中一个）中文编码 /（描述 缺陷）。 “ 软件产品名称 简称 版本 /型号 ” 提供了 XXXX （ 用户文档 ） 中描述的功能， 在测试环境中运行稳定，操作简便，通过 了 软件产品备案测试 /软件产品备案测试 结 果为不通过 。 备注： 详细测试结果参见具体测试内容 ； 测试 结果为“不通过 ” 的 ， 详细 缺陷参见缺陷列表。 （检测专用章） XXXX 年 XX 月 XX 日 （注：本报告仅作为软件企业享受税收优惠政策的证明材料使用，不作为软件产 品质量判定的依据，

27、不作为软件产品信息安全保护程度判定的依据。） DB11/T 1012 2019 12 （检测机构名称） 软件产品备案测试报告 No： 报告编号 第 3 页 共 6 页 1. 测试环境 1.1. 病毒检查 病毒检查由生产方进行。 被测软件为嵌入式软件，不适于进行病毒检查。 对软件样品用 XX 杀毒软件的 XX.XX 版本（病毒库 /规则库时间： XXX）进行 了病毒检查，未发现病毒。 1.2. 软硬件环境 设备名称 设备型号 配置说明 操作系统 相关应用软件 服务器端 客户端 1.3. 网络环境 网络类型 带宽 设备 数量 1.4. 辅助设备 设备名称 规格 /型号 数量 备注 2. 用户文档集

28、 XXXX （ 用户文档 ） DB11/T 1012 2019 13 （检测机构名称） 软件产品备案测试报告 No： 报告编号 第 4 页 共 6 页 3. 测试内容 3.1. 用户文档集 测试需求 测试过程说明 结果 标识和标示 （见标准 4.1.1.1） 完备性 （见标准 4.1.1.2） 正确性 （见标准 4.1.1.3） 一致性 （见标准 4.1.1.4） 易理解性 （见标准 4.1.1.5） 3.2. 易安装性 测试需求 测试过程说明 结果 安装 （见标准 4.1.2） 卸载 3.3. 功能性 测试需求 测试过程说明 结果 功能一 （见标准 4.1.3） 功能二 子功能一 子功能二

29、3.4. 信息安全性 测试需求 测试过程说明 结果 安全功能一 （见标准 4.1.4） 安全功能二 DB11/T 1012 2019 14 （检测机构名称） 软件产品备案测试报告 No： 报告编号 第 5 页 共 6 页 3.5. 易用性 测试需求 测试过程说明 结果 可辨识性 （见标准 4.1.5.1） 易学性 （见标准 4.1.5.2） 易操作性 （见标准 4.1.5.3） 用户差错防御性 （见标准 4.1.5.4） 3.6. 中文特性 测试需求 测试过程说明 结果 中文显示和处理 （见标准 4.1.6.1） 字符集支持 （见标准 4.1.6.2） 单位地址 /邮编：检测机构单位地址 /邮

30、编 电话 /传真：检测机构联系电话 /传真 电子邮箱：检测机构电子邮箱 网址：检测机构网址 投诉电话：检测机构受理投诉的电话 DB11/T 1012 2019 15 （检测机构名称） 软件产品备案测试报告 No： 报告编号 第 6 页 共 6 页 4. 缺陷列表 缺陷编号 缺陷情况详细描述 DB11/T 1012 2019 16 参 考 文 献 1 GB/T 9385 计算机软件需求规格说明规范 2 GB/T 9386 计算机软件测试文档编制规范 3 GB/T 15532 计算机软件测试规范 4 GB/T 25000.10 系统与软件工程 系统与软件质量要求和评价（ SQuaRE） 第 10部分：系统与 软件质量模型