【软件测试】使用C++ Test进行覆盖测试

男娘i 2021-10-30 00:52 806阅读 0赞

#### 一、测试目的 ####

1.掌握覆盖率测试、回归测试的方法。  
2.掌握使用Parasoft C++ Test进行覆盖率测试、回归测试。

#### 二、测试环境 ####

Windows XP, Parasoft C++ Test 9.2

#### 三、测试内容 ####

使用Parasoft C++ Test进行覆盖率分析，并手动添加测试用例提高测试覆盖率，以及回归测试。

#### 四、测试步骤及结果 ####

##### 5.1 C++Test的覆盖率分析概述 #####

##### 1.1.测试覆盖率介绍 #####

**行覆盖率(Line Coverage–LC)**  
指出多少源码的可执行受控制流影响至少一次。如果所有可执行代码107受到影响至少一次，将会获得完全的 100% 行覆盖率。  
**块覆盖率(Block Coverage–BC)**  
与行覆盖率类似，除了带有块覆盖率的测量代码单元是一个基本块（见前面表格中这一术语的定义）表示源码中有多少基本块受到控制流影响至少一次。  
**路径覆盖率(Path Coverage–PC)**  
表明是否一个给定的函数中每条可能的路径随后有控制流。用于挑选路径的分开点(见前面表格中这个术语的解释)与在判断（分支）覆盖率中相同。因为循环引入极多数量的路径，这个测量只考虑有限循环的可能性。  
**判断（分支）覆盖率(Design/Condition Coverage—DC/CC)**  
表明源码中有多少分支控制流通过。当每一个判决在所有的分支点取得所有可能的结果至少一次时，可获取完整的，100% 覆盖。C++test 考虑源码中下列语句类型分支点：if-else, for,while, do-while和switch.。C++test 没有将这样的动态分支点当作为异常操作 (throw-catch 语句)。如果在一个文件里没有判断，C++test 报告这种度量标准不可用(使用"N/A"选项卡)。  
**修正的条件/判断覆盖率(MC/DC)**  
根据 DO - 178B 标准必需满足下面三个条件才能获得全部的 (100%) MC/DC覆盖率： a. 每个判断至少有一次已经产生所有可能的结果 b. 判断中的每一个条件至少有一次已经产生所有可能的结果。 c. 判断中每一个条件已经证明独立地影响判断结果。由于 C++test 认为每一个条件和判断可能只有两个 MC/DC覆盖率的结果：真或假。C++test 只检查上面列出的第三个选项（c），因为（c）中暗含条件（a）和（b）。 通过改变一些特殊条件，又固定所有其他可能的条件，来证明这种条件能够独立地影响判决结果。

##### 1.2 C++Test进行覆盖率分析 #####

1.2.1 导入工程项目  
1.2.2 查看测试覆盖率  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70]

1.2.3 配置规范  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 1]

1.2.4 执行测试用例  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 2]

1.2.5 对测试覆盖率进行分析  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 3]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 4]

1.2.6 查看不同类型的覆盖率分析

判定覆盖率  
![在这里插入图片描述][20190818235746207.png]  
简单条件覆盖率  
![在这里插入图片描述][20190818235734312.png]  
修改条件覆盖率  
![在这里插入图片描述][20190818235805431.png]

##### 5.2 添加测试用例，C++Test提高测试覆盖率 #####

2.1 手动添加测试用例提高测试覆盖率  
2.2查看之前运行测试用例后的测试覆盖率。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 5]  
通过查看该函数并进行分析，可以发现当函数int calculate(int a,int b,int c)的输入参数c的值为4，b的值为 0时，该红色标志的程序应该被执行。因此，在测试的时候应该构造一个这样的测试用例。测试用例在设计时关键的是要提供有效的用于测试的输入值。  
2.3 手动添加测试用例  
![在这里插入图片描述][20190818235855630.png]  
选定要添加测试用例的套件  
2.4 接下来在该窗口中选择需要测试的方法或函数，自定义测试用例名称。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 6]  
选择待测试的函数模块和命名测试用例  
2.5 配置测试用例，这里重点配置测试用例的输入参数的值。有效的输入参数值才能测试程序的执行路径。这里配置 b=0，c=4。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 7]  
2.6 查看添加的测试用例及其源码

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 8]测试用例浏览器面板中出现新添加的测试用例及源码  
2.7 运行配置好的测试规范(选择“Parasoft”->“测试执行”->“用户自定义”->“Run Unit Test for Coverage” )。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 9]  
手动添加测试用例后提高测试覆盖率  
6.1 C++Test回归测试  
6.1.1 使用C++Test执行回归测试  
1．对工程代码执行测试

生成的测试用例  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 10]  
执行生成的测试用例  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 11]  
查看测试结果  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 12]  
测试用例源码  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 13]  
校验后的测试用例  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 14]  
6.2 对修改后的工程代码执行回归测试

执行原来校验过的测试用例  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 15]  
回归测试后的结果  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 16]  
回归测试报告（断言失败）  
![在这里插入图片描述][20190819000204748.png]  
五、测试总结

1.  C++Test自动测试的测试用例不一定能够完全满足用户对测试覆盖率的要求。通常情况下，需要用户根据实际代码功能结构设计并添加测试用例。C++Test提供三种方式支持用户添加测试用例：  
    在了解C++Test测试用例相关API的基础上，在自动生成的测试用例文档中完全手工添加；  
    使用C++Test工具提供的测试用例添加向导方式，手动加入单个测试用例；  
    使用C++Test工具提供的数据源测试用例方式，手动指定被测项与输入项之间的关系。  
    通过上述三种方式，用户可方便地手动添加满足需求的测试用例进行单元测试并提高测试覆盖率
2.  使用Parasoft C++test工具，开发测试人员可以：  
    1）自动化执行测试用例库，将测试用例在软件代码修改前后的执行结果做对比，以图形化界面报告回归测试结果，提高效率。  
    2）提高对测试用例库维护的效率。借助C++test的自动化生成/执行测试用例功能，以及回归测试的对比报告，测试人员可以根据修改后的软件需求，快速地添加/删除测试用例等。  
    通过本节测试，我学会了用C++test 测试的方法以及覆盖率测试和回归测试。更好的掌握了软件测试。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70]: /images/20211029/69599067bdbb4da3b2f84ca522848ca3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 1]: /images/20211029/30d6e1d1691a46d99bfc3d4f22012875.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 2]: /images/20211029/f3f6bac6cf66438db270afe881ca49d7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 3]: /images/20211029/ddbaabc7a149497db279d045487d1bb6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 4]: /images/20211029/da819d1f88ef4276a9b3c6e29ce975e3.png
[20190818235746207.png]: /images/20211029/4ca76c69637249eb9409c76292fda886.png
[20190818235734312.png]: /images/20211029/b47f0c82b2ca479c97a67cf3cbe572cb.png
[20190818235805431.png]: /images/20211029/abfa72b7a4644c4dad8964c0f3f024a4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 5]: /images/20211029/4425a866a26649dd9afa86a911d152e4.png
[20190818235855630.png]: /images/20211029/7eff649afdcc40f9aaf93a11d30f86f3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 6]: /images/20211029/cc8f13d341c4492e86a65999e34b73b7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 7]: /images/20211029/e091d5396f794fdc8357be88f04d049f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 8]: /images/20211029/b8c1ae2d33944f118e5c1b1dc29d8de4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 9]: /images/20211029/eb9fd58e61a6420a8e22e774d87a8152.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 10]: /images/20211029/4d3773ebd90c43339296de26f6f1bc84.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 11]: /images/20211029/15af57b28b024182bfc148f927674253.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 12]: /images/20211029/aae7c5a8e7a240f0a6c4c07bb5303ce1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 13]: /images/20211029/00e57db586874881ad1449ebd189c943.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 14]: /images/20211029/e09315077bc044e29d8830daa7aada9c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 15]: /images/20211029/4848cee40b8941e0b566707121020f35.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2x5XzY2OTk_size_16_color_FFFFFF_t_70 16]: /images/20211029/3c5b33773012496283a92d7526e6af56.png
[20190819000204748.png]: /images/20211029/7533e7d298ab467fa69a4cb65e9b874c.png