测试方法3测试级别.pptx

测试的级别测试的级别-v-v模型模型概要设计详细设计编码集成测试单元测试代码审查需求分析系统测试验收测试回归测试软件测试软件测试w w模型模型测试的不仅仅是程序，需求、设计同样要测试。测试的不仅仅是程序，需求、设计同样要测试。本节要点本节要点1.1.代码审查代码审查 2.2.单元测试单元测试3.3.集成测试集成测试4.4.系统测试系统测试5.5.回归测试回归测试方法方法缺陷排除效益的近似值缺陷排除效益的近似值（%）代码审查70-80代码互查50-70编译50单元测试40-50集成测试45系统测试45代码审查代码审查依据：依据：p源程序源程序优点：优点：p看到的是问题的本身而不是征兆看到的是问题的本身而不是征兆p发现其它方法无法发现的逻辑错误发现其它方法无法发现的逻辑错误p效率是最初测试效率的效率是最初测试效率的3-5倍倍p最多发现最多发现75-80%的错误的错误p及早发现缺陷及早发现缺陷p代码审查方法：代码审查方法：p静态分析静态分析p走查：走查：WalkThroughp审查：审查：Inspectionp评审：评审：Review本节要点本节要点p代码审查代码审查 p单元测试单元测试p集成测试集成测试p系统测试系统测试p回归测试回归测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试n定义：定义：l对软件基本组成单元进行的测试，检验程序最小单位有无对软件基本组成单元进行的测试，检验程序最小单位有无错误。错误。s单元：软件开发中的最小的独立部分单元：软件开发中的最小的独立部分uC C语言中的单元：函数或者是子过程语言中的单元：函数或者是子过程uC+C+语言中的单元：类语言中的单元：类单元测试单元测试p依据依据p详细设计详细设计p目标：目标：p1、检查代码实现是否符合详细设计、检查代码实现是否符合详细设计p2、尽早发现错误、尽早发现错误模块5 出错处理2 局部数据结构4 独立路径3 边界条件1 模块接口p依据依据p详细设计详细设计p单元测试角度单元测试角度单元测试的任务单元测试的任务p任务任务1、模块接口测试、模块接口测试p检查进出模块的数据是否正确检查进出模块的数据是否正确pChecklist：p模块的实际输入模块的实际输入/出与定义的输入出与定义的输入/出是否一致出是否一致p个数、类型、顺序个数、类型、顺序p模块中对于非内部模块中对于非内部/局部变量是否合理使用局部变量是否合理使用p使用其他模块时，是否检查可用性和处理结果使用其他模块时，是否检查可用性和处理结果p使用外部资源时，是否检查可用性并及时释放使用外部资源时，是否检查可用性并及时释放资源资源p内存、文件、硬盘、端口等内存、文件、硬盘、端口等p其他其他p任务任务2、模块局部数据结构测试、模块局部数据结构测试p检查局部数据结构能否保持完整性检查局部数据结构能否保持完整性pChecklist：p变量从来没有被使用变量从来没有被使用p可能别的地方使用了错误的变量名可能别的地方使用了错误的变量名p变量没有初始化变量没有初始化p错误的类型转换错误的类型转换p数组越界数组越界p非法指针非法指针p变量或函数名称拼写错误变量或函数名称拼写错误p使用了外部变量或函数使用了外部变量或函数p其他其他模块5 出错处理2 局部数据结构4 独立路径3 边界条件1 模块接口单元测试的任务单元测试的任务p任务任务3、模块边界条件测试、模块边界条件测试p检查临界数据是否正确处理检查临界数据是否正确处理pChecklist：p普通合法数据是否正确处理普通合法数据是否正确处理p普通非法数据是否正确处理普通非法数据是否正确处理p边界内最接近边界的边界内最接近边界的(合法合法)数据数据是否正确处理是否正确处理p边界外最接近边界的边界外最接近边界的(非法非法)数据数据是否正确处理是否正确处理p其他其他p任务任务4、模块独立执行路径测试、模块独立执行路径测试p检查由于计算错误、判定错误、检查由于计算错误、判定错误、控制流错误导致的程序错误控制流错误导致的程序错误pChecklist：p死代码死代码p错误的计算优先级错误的计算优先级p精度错误精度错误p比较运算错误比较运算错误p赋值错误赋值错误p表达式的不正确符号表达式的不正确符号p、=；=、=、!=p循环变量的使用错误循环变量的使用错误p错误赋值错误赋值p其他其他模块5 出错处理2 局部数据结构4 独立路径3 边界条件1 模块接口单元测试的任务单元测试的任务p任务任务5、模块内部错误处理测试、模块内部错误处理测试p检查内部错误处理设施是否有效检查内部错误处理设施是否有效pChecklist：p是否检查错误出现是否检查错误出现p资源使用前后资源使用前后p其他模块使用前后其他模块使用前后p出现错误，是否进行错误处理出现错误，是否进行错误处理p抛出错误抛出错误p通知用户通知用户p进行记录进行记录p错误处理是否有效错误处理是否有效p在系统干预前处理在系统干预前处理p报告和记录的错误真实详细报告和记录的错误真实详细p其他其他模块5 出错处理2 局部数据结构4 独立路径3 边界条件1 模块接口单元测试环境单元测试环境驱动模块驱动模块驱动模块驱动模块被测模块被测模块被测模块被测模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块桩模块测试结果测试结果测试结果测试结果测试用例测试用例测试用例测试用例接收数据，将数据传送给被测模块，启动被测模块，并打印结果。模拟被测试模块中被调用模块。驱动模块的种类驱动器A驱动器B驱动器C驱动器D图例：信息流及方向调用低层次模块传递参数（查表或外部文件）显示参数B和C的组合单元测试环境单元测试环境桩模块的种类桩A桩B桩C桩D图例：信息流及方向显示跟踪信息显示参数返回参数（从表或外部文件）根据输入参数查表，返回相应输出参数单元测试环境单元测试环境单元测试技术单元测试技术p测试设计：测试设计：p依据模块的内部结构，设计测试用例的过程。依据模块的内部结构，设计测试用例的过程。p主要采用白盒测试技术，关注逻辑覆盖主要采用白盒测试技术，关注逻辑覆盖p原则：原则：p1、保证没有死代码、保证没有死代码p保证一个模块中的每个独立路径都可能被使用到保证一个模块中的每个独立路径都可能被使用到p2、保证对所有的逻辑值都测试、保证对所有的逻辑值都测试true和和falsep3、在上下边界和合法的范围内运行所有的循环、在上下边界和合法的范围内运行所有的循环p4、确保内部数据结构的有效性和完整性、确保内部数据结构的有效性和完整性单元测试技术单元测试技术逻辑覆盖测试方法：逻辑覆盖测试方法：语句覆盖判定覆盖条件覆盖判定/条件覆盖条件组合覆盖路径覆盖逻辑覆盖测试策略：逻辑覆盖测试策略：p由顶向下由顶向下p需要桩模块需要桩模块p由低到上由低到上p需要驱动模块需要驱动模块p孤立测试孤立测试p需要桩和驱动模块需要桩和驱动模块本节要点本节要点p代码审查代码审查 p单元测试单元测试p集成测试集成测试p系统测试系统测试p回归测试回归测试集成测试集成测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试单元测试n定义定义l在单元测试的基础上，将所有的模块按照概要设计要求组在单元测试的基础上，将所有的模块按照概要设计要求组装成子系统或者系统。装成子系统或者系统。l用来发现模块接口之间的错误用来发现模块接口之间的错误p依据依据p概要设计（总体设计）概要设计（总体设计）集成测试的层次集成测试的层次子系统内集成子系统内集成模块内集成模块内集成子系统间集成子系统间集成集成测试技术集成测试技术p正向测试正向测试p规范导出规范导出p等价类等价类p状态转换状态转换p逆向导出逆向导出p错误猜测法错误猜测法p故障测试故障测试p边界值边界值p特殊值特殊值(特殊边界值特殊边界值)p状态转换测试状态转换测试p高覆盖测试高覆盖测试p功能覆盖功能覆盖p接口覆盖接口覆盖集成测试策略集成测试策略大爆炸集成大爆炸集成自顶向下集成自顶向下集成自底向上集成自底向上集成三明治集成三明治集成M1M2M3M4M5M6M8M7M1M2M3M4M5M6M8M7M3M1M2D3D1D2簇簇1簇簇2簇簇3M3M1M2D3D1D2本节要点本节要点p代码审查代码审查 p单元测试单元测试p集成测试集成测试p系统测试系统测试p回归测试回归测试系统测试系统测试系统测试系统测试p 定义：定义：系统测试是将集成好的软件系统，作为整个基于计算机系统的一个元素，与计算机系统测试是将集成好的软件系统，作为整个基于计算机系统的一个元素，与计算机硬件、外设、某些支持软件、数据和人员等其它系统元素结合在一起，在实际运行硬件、外设、某些支持软件、数据和人员等其它系统元素结合在一起，在实际运行环境下，对系统进行一系列的组装测试和确认测试。环境下，对系统进行一系列的组装测试和确认测试。p依据依据p系统需求系统需求p目的目的p为了发现缺陷并度量产品质量，按照系统的功能和性能需为了发现缺陷并度量产品质量，按照系统的功能和性能需求进行的测试求进行的测试p一般使用黑盒测试技术一般使用黑盒测试技术p一般由独立的测试人员完成一般由独立的测试人员完成p应用最广泛的测试应用最广泛的测试系统测试系统测试功能测试性能测试其它测试图形界面测试功能测试配置测试安全性测试恢复测试兼容性测试时间性能测试压力测试容量测试备份测试可用性测试一致性测试安数据转换测试在线帮助测试安装测试文档测试系统测试方法系统测试方法p1、功能测试、功能测试p目标：对产品的功能进行测试，检验是否实现、是否正确目标：对产品的功能进行测试，检验是否实现、是否正确实现实现p1、功能测试、功能测试p方法：覆盖产品的功能方法：覆盖产品的功能p规范导出法规范导出法p等价类划分等价类划分p边界值分析边界值分析p因果图因果图p判断表判断表p错误猜测法错误猜测法系统测试方法系统测试方法p2、协议一致性测试、协议一致性测试p目标：监测实现的系统与标准协议的符合程度目标：监测实现的系统与标准协议的符合程度p2、协议一致性测试、协议一致性测试p方法：方法：p规范导出法规范导出法p等价类划分等价类划分p边界值分析边界值分析系统测试方法系统测试方法p3、性能测试、性能测试p目标：对产品的性能进行测试，检验是否达标、是否能够目标：对产品的性能进行测试，检验是否达标、是否能够保持保持p3、性能测试、性能测试p方法：覆盖系统的性能需求，一般和负载测试结合使用方法：覆盖系统的性能需求，一般和负载测试结合使用p规范导出法规范导出法p错误猜测法错误猜测法系统测试方法系统测试方法p4、压力测试、压力测试p目标：在人为设置的系统资源紧缺情况下，检查系统是否目标：在人为设置的系统资源紧缺情况下，检查系统是否发生功能或者性能上的问题发生功能或者性能上的问题p4、压力测试、压力测试p方法：人为减少可用的系统资源，包括：内存、硬盘、网方法：人为减少可用的系统资源，包括：内存、硬盘、网络、络、CPU占用、数据库反应时间占用、数据库反应时间p规范导出法规范导出法p等价类划分等价类划分p边界值分析边界值分析p错误猜测法错误猜测法系统测试方法系统测试方法p5、容量测试、容量测试p目标：在人为设置的高负载目标：在人为设置的高负载(大数据量、大访问量大数据量、大访问量)的情况下，的情况下，检查系统是否发生功能或者性能上的问题检查系统是否发生功能或者性能上的问题p5、容量测试、容量测试p方法：人为生成大数据量，并利用工具模拟频繁并发访问方法：人为生成大数据量，并利用工具模拟频繁并发访问p等价类划分等价类划分p边界值分析边界值分析p错误猜测法错误猜测法系统测试方法系统测试方法p6、安全性测试、安全性测试p目标：检查集成在系统内的保护机制是否能够在实际中保目标：检查集成在系统内的保护机制是否能够在实际中保护系统不受非法的侵入。护系统不受非法的侵入。p6、安全性测试、安全性测试p方法：一般与功能测试结合使用方法：一般与功能测试结合使用p规范导出法规范导出法p错误猜测法错误猜测法p基于故障的测试基于故障的测试系统测试方法系统测试方法p7、恢复测试、恢复测试p目标：验证系统从软件或者硬件失败中恢复的能力。目标：验证系统从软件或者硬件失败中恢复的能力。p7、恢复测试、恢复测试p方法：在人为使发生系统灾难方法：在人为使发生系统灾难(系统崩溃、硬件损坏、病毒系统崩溃、硬件损坏、病毒入侵等入侵等)的情况下，检查系统是否能够恢复被破坏的环境和的情况下，检查系统是否能够恢复被破坏的环境和数据。数据。p规范导出法规范导出法p错误猜测法错误猜测法p基于故障的测试基于故障的测试系统测试方法系统测试方法p8、备份测试、备份测试p目标：验证系统从软件或者硬件失败中的事件中备份数据目标：验证系统从软件或者硬件失败中的事件中备份数据的能力。的能力。p8、备份测试、备份测试p方法：参考恢复测试方法方法：参考恢复测试方法p规范导出法规范导出法p错误猜测法错误猜测法p基于故障的测试基于故障的测试系统测试方法系统测试方法p9、GUI测试测试p目标：界面实现与界面设计的吻合程度，确认界面处理的目标：界面实现与界面设计的吻合程度，确认界面处理的正确性。正确性。p9、GUI测试测试p方法：方法：p规范导出法规范导出法p等价类划分等价类划分p边界值分析边界值分析p因果图因果图p判断表判断表p错误猜测法错误猜测法系统测试方法系统测试方法p10、兼容性测试、兼容性测试p目标：测试应用对其他应用或者系统的兼容性目标：测试应用对其他应用或者系统的兼容性p10、兼容性测试、兼容性测试p方法：方法：p规范导出规范导出p错误猜测错误猜测系统测试方法系统测试方法p11、可用性测试、可用性测试p目标：检查系统界面和功能是否容易学习、使用方式是否目标：检查系统界面和功能是否容易学习、使用方式是否规范一致，是否会误导用户或者使用模糊的信息规范一致，是否会误导用户或者使用模糊的信息p一般与功能测试结合使用一般与功能测试结合使用p11、可用性测试、可用性测试p方法：可以采用用户操作、观察方法：可以采用用户操作、观察(录像录像)、反馈并评估的方式、反馈并评估的方式p规范导出法规范导出法p错误猜测法错误猜测法系统测试方法系统测试方法p12、安装测试、安装测试p目标：验证成功安装系统的能力。目标：验证成功安装系统的能力。p12、安装测试、安装测试p方法：在不同的硬件配置下，在不同的操作系统和应用软方法：在不同的硬件配置下，在不同的操作系统和应用软件环境中，检查系统是否发生功能或者性能上的问题。件环境中，检查系统是否发生功能或者性能上的问题。p规范导出规范导出p错误猜测错误猜测系统测试方法系统测试方法p13、文档测试、文档测试p目标：验证用户文档是正确的并且保证操作手册的过程能目标：验证用户文档是正确的并且保证操作手册的过程能够正确工作。够正确工作。p13、文档测试、文档测试p方法：一般由单独的一组测试人员实施方法：一般由单独的一组测试人员实施p规范导出规范导出系统测试方法系统测试方法p14、在线帮助测试、在线帮助测试p目标：检查系统的实时在线帮助的可用性和正确性目标：检查系统的实时在线帮助的可用性和正确性p14、在线帮助测试、在线帮助测试p方法：规范导出法方法：规范导出法系统测试方法系统测试方法p15、数据转换测试、数据转换测试p目标：验证已存在数据的转换并载入一个新的数据库是否目标：验证已存在数据的转换并载入一个新的数据库是否有效有效p15、数据转换测试、数据转换测试p方法：规范导出法方法：规范导出法本节要点本节要点p代码审查代码审查 p单元测试单元测试p集成测试集成测试p系统测试系统测试p接收测试接收测试p回归测试回归测试接收测试接收测试基准测试试用测试并行测试本节要点本节要点p代码审查代码审查 p单元测试单元测试p集成测试集成测试p系统测试系统测试p接收测试接收测试p回归测试回归测试回归测试回归测试p目标：检查系统变更之后是否引入新的错误或者旧的错误重新目标：检查系统变更之后是否引入新的错误或者旧的错误重新出现，尤其是在每次出现，尤其是在每次Build之后和稳定期测试的时候之后和稳定期测试的时候p工具：一般使用工具，一般依赖于测试用例库和缺陷报告库工具：一般使用工具，一般依赖于测试用例库和缺陷报告库p目标：关闭所有缺陷报告，确保系统达到预期的交付标准目标：关闭所有缺陷报告，确保系统达到预期的交付标准p方法：一般需要结合回归测试，并谨慎处理新出现的方法：一般需要结合回归测试，并谨慎处理新出现的Bug本节要点本节要点p一、测试概述一、测试概述 p二、测试方法简述二、测试方法简述p三、测试级别简述三、测试级别简述p四、四、测试管理流程简述测试管理流程简述测试管理流程测试管理流程测试计划测试设计、开发测试执行测试记录分析测试总结完毕缺陷跟踪针对测试目标，规定测试任务、资源分配、人员角色、进度安排等。根据测试计划，设计测试用例，包括：测试步骤、测试场景、测试代码、测试数据(包括预期结果)。根据测试计划，配置测试环境，并手动或者自动执行测试设计。根据测试计划，忠实地记录测试执行的过程和结果。分析测试记录，如果发现与预期结果不同，确定并重现缺陷。检查测试设计是否全部执行完毕，缺陷是否全部关闭。记录、分发、评估、关闭缺陷报告。分析测试过程和缺陷报告，评估测试质量和测试效果，给出是否通过测试的建议。面向对象的测试面向对象的测试Class BasePublic:void foo()Helper()void bar()Helper()Private:Virtual void helper()Class Derived:public BasePrivate:Virtual void helper()Void test_driver()Base base;Derived derived;base.foo();base.bar();derived.foo();derived.bar();Void test_driver()Base base;Derived derived;base.foo();derived.bar();面向对象的覆盖面向对象的覆盖p覆盖率覆盖率p继承上下文覆盖继承上下文覆盖p基于状态的上下文覆盖基于状态的上下文覆盖p基于线程的上下文覆盖基于线程的上下文覆盖