产品测试方案.doc

百度在线网络技术（北京）有限公司百度XXX产品v1.0.0测试方案文档版本控制文档版本号日期作者审核人说明V1.0 13 / 15 目录百度XXX产品V1.0.0测试方案11项目简介部分21.1文档编写目的21.2测试项目背景描述21.3测试工作内容和范围22测试文档可裁减22.1测试所需参考文档22.2测试需提交文档33测试安排和计划43.1项目整体计划43.2测试资源安排63.2.1人力资源分工63.2.2测试环境安排和使用63.2.3所需的合作方配合73.2.4测试所需工具74风险预估和应对可裁减85准入测试方案可裁减96功能测试方案96.1Case开发和管理的规范96.2测试需求分析和策略制定106.2.1分功能测试需求分析106.2.2测试工具需求117性能测试方案可裁减117.1性能测试工具需求117.2场景名xxx1117.2.1场景概述117.2.2执行策略设计117.2.3测试数据需求127.2.4性能测试结果分析方法和预期127.3压力测试场景设计127.3.1场景名XXX121 项目简介部分1.1 文档编写目的项目名称的这一“测试方案”文档有助于实现以下目标：确定现有项目的信息和应测试的软件构件。列出推荐的测试需求（高级需求）。推荐可采用的测试策略，并对这些策略加以说明。确定所需的资源，并对测试的工作量进行估计。预估项目的风险和成本，对制定应对措施。列出测试项目的可交付元素1.2 测试项目背景描述对测试对象（应用程序、模块、子模块、系统等）及其开发设计目标进行简要说明。需要包括的信息有：主要的功能和性能、测试对象的构架以及项目的简史、测试对象的设计开发初衷和目标。1.3 测试工作内容和范围简要描述测试所需的阶段（例如，评审、测试设计、单元测试、冒烟测试、手工测试、回归测试、自动化测试、性能测试、交叉自由测试等）。简要地列出测试对象中将接受测试或将不接受测试的那些性能和功能。如果在编写此文档的过程中做出的某些假设可能会影响测试设计、开发或实施，则列出所有这些假设。列出可能会影响测试设计、开发或实施的所有风险或意外事件。列出可能会影响测试设计、开发或实施的所有约束。2 测试文档可裁减2.1 测试所需参考文档下表列出了制定和实施该测试方案时所需要使用的相关文档，并标明了各文档的可用性：注：列表中为文档项，需要具化，可适当地删除或添加文档项。文档具体的文档名称和列表（版本/日期）已创建或可用已被接收或已经过复审作者或来源角色和姓名备注软件产品背景相关资料业务简介、名词解释、操作说明、系统资料、访问环境等是否是否PM/RD软件产品调研相关资料前期调研资料等是否是否PM/RDMRD是否是否PM/RD概要设计是否是否RD详细设计是否是否RD产品性能要求是否是否PM/RD产品常规检查checklist是否是否PM/RD产品升级检查checklist是否是否PM/RD运维部署文档是否是否RD/OP上线步骤是否是否RD/OP单元测试设计（单元测试报告）是否是否RD代码行diff分析是否是否RD产品总测试方案（性能）是否是否QA产品测试框架是否是否QA产品test case是否是否QA相关流程文档和模板是否是否QA/PM/RD相关工作指南和规范（checklist）是否是否QA测试工具参考文档是否是否QA测试陷阱tips、经验总结文档、case study文档、项目成长记录等参考资料是否是否QA2.2 测试需提交文档下表列出了制定和实施该测试方案时测试所需要提交的相关文档，并标明了各文档的可用性：注：列表中为文档项，需要具化，可适当地删除或添加文档项。文档具体的文档名称和列表（版本/日期）已创建或可用已被接收或已经过复审作者或来源角色和姓名备注MRD、详细设计等评审批注意见是否是否QA单元测试设计（单元测试报告）是否是否QA测试方案（性能）是否是否QA测试计划是否是否QA测试开发需求货设计（关键字、工具等）是否是否QA测试设计是否是否QA测试报告（功能、性能、自动化）是否是否QA项目总结是否是否QA缺陷分析和测试设计补充是否是否QA项目投入和时间数据是否是否QA测试陷阱tips是否是否QAcase study文档是否是否QA项目成长记录是否是否QA3 测试安排和计划3.1 测试难点和重点可裁减注本小节描述项目测试中预计的测试重点和测试难点，撰写者可根据需要对下列的表格进行修改3.1.1 测试重点可裁减编号重点项重要性说明备注1多用户并发读写操作作为一个分布式系统，并发读写实必须要支持的关键功能；另外这部分功能只要正确，顺序读写正确性一定能保证由于需要考虑自动化工具支持。2异常测试作为一个基础平台项目，系统要能够容忍各种软硬件异常。可以参照之前整理的分布式异常体系进行异常模拟3XxxxXxxx3.1.2 测试难点可裁减编号难点项困难性说明备注1相关数据并发读写的正确性验证由于存在执行不确定性，无法事先获得期望的结果；另外这种不确定性也导致了bug难以复现可以考虑利用系统的checkpoint功能进行功能回放。2Xxxx3.2 项目整体计划项目阶段时间段参与人员测试工作内容安排产出备注调研阶段参与调研讨论需求评审阶段1. 了解项目背景资料2. 阅读mrd3. 反馈评审问题4. 参与需求评审5. 确认评审结论6. 初步评估测试计划 评审批注反馈 初步测试计划详细设计阶段1. 分析产品功能，确认测试需求2. 进行测试点拆分3. 反馈评审问题4. 参与设计评审5. 确认设计评审结论6. 确定测试初步方案 评审批注反馈 测试框架 功能点拆分文档 测试点拆分文档 初步测试方案 测试计划调整RD开发阶段1. 确定测试方案2. 确定自动化测试点3. 撰写测试case和相关关键字4. 准备测试数据5. 自动生成自动化case6. FE提交页面后获取页面对象7. 开发测试工具8. 测试方案和测试设计评审 关键字列表 Case书写规范 测试case文档 自动化case 测试工具和程序准入测试阶段1. 环境部署2. 准入测试3. 完善自动化case 测试环境 准入测试结论 部分自动化case及执行结果第一遍全面测试1. 执行手工测试2. 执行自动化case3. 性能测试4. 完善自动化case 手工测试结论 部分关键字 完善或新补充的自动化case 性能测试结果 自动化case结果Bug回归测试1. 确认bug修复情况2. 执行自动化case3. 完善自动化case4. 性能测试 Bug确认结论 部分关键字 完善或新补充的自动化case 自动化case结果 性能测试结果全面回归测试1. 执行手工回归测试2. 执行自动化casee3. 性能测试 测试结论和测试报告交叉自由测试1. PM、RD、QA交叉自由测试2. 常规检查自动化case执行 测试结论和测试报告上线阶段1. 上线辅助2. 线上检查3. Bug回灌 Bug回灌项目总结阶段1. 相关总结；2. Case和框架合并；3. 自动化case管理详细测试计划请参加xx项目v0.0.0_测试计划文档3.3 测试资源安排3.3.1 人力资源分工下表列出了在此项目的人员配备方面所作的各种假定。注：可适当地删除或添加角色和人员项。角色人员所推荐的投入主要职责或注释需要具化项目负责人80%100% 处理插入事务 协调项目安排 分析测试需求 制定测试方案和测试计划 负责管理文档资料、case、程序、工具 测试全程参与测试工程师50%100% 测试全程参与 分析测试需求 撰写测试case（即自动化case） 提出关键字和自动化工具需求 完善补充自动化case并执行测试 测试分析和测试报告辅助测试开发工程师10%30% 参与测试工作 辅助关键字、工具开发、执行问题修复 辅助自动化框架制定和实施3.3.2 测试环境安排和使用网络硬件，如拓扑图、硬件设备、规格、数量、配置等信息；网络软件，如协议、通讯和连接方式等信息。下表列出了测试的系统环境硬件环境（服务器、网络、虚拟机等需求）软件环境（相关操作系统、软件及环境配置等）3.3.3 所需的合作方配合配合方配合人员希望提供的资源希望的配合工作配合阶段配合时间备注PM 人员 资源协调和推动 交叉自由测试安排全程RD/FE 利于测试的程序、页面及其部署安装文档 分阶段提供被测程序 在开发周期的后20%前提供页面测试设计和测试执行XX产品QA Xx服务器的xx服务、xx数据 人员 联调环境准备； 联调资源提供 联调问题辅助定位测试执行（联调测试）3.3.4 测试所需工具下表列出了在此项目的使用工具方面所作的各种假定。注：可适当地删除或添加工具项。工具获取和访问地址用途支持人员使用阶段使用时间备注Case管理工具url 导出case框架和可复用case测试准备Word- 撰写方案、case测试准备Project- 撰写测试计划测试准备Git/cvs环境 代码、文档、工具管理测试准备测试执行测试总结Atpurl 测试报告 测试数据测试执行Opensta环境 性能压力测试性能测试Myab环境 性能压力测试性能测试4 风险预估和应对可裁减下表列出了在此项目的测试工作所存在的各种风险的假定，需要考虑项目测试过程中可能发生的具体事务，分别分析并加以应对，然后体现在测试计划中。注：可适当地删除或添加风险项。风险类型风险责任方风险内容相应处理优先级可能发生的阶段可能发生的时间段应对所需资源应对措施只是建议，需要具化备注时间计划 合理计划 及时调整人员风险 充分估计 预留buffer 及时调整资源协调 充分估计 预留buffer 及时调整插入事务 预留buffer 及时调整任务超预期 及时调整注：各个风险类型解释如下。时间计划：关键milestone无法匹配的延期风险。诸如项目存在deadline、计划受到客观条件限制、非己方责任导致地被动延期等等；人员风险：测试人员和需配合方的人员的变动导致的工作任务无法按计划完成或者完成质量无法保证的风险，包括新人风险、人员变化、投入不足、投入质量不高等；资源协调：包括所需资源不能如期到位，或者资源质量低于预期等风险。比如测试工具开发的风险、各个阶段交付物的质量风险等。插入事务：包括临时插入高优先级的事务，打乱原有计划等风险。任务超预期：实际执行时的工作复杂程度、结果的质量同预期不符所带来的风险。属于不可预期的风险，只能待出现时及时合理地调整。风险分为可预期的和不可预期的，对于可预期的风险，可以要求资源，制定提前的应对措施。但是对于不可预期的风险，只能待出现时，充分考虑各方因素，及时调整。所以，对于可预期的风险，需要的能力是充分预估，对于不可预期的风险，需要的是及时察觉并调整应对。5 准入测试方案可裁减本节可根据是否做准入测试进行裁减说明准入测试中各测试内容的LIST和预期结果，其它内容可选分类测试内容（可分级描述）输入（可选）操作步骤（可选）预期结果辅助工具（可选）环境搭建依据上线步骤成功搭建测试环境环境搭建成功功能测试测试数据加载成功准备线上词表加载成功、日志记录准确*脚本6 功能测试方案6.1 Case开发和管理的规范描述case的模板以及管理方式6.2 测试需求分析和策略制定6.2.1 分功能测试需求分析根据测试框架中的各个部分，进行测试需求分析，确定测试内容和测试方法。6.2.1.1 XX功能模块1. 主要功能描述根据需求和设计，将该部分的功能做简要描述。2. 测试点分析测试点所需回归的相关测试点测试方法类型测试方法详述A依据该功能分析可以测试的点依据测试框架所选择的复用case的测试点列表手工测试自动化测试自动化辅助测试新旧版本对比测试描述依据测试类型而选择的测试策略，包括需要准备的数据，需要使用的辅助工具，需要使用的自动化方法，以及需要抽象的关键字等等注：各个测试方法类型解释如下。手工测试：采用人工操作，并人工观察确认测试结果的测试方法。如无特别的创新方法，诸如数据准备和场景描述策略等，此方法可以一笔带过。自动化测试：使用提前准备好的自动化case完全无人工干预的测试。该方法如果需要特别的工具、关键字开发，需要注明。自动化辅助测试：使用工具，将测试的部分过程，比如结果保存（抓图）、数据上传、结果验证等用程序自动化实现，但是部分过程还需要人工验证的测试。该方法可以提高部分效率，但是或许需要人工去分析严重结果。新旧版本对比测试：在版本升级测试中，如果有两套环境，可以通过同样的输入和操作来对比验证结果的方式来进行测试和自动化测试，自动化测试可以使用coco2.0工具，常用与规避数据计算逻辑复杂的结果对比测试。6.2.2 测试工具需求测试工具需求的列表，可以单独文档进行描述7 性能测试方案可裁减本节可根据是否做性能测试进行裁减7.1 性能测试工具需求测试工具需求的列表，可以单独文档进行描述7.2 场景名xxx17.2.1 场景概述此处概要说明此场景对应的业务流程，如果多个场景业务流程一致，只是数据方面的差异，可将场景概述提前在所有场景前进行统一描述。例如：用户登录系统-进入系统-退出系统7.2.2 执行策略设计此处描述对于这一场景的执行策略，如并发用户数量、重复次数、性能测试执行时间等内容，同时说明性能测试过程中重点监控的性能指标。为便于说明，可采用如下表格的形式，例如：性能场景执行策略（并发数、时长）备注登录系统，进入考场10用户并发，登录系统，进入系统 ，重复操作15分钟，退出。l 得到不同并发数下系统的性能指标l 对系统的容量做出估计l 列出测试的数据指标项有哪些，值在什么区间内20用户并发，登录系统，进入系统，重复操作15分钟，退出。40用户并发，登录系统，进入系统，退出。重复操作15分钟7.2.3 测试数据需求 测试数据准备需求说明7.2.4 性能测试结果分析方法和预期性能测试结果分析方法和预期的整体目标7.3 压力测试场景设计说明压力测试目的7.3.1 场景名XXX同性能测试场景设计