项目产品质量分析报告.doc

××××××系统V2.0
质量分析汇报

撰写:
审核:

××××××测试中心
××××年09月
质量分析汇报

1、 测试总结:
经过测试组根据产品开发中心即定测试规程, 进行了软件功效测试, 兼容性测试, 用户界面友好性测试, 安装及卸载测试, 性能负载测试。统计缺点密度符合质量标准。没有没有法修改严重错误和致命错误。
测试组认为该软件基础符合企业测试标准要求, 满足系统需求, 用户界面能友好易用, 能够正常安装和卸载, 性能测试及负载测试中显示总体性能合格。该产品经过产品验收测试。
2、 产品质量评价
功 能: 满足了用户需求, 功效, 步骤能够正常使用, 与需求分析汇报中要求基础符合, 但还有部分遗留问题需要下一版本修改完善, 不影响正常功效使用。
易用性: 操作界面洁净简单, 易学易用, 风格统一。适合通常见户操作使用。部分专业性较强部分经过简单培训, 也能够很快熟悉。
可扩展性: 功效可扩展性, 页面表现模块支持扩充。系统是一个无用户端软件纯Web模式交流平台, 简单方便。
兼容性: 本软件可兼容window/xp系统, 系统支持ie8.0浏览器。但不支持IE10.0浏览器。系统只能在JDK1.6及Tomcat5.5.25以上版本运行。现在产品统一开公布署环境是tomcat5.5.23,JDK1.5.04下无法使用。这是因为开源项目限制造成。
安装和卸载: 本软件安装, 卸载已经过测试检测, 能够正常使用, 并提供了对应安装手册供用户参考。部分问题因为时间原因作为遗留问题处理。
用户文档: 本软件提供了《××××系统安装手册》, 《××××系统技术白皮书》, 《××××系统快速入门手册》, 《××××系统二次开发手册》, 《××××系统用户使用手册》共5个手册已经过测试检测, 能够正常使用, 供用户参考。
安全可靠性 : 本软件登录退出安全控制能力符合需求分析汇报中要求, 在系统正常运行状态下, 出现服务器断电、 网络中止, 用户端断电、 网络中止, 数据库网络中止异常情况, 待异常情况结束后, 不会对系统造成破坏性影响。
经验和教训:
功效性测试较充足, 对需求中提出功效进行了较全方面测试。
此次测试在性能方面测试进行不是很充足, 原因是因为田广志出差去北京参与奥运项目实施。其她人员对性能测试工具应用不熟悉。造成性能测试展开较晚, 性能测试时间较紧。
其它:
效率方面:
最大负载测试: 40个用户（访客并发登录）为系统最好并发数（此时系统各项指标正常, 系统处于高负荷稳定运行状态, 系统状态趋于饱和。系统资源得到了充足使用。）
40个用户（访客并发登录）操作性能指标参数以下:
1. Average Transaction Response Time（平均对应时间）=15秒;
2． Hits per Second (Average) （点击率）=208.889;
3． Connections Per Second(Average)=8.889;
4． Total Throughput (bytes)= 8,754,029;
5．  Total Hits=1,880;
最大并发测试: 50个用户并发访问为系统最大并发数（此时Processor Queue Length（处理器队列性能指标）>2, 表明理器队列已经存在堵塞现象。估计伴随压力增大。将造成处理器出现无法完成用户请求而放弃操作现象。）
50个用户操作性能指标参数以下:
1. Average Transaction Response Time（平均对应时间）=20秒;
2. Hits per Second (Average)=213.636
3. Connections Per Second(Average)=9.091;
4. Total Throughput (bytes)= 10,937,937;
5. Total Hits=2,350;
性能测试过程评价:
将40并发与50并发测试结果曲线进行迭代对比后。能够确定: 伴随并发用户数量增加（压力增加）, 中央处理器（CPU）将是造成系统出现性能瓶颈关键原因点。处理器队列出现堵塞现象将造成大量并发用户无法按时完成用户请求响应操作。从而响应时间超出客观用户所忍受范围。个人认为响应时间不要超出20秒为宜。（人类潜意识里超出20秒中即达成了忍耐峰值。
每秒点击率（Hit Per Second）数值较高, 证实了本IM系统实施程序效率较高。从两个测试结果分析汇报（Load runner Analysis汇报迭代图（英文））中能够看出伴随并发登录人数越多, 点击率越大, 对服务器压力也越大。50访客并发每秒点击率达成为213次/秒。这个值是比较高。
系统吞吐量（Throughput）是指在性能测试过程中网络上传输数据量总和, 伴随并发登录人数增多, 吞吐量也在增大。并没有出现衰竭现象。其中40访客并发时吞吐量为8700000, 而50访客并发时吞吐量达成了10900000。系统吞吐量趋于稳定增加。但需要注意吞吐量很高, 则网络传输压力也很大。需要考虑局域网带宽问题。广域网不是此次测试范围。本人认为广域网也无法开展类似性能测试过程。此次测试都是在局域网环境下进行。忽略了网络带宽所受到影响。
每秒连接数（Connections Per Second） New Connections与 Connection shutdown值比较靠近。确定系统不存在严重连接池泄漏。

3、 结论性意见和提议等:
依据测试计划与对应策略完成了××××系统 V2.0版本各项计划中测试。现在××××系统 V2.0在测试软、 硬件以及相关配置环境下, 基础已经达成了预期目标, 测试结果基础符合测试需求, 能够交付用户使用。
该版本基础功效能够正确实现。基础符适用户使用手册和技术白皮书中要求。
该软件还存在部分提议性问题和设计缺点, 还需要在下一版本中继续修改继续完善系统。性能方面能够满足需求条件。

4、 技术经理确定情况:
测试结论符合实际情况, 并同意遗留问题在下一版本中修改。

测试经理签字:
日 期:
技术经理签字:
日 期: