自动路测平台功能交流.pptx

0目录LTE回放软件1栅格分析软件2网络统计指标分析软件3SmartTest后台4黑点跟踪平台5LTE回放软件概述、文件、参数、视图2概述LTE回放软件LTE ATU FilePlayerATU和商务终端测试的LTE LOG回放与分析，支持查看终端在各网络制式（LTE、TD、GSM）下的事件、信令、参数等。SD视图LTE参数分类视图TD参数分类视图GSM参数分类视图EVENTMessageChartMapTable参数公共参数LTE参数TD参数GSM参数文件文件下载进度3文件&参数n文件展示从自动路测服务器获取的LOG文件的下载进度n参数详细列举客户端能够解析的各参数，包括公共参数、LTE参数、TD参数、GSM参数；针对每个参数，点击右键，可以选择“在TABLE中显示”、“在MAP中显示”、“在Chart中显示”4视图nEVENT呈现测试LOG中时间、事件代码和事件，支持查询和导出。nMessage呈现测试LOG中时间、信令方向（上行、下行）、信令类型和信令消息，支持信令中具体内容查看、信令查找和下载5视图n分类视图点击LTE、TD、GSM网络制式下对应的视图类型，依据用户当前选定的时间点，呈现LTE、TD、GSM网络制式下的参数视图；例如LTE系统消息视图、物理层测量信息视图等。nChart利用面积或者直线形式展示参数取值变化；在Chart中点击右键选择“编辑”；选择要查看的指标，并配置“图线颜色”和“图线类型”。6案例起呼Setup未接通寻呼主叫信令窗口被叫信令窗口被叫“物理层测量信息视图”显示被叫LTE弱覆盖，被叫“系统消息视图”显示存在问题的小区ID等信息。7视图nTableLOG中参数信息的表格展示，支持：标记、继承、分组、导出。分分组继承承8视图nMAP在GIS地图上渲染参数，并支持渲染规则配置、工参加载、底图加载等。配置渲染规则，从“参数”中选关心的参数，进行渲染。通过将某个参数进行偏移设置，可以使参数与底图更好的匹配；也可以同时观察两个以上的参数的渲染情况。栅格分析软件概述、单网单指标对比、单网多指标对比、多网性能对比、历史指标对比、小区管理、案例10概述栅格分析软件ADTP Carrier原有渲染方式：以采样点为单位进行渲染，每个采样点包括GPS信息和测试指标值。采样点渲染能直观的呈现测试结果，但其缺点在于：（1）重复测试：当测试区域存在重复测试时，例如测试时在网络质量较好的路段多次测试，将会使统计结果良好的采样点数增多，良好采样点占比提升，无法真实反映网络状况；（2）测试对比：由于采样点以经纬度为唯一性标识，不同时期的测试数据很难保证路线完全相同和历史采样点的经纬度信息完全相同，因此无法开展历史数据的对比以及不同网络间的数据对比分析；（3）大数据量：传统渲染方式，需要对测试LOG进行下载和解析，需要耗费大量的时间和资源。特别是对于大型城市，进行一次GIS渲染通常比较困难。11栅格化渲染：依据测试设备上报的GPS信息，将其指定的地理位置划分为50*50的军事栅格；每个栅格都有唯一的标识，同时每个GPS信息都只对应唯一的栅格编号；在自动路测服务端，将测试信息以一定的统计方式（平均、最大、最小、计数）等进行栅格预统计。栅格分析软件建立任务，查询栅格预统计的数据，进行渲染分析。栅格预统计ATU商务终端LTE-FI栅格分析软件栅格分析软件概述12概述栅格化渲染优势：（1）提高渲染效率：软件从栅格预统计库请求需要渲染的指标，而不需要加载和解析全部LOG；栅格化的统计减少了样本数量，栅格样本数量和原始样本点数量对比如下（以北京全网格LTE集团测试为例）（2）减少指标波动性带来的影响：软件对同一栅格内的测试数据进行统计操作，以平均值、最大值、最小值等形式表示栅格测试值，从而减少了指标波动性对统计分析带来的影响。（3）便于进行栅格对比和网间对比：测试GPS点对应唯一的栅格，同时栅格编号唯一，因此测试数据的对比有统一的维度可依；同时，由于军事栅格为一种通用的栅格划分方式，也便于进行自动路测数据与其他设备的测试数据的联合分析。参数LOG数量栅格样本数量原始采样点数量比例PCCPCH-RSRP2818730932066722.7%DPCH-CIR8181829873342.7%APP-THROUGHPUT7283851684014%13概述客户端支持四类渲染任务，支持的最大渲染范围为地市级。SD单网单指标对比单网多指标对比多网性能对比历史指标对比渲染任渲染任务单个网络制式下的单个指标的栅格渲染单个网络制式下多个指标联合的栅格渲染多个网络制式下的同类型指标的栅格对比与渲染单个网络制式下的两个时间段的历史指标对比与渲染14单网单指标对比n单网单指标对比（支持ATU、商务终端、LTE-FI）（1）选择查询条件添加设备类型、开始时间、结束时间、测试级别、测试目标、关联条件、一级域、二级域、网格及测试计划。（2）选择数据选择运营商、网络制式和业务类型下对应的所要渲染的测试指标。（3）指标渲染配置切换渲染指标（“选择数据”步骤中所选择的指标），选择渲染域，配置门限（对每个门限配置“最大值”、“最小值”、“渲染颜色”）。15单网单指标对比（4）地图渲染l以栅格为最小粒度、按照渲染分段规则，渲染测试结果；从而掌握测试情况、发现测试问题，例如LTE弱覆盖、低下载速率等l按网格展示渲染结果l支持高德地图，从而定位网络问题的地理位置16单网多指标对比n单网多指标对比与“单网单指标对比”任务相比，“单网多指标对比”任务可以添加多个渲染指标；支持自定义每个指标的门限（关系符&数值）和渲染颜色；点击确定后，可以查看联合指标的渲染结果。n多网性能对比（针对GSM、TD、WCDMA、EVDO、CDMA网络）添加渲染指标，选择要分析的主体网络，配置各渲染门限的渲染颜色（门限为（以四个网络制式对比为例）：“优于或者等于三个网络”、“劣于一个网络”、“劣于两个网络”、“劣于三个网络”）；点击确定后，可以查看多个网络同类指标的对比渲染结果。17历史指标对比n历史指标对比（针对GSM、TD、WCDMA、EVDO、CDMA网络）（1）选择渲染任务选择两个已经完成的“单网单指标对比”任务，且这两个任务时间不重合且包含相同统计指标（2）选择数据选择运营商、网络制式和业务类型下对应的所要渲染的测试指标（3）指标渲染配置与查看渲染结果选择渲染指标，设置指标门限（即判断指标为良好的门限值）；配置各渲染门限的渲染颜色（门限为：“由差变好”、“由好变差”、“都好、时段2变好”、“都好、时段2未变好”、“都差、时段2变好”、“都差、时段2未变好”）18小区管理n小区管理：实现工参数据的导入、导出、上传、下载、显示、修改等功能（1）工参导入将本地工参导入客户端，设置工参描述信息，将工参字段与客户端关键字段进行匹配。（2）工参导出将客户端工参导出为本地文件（Excel或csv)（3）工参上传用户将工参上传到服务器，同一用户在相同网络制式、二级域、相同数据时间（年、月）下只能上传一份工参数据。（4）工参下载用户可以从服务器上查询已经上传的工参文件，并下载到客户端。19小区管理（5）工参显示）工参显示l表格展示：在客户端上以列表的方式展示工参信息，并支持工参编辑。lGIS展示：在GIS地图上渲染小区，并依据用户选择的标签，展示小区信息。20案例多指标联合分析应用案例考虑覆盖是影响应用层下载速率的一个因素，可以利用“单网多指标”联合渲染方式，查询并渲染覆盖=-100，应用层下载速率1Mbps的区域。某次LTE测试的覆盖图和应用下载速率的栅格渲染图如下，从渲染图中可以发现弱覆盖和应用层下载速率较低的区域。21案例历史对比案例两次测试对比，呈现指标变化情况。两次TD测试应用层下载速率渲染网络统计指标分析软件概述、快捷统计、统计报表、集团质量分析23基本报表基本报表自定义报表自定义报表概述网络统计指标分析软件ADTP Dargoon支持中国移动自动路测平台、室内测试子平台、商务终端子平台的统计指标分析的客户端工具快捷统计计划统计计划统计网格统计网格统计巡检统计巡检统计集团质量分析设置方案设置方案生成任务生成任务实现功能平台基本测试报表查看与下载用户自定义报表的编辑与查看针对测试计划、网格、和巡检测试的快捷统计质量评分体系编辑和评分结果输出统计报表24快捷统计n计划统计：设定查询条件（开始日期、结束日期、测试目标、测试级别），选择至少一条计划，查看各网络制式下的统计报表n网格统计：设定查询条件（开始日期、结束日期、测试目标、测试级别），选择至少一个网格，查看选定网格的统计报表n巡检统计：设定查询条件（开始日期、结束日期、测试目标、测试级别），其中，测试级别只可选择“集团巡检”“集团秘密测试”“省巡检”，从而查看各网络制式下的统计报表采用默认特定统计条件的方式，提供快捷的指标统计25统计报表基本报表DT基本报表CQT基本报表商务终端基本报表基本报表实现中国移动自动路测平台、室内子平台、商务终端子平台的“多维度报表”下载；客户端报表下载没有对浏览器版本的依赖，较为稳定。自定义报表DT自定义报表CQT基本报表（待开发）商务终端自定义报表自定义报表实现中国移动自动路测平台、商务终端子平台的“自定义报表”下载；支持报表定制，满足用户个性化需求。26统计报表-自定义报表优势通过对基础字段的运算规则定义，可以依据自身需求编辑所需要的指标，而不再局限于平台基本报表所能呈现的报表内容和形式。步骤1.编辑自定义指标：用户对各网络制式下、各种测试类型的基础字段进行自定义，规定运算规则2.编辑自定义报表：设置自定义报表的指标和排列方式3.查看自定报表：设定筛选条件，查看并导出报表27统计报表-自定义报表编辑自定义指标n基础表达式：通过加、减、乘、除等基本四则运算编辑指标表达式n高级表达式：通过程序编程，编辑高级表达式n步骤步骤1.设置指标基本信息：名称，数据类型，是否为百分比格式，保留小数位数2.指标编辑：基于对测试LOG解码分析得出的预统计指标，通过基础表达式和高级表达式两种方式编辑指标28统计报表编辑自定义报表查看自定义报表n添加表头：从自定义指标中绑定一个指标作为表头，并为表头命名n设计表格样式：通过拖动表头，设计报表呈现样式。n设置筛选条件：选定日期、测试计划等筛选条件n查看报表：点击创建的自定义报表，查看报表内容。29案例自定义报表商务终端语音业务基本报表中，没有“LTE回落到GSM成功次数”该指标项，如果要统计该指标，则可以采用“自定义指标的方式”。1.编辑自定义指标“CSFB回落到GSM成功次数”2.编辑自定义报表“商务终端语音报表”，添加该指标3.查看该自定义报表，获得指标“CSFB回落到GSM成功次数”30集团质量分析集团质量分析功能实现质量评分体系的编辑，评估任务生成和评分结果查看设置方案编辑评分体系方案（设定评分指标、评分规则等）生成任务选定评分方案下载测试数据或者导入外部数据评分计算31集团质量分析流程（1）设置评分项分组；（2）为各分组添加指标；（3）设置评分粒度；（4）对每一粒度设置评分值；（5）对每个评分项编辑评分规则；其中：如果评分值为空，则只显示指标值，不显示评分设置方案方案模版为表格样式，分为以下几列n评分项分组：评分项各分组名称；n分组分值：标识该分组的满分；n评分项：某评分项分组下所涉及的全部指标；n粒度：可以添加多列，对每个粒度分别输入分值。32集团质量分析设置方案评分粒度n设定测试级别n设定测试目标设置方案评分规则n编辑评分上限值、下限值n针对每个粒度的评分指标，通过程序代码编辑评分规则设置方案评分项n从自定义指标中添加评分项n添加自定义评分项，即基于多个自定义指标的评分项n添加外部指标评分项，该评分项在生成任务时需从外部导入33集团质量分析（1）任务基本信息设置：添加评估方案；（2）数据及分组设置：确定数据维度和分组，其中，对数据的分组可以支持不同分组分别进行评分算法设置和评分；（3）评分算法设置：确定每个数据分组的评估算法；（4）时间范围及外部数据设置：确定每个评估粒度的数据时间范围，如果方案中设置了外部数据，则对外部数据进行导入。（5）任务生成完成，可下载评分表，包含“评估结果”和“平均指标评分表”。生成任务34集团质量分析点击下载数据，可以查看excel格式的输出结果查看任务信息查看任务状态1.评估结果2.评价指数评分详表SMARTTEST后台测试计划管理、统计分析、webGIS展现、问题上报与追踪36WEB侧根据时间、地点、测试级别配置测试任务。测试任务根据需要配置FTP、HTTP、VIDEO、PING等单一或复合业务测试。测试计划管理测试计划管理包含平台下发统一测试计划和手机端自行定制测试计划两种方式，既能满足统一任务测试的目的，又方便用户灵活定制，因地制宜。手机侧通过“刷新”可接收服务器下发的统一测试计划，也可在手机端通过“新增”方式配置FTP、HTTP、VIDEO、PING等单一或复合业务测试。37统计分析添加添加统计任务的添加界面中通过时间、手机系统、网络制式、运营商、区域、维度等条件的设置，基本可以满足数据统计需求。另外的数据质量管理更是可以由系统自动剔除突变数据，解除突变数据的测试结果的影响。根据手机端软件测试业务不同，平台的统计也对应分为专业版和大众版。查看查看统计结果按业务分为FTP、FTP详细、HTTP、HTTP详细、PING、PING详细、视频及视频详细事件。报表附有导出功能，可将数据导出为excel格式，方便二次分析。38webGIS呈现-统计报表webGIS功能分为统计报表展现，GIS呈现和系统设置三项。统计报表可根据图中条件进行简单的统计，并给出某个选中指标的折线图，结果列表有排序功能。统计结果可以csv的形式导出。通过点击第一列做更小粒度的统计，点击某省名称，之后会显示选中省下地市一级的统计结果，再进一步则是小区级别的结果统计。39webGIS呈现-GIS呈现webGIS功能分为统计报表展现，GIS呈现和系统设置三项。GIS呈现分为全国、省及地市级别的呈现方式，展现的信息也是逐级详细，从整体概况到各地市情况再到某测试点的具体情况。全国省地市这里可以看整个地市对应条件的测试点分布，异常事件分布及工参分布。可在地图上做测试点和对应工参的连线。地图上可显示选定测试点或工参的详细数据。40webGIS呈现-案例GIS问题指标定位案例以LTE网络的FTP下载速率过慢的情况为例，在地图上找出下载速率不足5M的测试点信息。3、通过设置查询条件中的分段（红色框中区域），只选中红色分段，将过滤出lte网下FTP下载速率不足5Mkbps的测试点，进而定位到测试点所在的小区。1、通过设置查询条件过滤出成都7月份LTE网络下FTP下载测试点的分布。2、做好小区关联之后看到gis上的效果如左侧图中所示。41webGIS呈现-系统设置webGIS功能分为统计报表展现，GIS呈现和系统设置三项。系统设置由四部分组成，指标颜色设置、指标阀值设置、GIS图源切换及系统详情。指标颜指标颜色设置色设置指标阀指标阀值设置值设置系统详系统详情情GISGIS图图源切换源切换设置指标分段颜色选择GIS地图来源设置指标分段依据显示GIS功能升级信息42问题上报及跟踪显示所有由手机端上报的问题，按地理位置信息及业务类型做了归类。黑点跟踪平台未归档黑点管理、档案管理、统计分析、GIS呈现、申诉管理44网络问题全生命周期管理结构问题全生命周期管理采用“集团-省公司-地市分公司”的统一组织结构，大家共享一个平台，各自分析数据、建立问题、跟踪进程、管理解决并共享经验45网络问题全生命周期管理层级网络问题管理分为多个层级，从最下层的原始数据，依次上升至问题、黑点、档案，不同的管理层级对应不同的工作要求46网络问题全生命周期管理流程流程分为管理和生产两方面，管理着重在工作责任归属和进度管理方面，生产着重在问题分析与讨论方面，共同协作促进工作47在问题管理中显示的是平台上所有问题，可以通过点击问题前的“+”查看问题详情。也可从中知道问题归属的黑点甚至所属档案（黑点已经归档的才有所属档案）。未归档黑点管理黑点管理包含了问题管理和未归档黑点管理两部分，对应的正是黑点的发布和界定。在这里可以查看所有上报的问题，并可以进行黑点归档。未归档黑点中任然可以查看黑点下的问题及问题详情。在展现黑点详情界面中划分责任属性，给出解决时限则可将黑点归档，由省或地市公司去推进黑点的解决。48档案管理每个省或地市都包含五类档案：核心网维护、无线网优化、无线网规划设计、无线网工程、无线网维护。黑点归属档案是由黑点的责任属性决定的，针对档案内黑点，用户可进行回复讨论、生成结论，推进黑点解决状态或者对黑点提出申诉。对应的是对黑点的分析、验证和确认。针对问题发布各自讨论意见，互相交流学习，分析黑点生成原因，并可上传附件进行说明。经过一段时间讨论，得出的阶段性的结论可作为决议发布，决议将置顶显示。黑点状态改变或申诉也是决议的一种。黑点归档后黑点状态即为“分析”状态；“验证”状态的黑点即黑点的问题原因已经解决，处于内部验证解决效果阶段；“确认”状态即“解决”状态，内部验证通过后，将状态置为“确认”，进入系统验证阶段；系统验证通过，黑点状态将自动变为“关闭”。期期间可能会因可能会因为新新问题的加入而的加入而导致黑点状致黑点状态回退。回退。如果对黑点的状态或黑点归属阶段有异议，可针对黑点提出申诉，由管理者去审批申诉是否成功。回复决议状态改变申诉49申诉管理管理者针对各省或地市提出的申诉做批复。申申申申诉诉诉诉申诉通过申诉通过申诉通过申诉通过管理者会根据申诉请求调整黑点。管理者会根据申诉请求调整黑点。申诉驳回申诉驳回申诉驳回申诉驳回黑点维持申诉前状态不变，并给出驳回理由。黑点维持申诉前状态不变，并给出驳回理由。50GIS呈现及统计-统计报表webGIS功能分为统计报表展现，GIS呈现和系统设置三项。统计报表分整体概况和详细指标两种呈现方式。整体概况整体概况整体概况整体概况以饼图和文字描述的形式将平台当前黑点的整体情况从黑点状态、黑点类型及黑点网络制式的角度做了简单分析。详细详细呈呈呈呈现现从饼图根据黑点状态、黑点类型或黑点网络制式进入到各省甚至地市统计结果，以折线图的形式做对比。51GIS呈现及统计-GIS呈现webGIS功能分为统计报表展现，GIS呈现和系统设置三项。GIS呈现分为全国、省及地市级别的呈现方式，展现的信息也是逐级详细，从整体概况到各地市情况再到某测试点的具体情况。全国省地市黑点的大小会根据黑点下问题个数多少而变化。可以查看某黑点下的问题列表。可在此处发布对某个黑点的讨论。与web界面看到的讨论信息是一致的。52GIS呈现及统计-案例未解决黑点定位案例以LTE网络下未解决黑点情况为例，在地图上找出未解决黑点比较集中的区域。通过设置查询条件过滤出攀枝花7月份LTE网络下还未解决的黑点分布。之后不断放大地图会发现几个黑点比较集中的区域，如下图即为其中一个。在这3个黑点中还有一个黑点明显因为当前黑点下出现多次问题而导致黑点变大。谢谢！