自动测试规范化管理VOlte总结报告

自动测试规范化管理目录测试整体情况测试过程中的问题—二后续工作安排三2第一轮工作-设计院3第一轮测试安排设计院测试38个城市、344个网格、1680个CQT点。截止6月底设计院测试全部完成。测试单位测试场景测试城市(或线路）数量（第一轮）测试内容完成度设计院DT网格38个城市、344个网格38个城市、344个网格100%CQT点38个城市、1680个点38个城市、1680个点100%地铁4个城市、48条4个城市、48条100%高铁4条4条100%第一轮工作-省公司4第一轮要求省公司测试329个城市的1957个网格、18735个点、15条高铁、86条地铁、

43条普铁、39条高速,100个景区；实际完成324个城市的1947个网格、18370个点、15条高铁、86条地铁、43条普铁、39条高速、100个景区；未完成原因为：1、因为维稳问题新疆3个地区喀什、和田、阿克苏，四川2个地区甘孜、阿坝不进行测试。2、西藏地市规模过小，实际可测CQT点较少，所以调整了CQT点的测试量，调整后西藏总计为190个点。测试单位测试场景测试城市(或线路）数量（第一轮）测试内容完成度省公司DT网格329个城市、1957个网格329个城市、1957个网格100%CQT点329个城市、18735个点329个城市、18735个点100%高铁15条往返15条100%地铁20个城市、86条往返86条100%动车、普通车43条往返43100%风景区100个点100100%高速39条单程39条100%VOLTE测试5设计院VOLTE测试，安排四人两组，每组使用鼎利的pioneer和惠捷朗的CDS设备各一台，计划安排测试五个试点城市（杭州、广州、南京、长沙、福州），6个非试点城市（北京、上海、深圳、无锡、苏州、济南），共421个网格，深圳、广州申请延后测试，截止目前测试完成情况如下：测试单位测试场景要求测试城市、网格数量测试内容完成度设计院城市11个城市9个城市82%DT网格421个网格313个网格74%设备问题—鼎利6第一轮遇到的问题并且已经通过升级版本解决的：1、HTTP浏览要等到文件加载完毕才算完成（浏览时延）。2、删除业务间的DETACH过程（安徽提出导致有TDS信令产生）。3、视频业务第三方解析网站植入了广告，解析异常（使用了免费公共网站）。4、业务发起机制（先触发业务，在建立Socket链接，DNS解析等）。需要下个版本解决的：1、关机会导致设备给联通打上掉线标签；2、HTTP浏览缺失必选网站会引起业务终止执行；3、HTTP浏览、视频遇DNS解析失败无需等待30秒再判为失败；4、搜狐视频成功率低。设备问题—诺优7第一轮遇到的问题并且已经通过升级版本解决的：1、掉线时间起点与鼎力保持一致。2、测试间隔控制不太精准。3、电信手机无FDD覆盖不能发起业务。需要下个版本解决的：1、http浏览上报相同的业务流量，但瞬时速率不同；2、搜狐视频不能解析；3、HTTP下载上报的瞬时速率有负值；4、SIM卡兼容性问题（雅思拓SIM卡需要锁网指令才能激活）流程梳理—ATU管理办法8管

职责ATU管理办法：明确集团管理岗、测试组、分析组和研发组的职责管理岗职责1、制定完善设备版本管理办法2、建立问题跟踪机制3、软件版本、补丁核准制4、远程升级测试组职责1、汇总收集前端测试问题2、版本验证测试3、远程升级分析组职责1、汇总收集前端分析问题2、版本验证测试3、远程升级研发组职责1、汇总收集前端需求2、修订规范研发3、验证测试目录测试过程中的问题测试整体情况二—后续工作安排三9省公司完成集团规定测试方面存在的问题10设备准备问题和未按测试规范执行问题第一轮测试至今仍有部分省公司设备数量未达到使用要求，部分省因设备到货不足等情况未按照集团测试规范执行测试。希望省公司尽力协调设备，能按测试规范进行测试。下表为各省LTE设备、LTE设备中含竞对FDD模块设备、CSFB设备数量：省LTE设备数量LTE中含联通，电信FDD的CSFB设备省LTE设备数量LTE中含联通，电信FDD的CSFB设备安徽794351上海391635北京41220辽宁884053福建1026451内蒙古802577甘肃501925宁夏405广东319184178青海24713广西3971山东762624贵州30425山西894644海南28811陕西904542河北773030四川224138128河南8618113天津25818黑龙江863438西藏421湖北762256新疆28122湖南1235889云南1496070吉林652224浙江1928265江苏43268重庆502425江西541752全国合计242110381419省公司完成集团规定测试方面存在的问题项目管理使用问题、上报计划不规范问题上半年由于项目管理功能存在部分BUG，所以第一轮的测试计划采用了人工上报的方式，

在上报的测试计划中，部分省市未按提供的模板进行上报。下半年省公司要明确所有测试计划都在项目管理中配置，集团不在对DT计划进行汇总收集。问题1：测试设备号、计划版本号信息上报错误，导致不能在平台上找到省公司上报的“设备号-计划版本号”相关数据。计划版本号填错设备号填错11省公司完成集团规定测试方面存在的问题项目管理使用问题、上报计划不规范问题问题２：计划附属信息未按照集团要求上报，如场景信息，有无室分信息等，导致在对省内数据统计汇总过程中，不能根据附属信息准确输出相关维度的指标。该场景不含在以下八大场景之中室内场景大型商超商务办公楼电影院/体育馆/娱乐场/步行街等人流密集场所大专院校交通枢纽居民小区医院宾馆酒店12省公司完成集团规定测试方面存在的问题问题３：测试计划信息填写不规范，上报表格中每行只能填写唯一计划名称，不能填写多个计划，如果某测试点确实有多个计划，按顺序填写成多行即可，并且上报的计划信息中不能带“空格符”、“回车符”等特殊字符，防止提取计划信息失败问题４：省公司配置广域测试计划（在14年就强调过不要配置广域测试计划），会导致统计数据异常13省公司完成集团规定测试方面存在的问题问题５：测试点名称及内容书写规范，尽量详尽，以便针对“点级”进行汇总商业街属于“大专院校”场景？提高上报计划准确性和效率的注意事项14集团密测过程中存在的问题15FTP服务器维护问题在集团密测过程中，有部分省市FTP服务器存在问题。目前集团已对巡检过程中各省服务器问题情况做详细记录。希望各省加强对省内服务器的维护工作。集团密测过程中存在的问题16测试纪律问题由于集团测试要求是对各省保密抽查的测试，所以希望省公司不要干预影响前台测试，目前通过前台测试人员反映，部分省存在打探测试人员电话，打探测试省份开始时间，打探测试网格先后顺序，优先测试号码，存在跟车测试，监控测试号码和测试人员电话等情况。希望各省加强自身的纪律，减少对集团秘测的影响。目录后续工作安排测试过程中的问题三—测试工作具体内容二17集团相关接口人18省公司对自动测试接口问题反馈目前省公司测试过程中会遇到各种问题，需要联系集团或者设计院相关人员处理。目前各事项接口人分工如下：在平台上增加测试设备ID，归口沈锋炜；工单安排、测试规范、测试计划上报、测试进度统计，归口齐景立；平台故障、查询设备状态、处理统计异常log、平台新功能宣、各类指标统计异常归口张书铭；平台地图的修订申诉、省公司更改测试账号密码归口朱凯。开展省内测试相关工作调查19对各省自动测试工作、ATU设备到货情况、测试费用等进行摸底调查计划开展对各省自动测试工作及测试费用进行摸底调查，了解各省对自动测试平台使用是否充分。对第一轮、第二轮省公司测试完成情况进行详细统计。第二轮完成情况可以通过省公司上报来统计，但第一轮完成情况应当通过统计第一轮省公司上报计划的有效情况来进行统计，需分析组协助。本次摸底调研还想了解省公司除完成集团要求开展的测试任务外，还利用自动测试平台进行什么工作，如各省是否通过自动测试平台开展省内考核，各地市有没有例行测试，大型活动的应急保障测试等是否使用自动测试平台。本次摸底调查还将对总部采购已经完成的室外G网一、二期，T网一、二期，室内测试设备等到货情况进行一次摸底，对省公司使用的非招标设备情况也进行相应摸底调查。本次摸底调研对省公司测试费用情况进行初步摸底，调研外包和自理费用各省所占的比例以及整体的费用情况。测试规范修订20梳理并组织修订测试规范，包括测试方案及设备技术规范修订原有测试规范，针对新业务制定新的测试规范。目前制定的规范如下：收集省公司测试意见，根据省里和设计院测试中遇到的问题或者相关需求，重新修订原有测试规范，如竞对测试的具体要求，项目管理的使用，流媒体业务地址的使用建议等。工作流程梳理梳理自动测试组织流程，包括内部抽测流程及管理省公司测试的流程内部抽测的流程通过第一轮的测试，相对较好但是依然存在部分问题节点。其中7月修改了之前的保密流程、FTP服务器验证流

程、设备升级等关键节点的流程。管理省公司测试的流程这块目前主要问

题集中在测试计划汇总、