单兵系统测试方案V30-最终版

目录1引言部分1.1编写目的1.2项目背景1.3术语和缩略语1.3.1术语1.3.2缩略语1.4参考资料2测试概要2.1测试目的2.2测试范围3测试准备阶段3.1测试时间及地点3.2测试厂商3.3测试组织与职责3.3.1测试的组织3.3.2测试参加单位、人员3.3.3测试机构职责3.4测试环境与配置3.4.1软硬件环境4测试流程5测试进度6测试环境组网拓扑6.1音视频类单兵系统组网拓扑6.2业务类单兵系统组网拓扑7测试用例设计7.1音视频类单兵系统测试7.1.1平台测试7.1.2终端测试2/337.2业务类单兵系统测试7.2.17.2.288.1评价原则8.2评分方法8.3评分标准3/331引言部分1.1编写目的编写《单兵系统测试方案》主要规定了单兵系统测试的程序、方法、流程和评判标准，用于指导客户对单兵系统进行验证并指导测试方对单兵系统平台软件和单兵终端进行测试，以有效保证系统产品的质量。1.2项目背景以建设适应现代海关建设要求的海关指挥体系为目的，按照情况明、数字准、责任清、作风正、工作实的要求，建立“信息全面、反应迅速、指挥有序”的纵向指挥有力、横向协作紧密、整体运转高效有序的全国海关监控指挥体系。全国海关监控指挥系统主要包括硬件支撑系统，支撑平台，场地基础设施以及软件应用系统建设、安全运维管理和标准规范体系6个部分。单兵系统作为全国海关监控指挥系统的重要组成部分，主要用在业务现场突发事件的紧急处置和调度；业务现场的监管工作、查验和放行等工作；缉私行动过程中的分组、抓捕和调查取证中。当海关网络不能覆盖的野外、非设关地、海上等区域，处置现场海关关员需通过携带便携式装备，通过3G/4G无线移动网络，与指挥中心进行音视频通话，接收指令下达，进行业务操作和专项行动等，以满足工作的需要，提高海关人员的工作效率。1.3术语和缩略语1.3.1术语本方案术语但不限于如下术语。1、总体设计方案《金关工程（二期）全国海关监控指挥系统基础设施建设工程总体设计方案》2、综合调度系统监控指挥综合调度系统3、初设《海关金关工程（二期）初步设计方案和投资概算报告》1/334、基础设施指导方案《海关金关工程（二期）全国海关监控指挥中心基础设施建设指导方案》5、一级指挥中心海关总署为一级监控指挥中心6、二级指挥中心直属海关为二级监控指挥中心7、三级指挥中心隶属海关为三级监控指挥中心1.3.2缩略语本方案缩略语但不限于以下缩略语。H.320－ISDN)上进行多媒体通信的标准。H.322：在有QoS保证的局域网上进行多媒体通信的标准。H.323：在无QoS保证的包交换网络上进行多媒体通信的标准。H.263是由ITU-T码器。H.264：是国际标准化组织（ISO）和国际电信联盟（ITU）共同提出的继MPEG4之后的新一代数字视频压缩格式。1.4参考资料本方案参考依据但不限于如下方案进行编写。《海关金关工程（二期）初步设计方案和投资概算报告》；《金关工程（二期）全国海关监控指挥系统基础设施建设工程总体设计方案》；《安全防范视频监控联网系统信息传输、交换、控制技术要求》GB/T28181-2011；《安全防范工程技术规范》GB50348-2004；《民用闭路监视电视系统工程技术规范》GB50198-1994；《会议电视系统工程设计规范》YD5032-2005；《会议电视系统工程验收规范》YD5033-2005；2/33《视频安防监控系统工程设计规范》GB50395-2007；《视频显示系统工程技术规范》GB50464-2008；2测试概要2.1测试目的目的在于检验单兵系统功能的正确性、系统的稳定性和性能指标，测试人员根据此方案依次进行系统测试，并按照测试评判准则编制测试报告，并为客户开展后期工作提供参考。2.2测试范围本部分主要适用于单兵系统管理平台软件和单兵终端的测试及质量评定。3测试准备阶段3.1测试时间及地点测试时间：2014年7月21日测试地点：海关总署机房3.2测试厂商序号参测厂商华平测试设备品牌调试时间7月21日测试时间7月21日123456789海康7月22日7月22日电信7月23日7月23日联通7月24日7月24日真视通佳讯飞鸿天地阳光迈可行普天7月25日7月25日7月28日7月28日7月29日7月29日7月30日7月30日7月31日上午7月31日下午7月31日上午7月31日下午上海精视3/3310平台兼容性测试8月1、4、5日8月1、4、5日3.3测试组织与职责3.3.1测试的组织单兵系统测试工作主要由分项集成单位组织安排。主要由组织方、受测方、监理方共同实施。设备商为受测方，信息中心参与。由用户委派的监督人进行全过程监督，评审小组在测试过程与受测方协同完成测试并对测试结果进行评审。3.3.2测试参加单位、人员参加测试的人员包括使用单位、监理单位、设计单位的代表和一定数量的技术专家，具体参加人数见下表：测试单位测试角色监理方人员数量备注北京赛迪信息工程监理有限公司长城计算机系统与软件有限公司组织方受测方华平受测方受测方受测方受测方受测方受测方受测方受测方受测方海康电信联通真视通佳讯飞鸿天地阳光迈可行普天上海精视3.3.3测试机构职责系统测试时要协商组成测试小组，测试小组针对单兵系统的功能性、性能4/33稳定性和兼容性进行测试，并根据评判准则出具公平、公正、合理的测试报告，最后提交科技司，作为开展后期工作的参考。测试小组组织机构如下图所示图13.3.3.1测试经理1、负责测试团队管理工作；2、负责带领测试团队，设计、执行、优化测试过程,丰富测试手段，引入新的测试框架和测试策略；3、与其他测试人员、开发人员、项目管理人员沟通和协作，推动整个项目的顺利进行；4、维护测试流程，统计和分析测试结果，提高测试效率和质量。5、负责测试报告的审核。3.3.3.2主要测试人员1、根据需求制定测试计划，设计测试数据和测试用例；2、有效地执行测试用例，提交测试报告；3、准确地定位并跟踪问题，推动问题及时合理地解决；5/334、完成对产品的集成测试与系统测试，对产品的软件功能、性能及其它方面的测试。3.4测试环境与配置3.4.1软硬件环境应以下基础环境进行准备。3.4.1.1网络测试基础环境准备信息中心准备序号设备名称设备用途数量备注测试场地供电及网络基础环境1提供220V电源接口1234虚拟化应用服务器互联网固定IP地址交换机提供海关业务系统访问互联网接入11124口，带端口限速功能3.4.1.2测试相关设备准备受测厂商准备序号设备名称单兵服务器设备用途信令转发数量备注1234567821312121视频应用发布服务器音视频单兵终端音视频单兵终端业务类单兵终端单兵调度终端高清电视机信息发布3G单兵含3G卡)4G单兵含4G卡)信息采集接收单兵音视频信号42寸液晶电视用于单兵调度终端音频音箱6/33回放9DVD播放器秒表含测试碟110网络延时测试2111麦克风显示器网线用于声音同步测试设备调试12213网络连接若干114无线路由器网损仪WIFI接入15网络丢包14测试流程测试过程大体分为两个阶段：准备阶段与测试阶段。在准备阶段，被测试方的主要工作是在测试地点针对单兵系统的测试需求进行基础测试环境的准备工作，其中涉及设备的上架安装、配置、测试设备载入测试规定要求的操作系统软件，设备板卡模块安装，线缆对接，软件功能配置调试等。另外，被测试方需要根据测试要求准备相应的参测设备，并向组织方提交测试设备型号清单。测试阶段主要根据测试用例对单兵系统进行逐一测试，在功能性、性能稳定性、兼容性分别进行测试，最后并出具详细的测试报告。具体测试流程如下图所示：7/33准备阶段测试阶段5测试进度本次测试时间为7月21日至8月5日（不含节假日），共计12天。计划7月15日至7月18日将测试设备发至测试地点（海关总署），并进行环境搭建；7月21日至8月5日为正式测试阶段，计划每个测试厂商1天；最后测试平台的兼容性（测试时间为8月1、4、5日）。8/336测试环境组网拓扑由于单兵系统主要有两种应用：业务类和音视频类。根据单兵系统应用将测试主要按照单兵系统应用进行搭建，并依次从系统的功能、性能和兼容性三个方面进行测试。9/336.1音视频类单兵系统组网拓扑10/336.2业务类单兵系统组网拓扑11/337测试用例设计7.1音视频类单兵系统测试7.1.1平台测试测试结果12可设置4分屏模板，接收2个单兵终端视频图像，在不退出情况下单兵终端视频画面能互换操作。□模板数≥15□模板数＜查看相应界面验证。15□模板数=03□分屏＞30□30≤分屏查看相应界面验证。□分屏＜10456图像抓拍日志功能提供单兵终端登录日进入单兵接入服务器，查看单兵终端上下线□通过12/337能访问平台登录界面。用2台单兵接入服务器模拟成海关总署和直属海关平台，且构成二级联，海关总署单兵□通过终端登录海关总署单兵服务器，同时直属海□不通过关单兵终端登录直属海关单兵服务器。海关总署单兵接入服务器能看到直属海关所□通过平台分级管多级平台具备独立的1有的单兵账号。□不通过通过服务器管理页面查看可接入的单兵终端□通过2接入路数。在单兵接入服务器上建立多个设备账号，看其他厂家单兵终端能否使用该该账号正常登陆，可与其他厂家单兵终端进行交互。1单兵设备接单兵平台兼容性入（表-1音视频类单兵平台测试）7.1.2终端测试7.1.2.1网络适应性测试测试结果环境：测试人员携带单兵终端到用户指定地点（覆盖3G、4G网络）进行测试13G图像质量网络测试观察单兵终端回传单兵接入服务解码图像上稍有可觉13/33为使用2图像延时<1秒单兵终端对准一个现场测试人员，唇音同步<1秒跳帧、拖影、停顿等现象。2为使用2图像延时<1秒图像延时唇音同步单兵终端对准一个现场测试人员，唇音同步<1秒14/33让测试人员进行1到10的手势报声音的吻合度。（表-2音视频类单兵终端网络适应性测试）7.1.2.2性能指标测试（有线网络测试）测试内容测试结果测试环境：以DVD播放一段视频(含语音及字幕)，并显示播放的时钟(精确到秒)。将DVD视频输出作为单兵的视频源或作为单兵摄像头拍摄的视频源，通过单兵进行编码，现场同时显示原始图像和解码后的图像。比较解码图像和原始图像的清晰度和流畅程度1比较解码图像和原始图像的展现的时钟值差观察解码图像中DVD字幕与演员比较解码图像和原始图像的清晰度和流畅程度2解码图像上有损伤或干扰，但可接受终端编码D1、15/3315帧以上比较解码图像和原始图像的展现的时钟值差观察解码图像中DVD字幕与演员比较解码图像和原始图像的清晰度和流畅程度3比较解码图像和原始图像的展现的时钟值差观察解码图像中DVD字幕与演员□不通过4用终端录制一图像编码段视频文件，格式H.264编码格式的支持能力□不通过KMPlayer播放器左下16/33H.264图像编码对D1图像的分辨率的编码达到放时间，连续按“F”□通过□不通过25帧以上网损仪架设在单兵接收端，网损仪丢包参数设定20%后，验证单兵接收端接收单兵图像是否连续、无马赛克，声音效果是否清晰、无卡顿。5严重，令人无法接受。（表-3音视频类单兵终端性能指标测试）7.1.2.3功能测试测试，即表示通过在测试环境现场架设WIFI网络，单兵终端通过WIFI网路连入单兵平台，查看单兵调度终端与单兵终端的交互性。1□不通过检查是否支持以太网接入□不通过17/33测试，即表示通过满电状态下设备使用电池供电工作，直至电池电量用尽，记录电池使用时间是否超过4个小时。23单兵外接针孔、DV摄像头上传图像时，远端是否可观看单兵终端的图像4现场查看摄像头功能测试现场能显示单兵终端的GPS信息。5支持北斗定位□不通过（表-4音视频类单兵功能指标测试）7.2业务类单兵系统测试7.2.1平台测试平台用户管用户的创建、修改、删在单兵接入服务器上创建一个用户，并□通过1□不通过理除、赋权、记录功能对其进行修改、赋权、删除等操作，用18/33可设置42个业务单兵2□模板数≥15□模板数＜15□不通过查看相应界面验证。3查看相应界面验证。456查看抓拍图片。进入单兵服务器，查看业务单兵终端上下线情况。7用2台单兵接入服务器模拟成海关总署和直属海关平台，且构成二级联，海关总署业务单兵终端登录海关总署单兵服务器，同时直属海关业务单兵终端登录直属海关单兵服务器。平台分级管联性；1海关总署单兵接入服务器能看到直属海关所有的单兵账号。多级平台具备独立的19/33在海关总署单兵接入服务器上，能同时接收总署海关业务单兵终端和直属海关业务单兵终端的图像，并可以和其中□不通过任何一个单兵对讲。单台接入服查看单台服务器支持务器接入数的最大业务单兵终端2支持与标准H.323/SIP与标准H.323/SIP视频会议终端对接，H.323/SIP视频会议系统的交互性17.2.2终端测试测试方法测试结果环境：测试人员携带单兵终端到用户指定地点（覆盖3G、4G网络）进行测试1为图像延时使用2个秒表对时后，一块有单图像延时<1秒20/33兵终端拍摄，另一块秒表由测试人员拿到远端测试点，观察远端图像里秒表时间与测试人员手里秒表之间时钟值差单兵终端对准一个现场测试人手势报数，指挥中心观察报数人员手势和声音的吻合度。2为像机拍摄，另一块秒表由测试人员拿到远端测试点，观察远端图秒像里秒表时间与测试人员手里秒单兵终端对准一个现场测试人手势报数，指挥中心观察报数人员手势和声音的吻合度。唇音同步>3秒21/33通过业务单兵终端访问海关业务系统的数据。（该功能需定制开能否成功访问发）18测试评判标准8.1评价原则本次测试将会以测试通过项的方式记录测试结果，评审组在对测试结果进行评分时，应以公平、公证为基本原则，依据测试方案的合理性、技术实现的程度及实际效果、技术实现复杂性、测试的时间控制等方面进行综合评价，经各受测方签字确认后形成具有参考价值的测试结果。若受测方之间对测试过程及结果具有争议的时将争议内容以书面形式提交组织方解决，测试最终结果以评审组和监理单位确认为准。8.2评分方法测试的评分方法以海关业务需求为原则，以满足测试内容的指标要求为评分要素，评分从基本指标和加分指标两方面取值：基本指标：记录通过测试项，需要受测方完全实现基本指标要求，否则在该测试部分记为测试不通过项。加分指标：在测试结果满足基本指标的前提下，实现加分指标中的技术需求，记录为加分测试通过项。8.3评分标准12中断传输的情况下单兵图像的位□不通过（0分）22/33□模板数≥15（2分）□模板数＜15（1分）□模板数=0（0分）3最大支持多少画面分屏显示可以选择任意单个单兵图像进行录像；45对多个业务单兵图像进行录像。支持远端抓拍单兵终端图像功能提供单兵终端登录日志功能67单兵接入服务器的级联性；多级平台具备独立的账号数据管理能力。1支持海关总署对海关网内所有单兵终端的调度21兼容性测