1、中国电信LTE网络质量评估测试规范试行稿V1中国电信LTE网络质量评估测试标准(试行稿)中国电信集团公司2014年2月1.总则1.1概述无线网络只有通过实际网络质量的检查测试才能获得真正意义上的网络运行质量信息，才能了解用户对网络质量的真实感受。通过DT测试和CQT测试在现场模拟用户行为，结合专业测试工具进行分析，是获取无线网络性能、发现无线网络问题的主要方法。通过与竞争对手网络进行现场测试综合比照，还可以了解中国电信LTE网络与竞争对手网络在网络性能上的差距。1.2术语定义DTDriving Test测试是使用测试设备沿指定的路线移动，进行不同类型的呼叫，记录测试数据，统计网络测试指标。CQ
2、TCall Quality Test测试是在特定的地点使用测试设备进行一定规模的拨测，记录测试数据，统计网络测试指标。1.3测试仪表网络质量评估通常采用路测仪表进行，其形态包括传统仪表、便携式仪表等；建网初期评估网络基本覆盖时，同时也需要采用扫频仪辅助测试。测试时所使用的软硬件设备，必须满足中国电信集团相关的仪器仪表标准。2.城区DT测试方法本章主要介绍的是以评估网络质量为目的的常规测试方法，评估网络质量应根据测试和优化的目的，选取对应的方法进行测试。22.1 测试仪表增加推荐的仪表种类，名称，以及终端的型号首选/可选，待补充场景终端要求电脑要求仪表要求长呼可使用三星N719U操作系统：win
3、7 32位CPU：Intel Core i5内存：4G硬盘大小：500G支持4/3G互操作控制短呼支持4/3G互操作控制锁定测试支持锁定制式/频点/小区；支持4/3G互操作控制2.2 城区DT长呼测试测试目的通过长呼测试，对网络覆盖质量、保持性能、切换性能、吞吐率进行评估。122.12.2测试时间建网初期可任意时间测试，在LTE正式商用并且用户数量具备一定规模后，建议测试安排在工作日周一至周五9:00-19:00进行。新疆和西藏的测试时间由于时差延后1个小时。测试范围测试范围主要包括：城区主干道、商业密集区道路商业街、住宅密集区道路、学院密集区道路、机场路、环城路、沿江两岸、城区内主要桥梁、隧
4、道、城内风景点周边道路等。要求测试路线尽量均匀覆盖整个城区主要干道和次级街道，并且尽量不重复，在主/次干道已测完的情况下，在工作负荷允许的情况下，建议对重点业务区域所有道路进行遍历测试。测试速度在城区应尽量保持正常行驶速度3060公里/小时；在城郊快速路车速应尽量保持在6080公里/小时，高速公路尽量保持在80公里/小时以上，不限制最高车速。测试步骤2.2.1.1全采样方式全采用方式适宜在无流量成本压力，并且网络对大流量测试不敏感时使用。测试内容：FTP上传/下载测试，通过上传/下载超大文件，长时间保持FTP业务测试。测试条件要求：测试时，保持车窗关闭，将LTE终端、支持LTE测试的路测设备放
5、置在第二排座位中间，连接好GPS；根据测试的要求，仪表设置为 “Hybrid”模式。测试步骤：（1）确认测试终端已经成功附着网络，并能连接网络发起业务；（2）利用测试软件中的内置 FTP 测试功能，从 FTP server上下载一个足够大的文件5GB 以上，设置5线程下载，每个线程独立下载完整文件不使用断点续传，下载次数设置无限次或设置大于测试时间的次数，保证行驶期间测试不中断，业务可循环进行；（3）利用测试软件中的内置 FTP 测试功能，向 FTP server上传足够大的文件2GB 以上，设置为多文件上传并发数量设置为5，上传次数设置无限次或设置大于测试时间的次数，保证行驶期间测试不中断，
6、业务可循环进行；（4）当终端离开LTE网络回落/切换到EHRPD网络时，测试软件自动停止FTP业务，终端回到休眠态。当终端在休眠态重选到LTE网络后，自动发起FTP测试。（5）上传、下载分别在两部终端同时进行测试；（6）当发生拨号连接异常中断后，应间隔10秒后重新发起连接：a)如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断，则不计为掉话，但拨号异常中断前的传输过程FTP速率采样点和时间纳入统计。b)测试过程中假设连续10秒 FTP 层没有任何数据传输，开始自动尝试 PING服务器，包大小为32字节，间隔时间1秒钟，超时时间2秒钟，直到FTP传输恢复或FTP测试失败后停止；测试过程中
7、假设超过30秒 FTP 层没有任何数据传输，此时需断开网络连接，并记为一次业务掉线；该数据传输过程最后30秒对应的FTP速率采样点和时间不纳入LTE的速率统计。（7）测试过程中假设出现FTP 服务器登录失败，应间隔 4 秒后重新登录；连续10 次登录失败，应断开网络连接，间隔 10 秒后重新进行测试。2.2.1.2抽样测试方式抽样方式适宜在有流量成本压力，并且网络对大流量测试敏感时使用，如多运营商网络比照测试。测试内容：时间抽样的ABM测试，长时间保持UDP业务测试。测试条件要求：测试时，保持车窗关闭，将LTE终端、支持LTE测试的路测设备放置在第二排座位中间，连接好GPS；根据测试的要求，仪
8、表设置为 “Hybrid”模式；同时，准备基于UDP业务的测试服务器。测试步骤：（1）确认测试终端已经成功附着网络，并能连接网络发起业务；（2）下载测试测试采用抽样带宽方式，即在FTP连接建立后，在每1S时间内，只在连续的100ms时间内进行UDP传输。（3）FTP上传测试测试采用抽样带宽方式，即在FTP连接建立后，在每1S时间内，只在连续的100ms时间内进行UDP传输。（4）当终端离开LTE网络回落/切换到EHRPD网络时，测试软件自动停止FTP业务，终端回到休眠态。当终端在休眠态重选到LTE网络后，自动发起FTP测试。（5）上传、下载分别在同一终端分时隙进行测试；（6）当发生拨号连接异常
9、中断后，应间隔10秒后重新发起连接：c)如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断，则不计为掉话，但拨号异常中断前的传输过程FTP速率采样点和时间纳入统计。d)测试过程中假设连续10秒 FTP 层没有任何数据传输，开始自动尝试 PING服务器，包大小为32字节，间隔时间1秒钟，超时时间2秒钟，直到FTP传输恢复或FTP测试失败后停止；测试过程中假设超过30秒 FTP 层没有任何数据传输，此时需断开网络连接，并记为一次业务掉线；该数据传输过程最后30秒对应的FTP速率采样点和时间不纳入LTE的速率统计。2.3 城区DT短呼测试2.3测试目的通过短呼测试，对网络接入性能、用户面时延
10、进行评估。测试时间建网初期可任意时间测试，在LTE正式商用并且用户数量具备一定规模后，建议测试安排在工作日周一至周五9:00-19:00进行。新疆和西藏的测试时间由于时差延后1个小时。测试范围同DT长呼测试范围。测试速度同长呼测试。测试步骤测试内容：循环进行PING测试。测试条件要求：测试时，保持车窗关闭，将LTE终端、支持LTE测试的路测设备放置在第二排座位中间，连接好GPS；根据测试的要求，仪表设置为 “Hybrid”模式。测试步骤：（1）检查PING服务器及测试系统配置，可使用FTP服务器作为PING服务器，要求服务器打开PING功能。（2）终端在Idle状态发起Attach Reque
11、st附着LTE网络。当终端处于激活态时，终端对PING服务器的IP地址进行PING操作，开始PING测试。（3）每次PING包测试成功或超时间隔为10秒，PING包超时时间为5秒，PING 包长为512Bytes。（4）每次连接在重复10次PING包测试后，发起Detach去附着断开网络连接，使终端回到Idle状态；间隔10秒后，重新执行上述操作，保证测试期间任务循环执行（5）当终端离开LTE网络回落/切换到EHRPD网络时，测试软件自动停止PING测试业务，终端回到休眠态。当终端在休眠态重选到LTE网络后，自动重新发起PING测试（6）如出现网络连接异常中断，应断开拨号，间隔10秒后重新连接
12、并继续测试，该次异常事件对应的PING周期内的PING时延、尝试及失败次数不纳入统计。2.4锁定测试锁定测试指根据测试优化的要求，锁定网络制式、锁定频点、锁定小区等方式进行测试。2.4锁定制式测试锁定LTE网络测试测试主要用于评估LTE网络质量，防止终端切换至其他网络2G/3G导致部分区域LTE未测试。建议：在LTE网络质量评估的DT测试中锁定LTE网络。具体操作-在终端或路测软件中设置网络为LTE only。锁定频点测试在多频组网的LTE网络中，锁定频点测试用于评估LTE网络的单频网络质量，而且优化人员通过单频网络测试数据，可获得各频段LTE小区分别对道路的覆盖情况，对多频组网的网络优化提供
13、数据参考。建议：根据网优需求进行测试，不要求常规化。具体操作-在终端或路测软件中选择锁定频点，设置EARFCN后执行即可。锁定模式测试在FDD/TDD混合组网的LTE网络中，锁定模式测试用于评估LTE网络的FDD/TDD网络质量，通过锁定模式的测试数据，可分别获得FDD及TDD网络的覆盖及质量情况，对FDD/TDD混合组网的建设及结构优化提供数据参考。建议：根据网优需求进行测试，不要求常规化。具体操作-在终端或路测软件中选择模式，设置后执行即可。锁定小区测试锁定小区功能一般用于单个小区的性能评估/验证工作，例如进行拉远测试等。建议：根据网优需求进行测试，不要求常规化。具体操作-在终端或路测软件
14、中选择锁定小区，设置小区的EARFCN和PCI后执行即可。2.5 FTP服务器设置FTP服务器功能要求支持断点续传功能，支持多线程，服务端支持PASSIVE被动模式，放开帐号登录数限制，放开用户上传下载权限并打开ping功能，放开带宽限制，保留操作日志。注：服务端PASSIVE被动模式对应客户端连接属性的PASV模式配合使用。建议配置服务器软件：Linux: vsftpd-2.0.1以上Win32: FileZilla Server version 0.9.41 betaFTP服务器部署要求1采用专用服务器用于测试，操作系统优先采用Unix，启用FTP服务，安装FTP服务器端，允许PING操作
15、，硬盘预留空间容量不少于1TB。如有防火墙，需放开FTP和PING服务端口，系统应安装所有安全漏洞补丁。2支持断点续传功能，支持多线程，服务端支持PASSIVE被动模式，放开帐号登录数限制，放开带宽限制，保留操作日志。3各省需配置至少两台公网FTP服务器，吞吐量带宽1000Mbps的带宽与性能要求，尽量减少外围因素对数据吞吐量的影响。3.城区CQT测试方法33.1 测试仪表终端要求电脑要求仪表要求可使用三星N719U操作系统：win7 32位CPU：Intel Core i5内存：4G硬盘大小：500G支持3G/4G互操作支持室内打点3.2 城区CQT测试场所选取城区CQT测试时重点在话务量相
16、对较高的区域、品牌区域、市场竞争激烈区域、特殊重点保障区域内选取位置点。地理上尽可能均匀分布，场所类型尽量广。重点选择有典型意义的大型写字楼、大型商场、大型餐饮娱乐场所、大型住宅小区、高校、交通枢纽和人流聚集的室外公共场所等。各场所选取比例：测试场所类型场所类型所占比例商务办公类五星级标准认证酒店、四星级标准认证酒店、三星级标准认证酒店、三星级以下认证酒店、快捷商务酒店、其它旅舍、商务办公大厦、会务中心、展览中心、交易所15%机关企业类人民政府、人大政协、政府部门、公检法、街道机构、各党派和社团、厂矿农企、新闻媒体、科研机构、社会福利院、特殊场所、其它企事业、外国驻华大使馆、领事馆、军事机关、
17、军用运输、其它军事场所10%教育医疗类公立重点高校、公立普通高校、私立民办高等院校、成人教育院校、省市级重点中小学、普通中小学、中等专业学校、幼儿园、特殊学校、社会就业培训机构、其它教育培训机构、历史文化场馆、艺术场馆、科教场馆、书籍档案场馆、革命教育基地、其它科教文化场所、三甲医院、普通公办医院、民办医院、其它医疗机构、卫生防疫站、保健体检中心、休疗养机构15%商业市场类大型综合百货公司、中小型百货商店、大型超市、中小型超市、美容连锁、服饰连锁、汽车服务连锁、婴幼儿连锁、家电连锁、其它连锁机构、食品、服饰、纺织、医药、汽配、电子、文体、农贸市场、五金交电、工艺美术、家居建材、办公用品、宠物、
18、其它专业零售批发市场、中国电信营业厅、中国移动营业厅、中国联通营业厅、其它通信运营商营业厅、银行储蓄类营业厅、水/电/气/煤营业点、有线电视运营商营业点、其它行业营业厅15%餐饮娱乐类酒楼饭店、快餐店、地方小吃街、休闲咖啡厅、其它餐饮场所、文化娱乐活动场所、游乐场、KTV、舞厅酒吧、洗浴中心、棋牌茶室、歌舞剧院、其它类型娱乐场所、公园、动物园、植物园、步行街、社会广场、国家 5A级风景区、国家 4A 级风景区、其它旅游景区、体育运动场所、健身俱乐部、其它类型体育场所15%居民住宅类低层住宅、高层住宅、混合式小区住宅、普通低层住宅、城中村住宅、其它旧式住宅居民区、花园洋房式住宅、独立别墅区住宅、
19、联排别墅区住宅20%交通枢纽类火车站、地铁站、城市轻轨客站、磁悬浮客站、海港、河港、城市轮渡、民用机场、军民合用的机场、长途客运站、高速公路服务区、城市汽车站、交通广场、机动车停车场库、非机动车停车场库10%3.3 测试位置的选取测试位置点的选取应合理分布，选取人流量较大和无线业务使用习惯的地方，容易暴露区域性覆盖问题，而不是孤点覆盖问题。每个CQT场所重点测试以下位置及其主要通道。1建筑物内要求分顶楼、楼中部位、底层。某一楼层内的采用点应在以下几处位置选择，具体以测试时用户经常活动的地点为首选。2大楼出入口、电梯口、楼梯口和建筑物内中心位置。3人流密集的位置，包括大堂、餐厅、娱乐中心、会议厅
20、、商场和休闲区等。4成片住宅小区重点测试深度、高层、底层等覆盖难度较大的场所，以连片4-5栋楼作为测试对象选择采样点。5医院的采样点重点选取门诊、挂号缴费处、停车场、住院病房、化验窗口等人员密集的地方。有信号屏蔽要求的手术室、X光室、CT室等场所不安排测试。6风景区的采样点重点选取停车场、主要景点、购票处、接待设施处、典型景点及景区附近大型餐饮、娱乐场所。7火车客站、长途汽车客站、公交车站、机场、码头等交通聚集场所的采样点重点选取候车厅、站台、售票处、商场和广场。8学校的采样点重点选取宿舍区、会堂、食堂、行政楼等人群聚集活动场所，如学生活动中心会场/舞厅/电影院等、体育场看台、露天聚集场所宣传
21、栏、学生宿舍/公寓、学生/教工食堂、校部/院系所办公区、校内商业区、校内休闲区/博物馆/展览馆、校医院、校招待所/接待中心/对外交流中心/留学生服务中心，校内/校外教工宿舍住宅小区、小学/幼儿园校门口以及校外毗邻商业区如学生街等。教学楼主要测试休息区和会议室。9步行街的采样点应该包括步行街两旁的商铺及休息场所。3.4测试步骤CQT业务测试前，应通过GPS记录测试点的经纬度，准备测试场景的室内地图可拍摄室内疏散通道分布图，测试时，应根据行走的路线在地图上面打点。针对不同的评估维度及角度，可采用锁定LTE或者混合模式的方法进行测试。 CQT FTP业务测试同DT测试方法，长呼测试时，指定每个测试点
22、的测试时长不少于5分钟。33.13.23.33.4 CQT Ping业务测试3.5 同DT测试方法，需设置Ping包大小为32Byte、512Byte分别进行测试，每种包大小分别进行ping测试100次。其余要求同DT测试方法。4.网络质量评估重点LTE网络质量主要可以从以下几个方面进行评估：1、覆盖；2、接入性能；3、业务保持能力；4、业务性能；5、移动性能。44评估类别关键指标覆盖覆盖率里程覆盖率4G/3G占用时长接入性能RRC连接建立成功率E-RAB建立成功率无线接通率ATTACH成功率Service成功率业务保持能力业务掉线率无线掉线率业务性能应用层速率Ping时延PRB调度MCSCQ
23、IBLER单双流调度比例MIMO移动性能切换成功率切换控制面时延切换用户面时延LTE-CDMA2000系统间小区切换出成功率LTE-CDMA2000系统间小区切换出时延4.1 覆盖评估关键参数2343.14.1.14.1.24.1.1.1RSRP Reference signal receive power，参考信号接收功率，用于衡量某扇区的参考信号的强度，在一定频域和时域上进行测量并滤波。可以用来估计UE离扇区的大概路损，LTE系统中测量的关键对象。在小区选择中起决定作用。 通常说的RSRP是指CRS的RSRP，CRS指Cell-specific reference signals，具体资源
24、单元映射情况如下： Mapping of downlink reference signals (normal cyclic prefix)单位：dBm，取值范围：-140dBm至-40dBm4.1.1.2SINRSignal to interference-plus-noise ratio，信号与干扰加噪声比。一般情况下，SINR是指CRS的SINR，即关注测量频率带宽内的小区，小区的参考信号的无线资源的信号干扰噪声比。单位：dB，取值范围：-20dB至50dB4.1.1.3RSRQReference Signal Received Quality，参考信号接收质量，小区参考信号功率相对小区
25、所有信号功率RSSI的比值。RSRQ计算方法为： NRSRP/RSSI, N为RSSI测量带宽内的RB数；单位：dB，取值范围：-40dB至0dB4.1.1.4PUSCH-TxPower物理上行共享信道(Physical Uplink Shared Channel)发射功率。LTE的上行数据在PUSCH上传输，因此PUSCH-TxPower反馈的是上行数据传输时的发射功率。 dBm单位：dbm，取值范围：-40dbm至23dbm4.1.1.5PUCCH-TxPower物理上行控制信道(Physical Uplink Control Channel)发射功率。即终端上行控制信道上发送控制信息时的
26、发射功率，在一些情况下控制信息在PUSCH上传输，PUCCH空闲，因此PUCCH-TxPower可能值为空。 dBm单位：dbm，取值范围：-40dbm至23dbm关键指标4.1.34.1.1.6覆盖率定义：覆盖率(RSRP-105dBm&SINR-3dB)的采样点数/采样点总数100注：（1）本定义适用于城区、农村、乡镇、风景区等各类场景下LTE网络测试时的覆盖率统计。（2）采样点总数为所有测试终端的采样点样本数之和。（3）覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。4.1.1.7里程覆盖率定义：覆盖率(RSRP-105dBm&SINR-3dB)的里程/测试总里程100注：（1）本定
27、义适用于高速公路、铁路、航道等场景下LTE网络测试的里程覆盖率统计。（2）测试路段总里程数：含GPS数据的采样点间距离之和。（3）里程覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。4.1.1.84G/3G占用时长比定义：4G占用时长比例=混合模式下4G网络占用时长/测试总时长3G占用时长比例=混合模式下3G网络占用时长/测试总时长注：（1）本定义侧重于从用户感知层面评估用户面的4G业务覆盖率，4G占用时长包含满足(RSRP-105dBm&SINR-3dB)的时间以及不满足(RSRP-105dBm&SINR-3dB)的时间两部分。4.2接入性能评估4.14.2数据维度终端接入主要包括att
28、ach和service。在接入步骤来看重点关注：1、RRC建立含随机接入；2、ERAB建立。关键信令/事件4.2.1.1Attach流程Attach procedure上图为3GPP中的attach流程图，在上图中attach req是指在RRC connection setup complete携带的attach req，在此之前有RRC建立的过程： 在测试过程中表达的是终端的流程，先有attach req，由attach req触发RRC connection req，当RRC建立完成时Attach req才发送给网络。在实际测试过程中看到终端的attach流程顺序是:1、attach r
29、equest2、RRC connection request3、Msg1：RA4、Msg2：RAR5、.(见RRC建立流程及attach 信令流程)Attach的几种重要的步骤包括：鉴权、加密、终端能力上报、承载建立。一般情况下在开机阶段自动完成Attach过程，在测试计划中未配置attach相关设置的时候，测试过程中一般情况没有attach的过程，只有当出现异常，网络侧将终端detach后，才会有attach的过程。4.2.1.2Service流程在IDLE态由业务触发service过程包括终端触发和网络触发两种，流程图分别如下：UE triggered Service Request pr
30、ocedureNetwork triggered Service Request procedure与Attach的过程类似，上图中的service req是在RRC建立完成消息携带的Service req，测试中在终端侧看到service过程还包括RRC建立过程。在service过程中也包括：鉴权、加密、承载建立。与Attach主要的区别在于网络侧已经存储终端能力，终端不需要再上报终端能力，在RB建立过程中，service只需要建立DRB/SRB2，不再需要建立EPS默认承载。关键指标4.2.1.3RRC连接建立成功率定义：RRC连接建立成功率RRC连接建立成功次数/RRC连接建立尝试次数100%。注：RRC连接建立尝试次数：UE发出的“RRC Connection Request”消息；RRC连接建立成功次数：收到RRC Connection setup complete消息，表示成功。4.2.1.4E-RAB建立成功率定义：E-RAB建立成功率Attach过程E-RAB建立成功次数+Service Request过程E-RAB建立成功次数+承载建立过程E-RAB建立成功次数/Attach过程E-RAB请求建立次数+Servic
