网络质量现场检查评分办法.docx
《网络质量现场检查评分办法.docx》由会员分享，可在线阅读，更多相关《网络质量现场检查评分办法.docx（18页珍藏版）》请在冰点文库上搜索。
网络质量现场检查评分办法
2009年网络质量现场检查评分办法
一、总体评分情况：
现场检查占全年网络运行维护考核的30分，包括本地网、交通干线（含高速公路、铁路、国道和沿海海域）的自动路测和全业务拨测两部分。
所有测试同时对联通GSM网络、联通CDMA网络进行对比测试，考虑到全省各地市网络的差异性，各地市的网络质量现场检查权重分配如下表：
全业务拨测
自动路测
村通
室内CQT
数据（含短信）
本地网
交通干线（含高速公路、铁路、国道和沿海海域）
话音
数据
话音
数据
A类公司
1
2
8
9
3
4.5
2.5
B类公司
1
2
8
9.5
2.5
4.5
2.5
A类公司指一类及二类市公司，B类公司指三类市公司（下同）。
网络质量现场检查的总体要求如下表：
总体要求
室外
室内
网络覆盖
本地网信号强度>=-90dBm。
候机楼、候车厅、码头、港口、地铁站等交通枢纽和过境处信号强度>=-85dBm，其余>=-90dBm。
网络质量
无掉话、无呼叫建立失败、话音质量良好，在保证承载网质量的基础上要保证各种业务的客户感知质量良好。
网络对比
各项指标均优于竞争对手两个网络的最优者。
测试方法
采用主被叫终端同车互拨，本地网、国道、铁路、海域呼叫时长180秒，间隔20秒。
高速测试呼叫时长15分钟，间隔20秒。
广州、深圳本地网增加6dB衰减器，其他地市和干道增加3dB衰减器，海域不加衰减器。
二、自动路测评分方法
自动路测部分主要对本地网、高速公路、铁路、国道的语音和数据业务性能指标进行考核。
（一）语音部分评分方法
1、语音部分总体原则：
设定移动指标为T1，联通指标为T2（联通取C网和G网的最优值）；得分为S；上限值Kh、下限值Kl。
条件
分值
T1优于Kh或（T1介于Kh与Kl之间且T1优于T2）
S=满分
T1劣于Kl且T1优于T2
S=满分×2/3
T1介于Kh与Kl之间但T1劣于T2
S=满分×1/3
T1劣于Kl但T1劣于T2
S=0分
注：
T1＝T2属优于竞争对手
2、语音部分评分细则：
（1）语音部分考核本地网、高速公路、国道、铁路和海域；
（2）本地网、高速公路、国道、铁路及海域的考核指标、分值比例和上下限值，请参考下表；
与联通CDMA和GSM最优者相比
得分比例
Kh
Kl
与联通CDMA和GSM最优者相比
得分比例
Kh
Kl
本地网DT
覆盖率（-90dBm）
20%
99%
97%
国道
覆盖率（-94dBm）
35%
98.5%
97.5%
服务能力
5%
100%
99%
接通率（未剔除位置更新）
20%
99%
95%
接通率（未剔除位置更新）
20%
99%
98%
里程掉话比
30%
200
100
感知掉话率
30%
1%
2.5%
话音质量
10%
97%
92%
话音质量
10%
97.5%
96%
语音评估（上下行各50％）
5%
3.3
3.0
语音评估均值
5%
3.3
3.0
铁路
覆盖率（-94dBm）
55%
97%
93%
语音评估百分比（小于2.5的采样点比例）
5%
20%
25%
呼叫建立时延
5%
6
7
呼叫建立时延
5%
6
7
话音质量
10%
97%
92%
高速公路
覆盖率（-94dBm）
35%
100%
98%
接通率（未剔除位置更新）
25%
96%
92%
语音评估
5%
3.3
3.0
接通率（未剔除位置更新）
20%
100%
97%
海域
覆盖率（-98dBm）
70%
99%
90%
里程掉话比
30%
250
150
接通率（未剔除位置更新）
30%
95%
90%
话音质量
10%
98%
95%
语音评估
5%
3.3
3.0
（3）各本地网话音共测试9次，采用不间断轮回测试，其中3月、6月、9月为全网测试，4月、5月、7月、8月、10月为重点区域测试，最后一次为县域测试，不参与考核计分；每次测试后即按
（2）表进行测评，重点区域得分为5次测试成绩的平均值，全网测试得分为3次测试成绩的平均值；重点区域得分与全网测试得分按1：
1加权成为全年的本地网测试得分。
交通干线测试分值比例见下表：
08年分数
交通干线（含高速公路、铁路、国道和沿海海域）
话音
数据
高速公路
铁路
国道
海域
高速公路
铁路
国道
海域
A类公司
2
1
1
0.5
1
0.5
0.5
0.5
B类公司
2
1
1
0.5
1
0.5
0.5
0.5
全年高速公路进行8次测试，铁路、国道各进行4次测试，海域进行2次测试，各次测试的平均值即为该类测试的得分。
（4）广深铁路作为高速公路考核，即考核覆盖率、接通率、掉话率、话音质量和语音评估等。
（5）无海域的地市，海域分值全部转移到高速公路中；没有铁路的地市，铁路的分值全部转移到国道中，如珠海公司：
地市公司
自动路测
本地网
交通干线
话音
数据
话音
数据
高速
国道
海域
高速
国道
海域
珠海公司
9
3
2
2
0.5
1
1
0.5
（6）铁路覆盖率考核不再剔除长隧道的无覆盖部分。
（7）话音质量说明：
Ø取SUB值，列出RxQual0-7级各级的采样点数。
Ø每部手机话音质量具体算法如下：
话音质量＝[RxQual（0级）＋RxQual（1级）＋RxQual（2级）＋RxQual（3级）]×1＋[RxQual（4级）＋RxQual（5级）]×0.7/（总采样点数）×100％。
Ø话音质量取主、被叫手机的统计结果之和平均
（二）数据部分评分办法
1、数据部分总体原则
设定N是该项指标的满分；K1和K2是测试数值中的两个阙值。
测试值落在K1和K2区间之外时，则最终得分值为0分或者满分N（根据具体情况）；测试数值介于K2和K1之间时，则按线性比例映射到[0,N]之间。
函数公式为：
（A-K2）*（N/（K1-K2）），A为实际测试数值。
或者
2、数据部分评分细则
（1）数据部分考核本地网、高速公路、国道和铁路；
（2）本地网、高速公路、国道、铁路和海域的考核指标、分值比例和K1、K2阙值，请参考下表；
（3）海域只考核FTP下载速率。
测试
指标名称
得分比例
K1
K2
EDGE/GPRSDT
掉线率
25%
0.5%
2%
WAP网站登陆成功率
15%
90%
80%
WAP首页显示时间（秒）
20%
8
15
EDGE覆盖率
10%
95%
90%
FTP下载速率
30%
本地网
85kbps
70kbps
高速、铁路、国道
90kbps
80kbps
海域
60kbps
50kbps
（4）其他评分原则同话音部分的（4）、（5）、（6）、（7）。
三、村通覆盖测试及室内CQT拔测评分方法
村通抽查
室内覆盖CQT测试
总分
A类公司
1
2
3
B类公司
1
2
3
（一）村通覆盖测试
为了督促各市公司更好地完成“移动信息村通”覆盖专项工程，全面检查我公司网络及竞争对手网络（联通GSM网、CDMA网、电信小灵通网）在全省农村区域的总体覆盖情况，省公司将在2009年11至12月组织在全省各地市公司范围进行一次“移动信息村通”覆盖专项工程达标抽查。
1、抽查范围：
全省21个地市1000个自然村及1500个城中村。
2、组织及实施：
由省公司统一组织进行，计划在11至12月份进行，为期二个月左右。
3、抽查方式：
CQT方式。
每自然村抽取村头、村中和村尾三个地点进行语音和短信拨测，以检查网络覆盖情况。
在每城中村的主要道路进行10个点的话音拔打测试，每测试点进行2次语音拔打（移动G网、联通G网、C网）。
另在城中村内进行一次FTP下载测试（移动G网、联通C网）。
4、评分方法：
（1）在全年网络质量考核中列为单项进行考核。
（2）某地市共抽取N个自然村和行政村进行检查，如有M个无覆盖的自然村或行政村，则扣除M/N分。
（3）覆盖标准为>=－94dBm，每自然村三个地点（村头、村中、村尾）均要满足覆盖，若有一个地点不满足，则该自然村判为不满足覆盖。
（4）城中村室外覆盖标准为>=－85dBm。
得分比例
Kh
Kl
自然村
覆盖率（-94dbm）
50%
N个自然村进行检查，如有M个无覆盖的自然村，则扣除M/N分
城中村
覆盖率（-85dbm）
25%
95.00%
90.00%
FTP下载速率
25%
90kbps
80kbps
（二）室内覆盖CQT测试
为掌握目前各市公司市区范围内VIP点的室内分布系统的覆盖及话音质量情况，全年共进行10次测试，每次将抽取全省2000个重点室内覆盖场所进行现场测试。
1、抽查范围：
每次全省共抽取约2000个重点室内覆盖点进行测试，各市公司抽取数量如下：
公司
测试点数（个）
广州
420
深圳
420
东莞
250
佛山
250
二类公司
60
三类公司
30
2、组织及实施：
由省公司统一组织进行，全年共进行10次测试。
3、抽查方式：
（1）采用手机主被叫同一位置点互相拨打的方式，手机拨叫、挂机采用手动方式，接听采用自动方式。
（2）主叫测试手机置为自动双频。
（3）CQT测试人员在每个测试点的10个不同位置做主、被叫各10次，每次通话时长45秒（人工控制），呼叫间隔15秒以上；出现未接通情况，应间隔15秒以上进行下一次试呼；如出现掉话，则在掉话发生15秒后进行下一次试呼。
（4）每一位置保存一个log。
（5）要求每次主叫拨测前，连续查看手机空闲状态下的信号强度5秒钟，若信号强度连续小于－90dbm（CDMA手机为Ec/Io小于-12dB或前向RSSI小于-95dbm），则记录在该测试位置覆盖不符合要求，不再作拨测，也不进行补测。
（6）对于飞机场、火车站、星级酒店、大型商场、高层写字楼等测试点，测试位置为其主要公共场所，如：
酒店主要测试大堂、会议中心、餐厅、娱乐中心、地下停车场、电梯内；同一测试点内测试位置选取需均匀分布。
（7）测试点的大堂、商务中心、会议室、电梯口及大堂出入口要求为必测位置，其余测试位置由测试人员分配，兼顾高、中、低楼层，除固定位置点测试外另要求在CQT点内完成一次FTP下载。
（8）FTP下载要求：
测试人员选择CQT点的主要活动区，检查是否具有EDGE覆盖，如只有GPRS覆盖则不进行测试，记录服务小区信息，如有EDGE覆盖，则在主要活动区内一边行进一边进行FTP下载业务（对移动EGPRS，联通C网测试），要求下载2MByte文件，如下载时间超过10分钟，则停止测试，记录为下载失败。
（9）第一次及第四次测试增加联通G、C两网话音及数据测试，记录其相关网络参数及信令；其他轮次只测移动GSM网络。
4、评分办法：
（1）在全年网络质量考核中列为单项进行考核，A类公司为2分，B类公司为1.5分。
覆盖率（-90dBm）
接通率
感知掉话率
话音质量
FTP下载速率
总分
A类公司
20%
20%
20%
20%
20%
2
B类公司
20%
20%
20%
20%
20%
2
K1
99.00%
99.5%
0.9%
96.00%
140kbps
K2
98.00%
98%
1.5%
94.00%
120kbps
（2）CQT的评分原则参照DT评分原则，语音部分与联通C网、G网两次测试均值的最优值做比较，数据部分采用线性插值方式。
对于广州公司，将根据广州公司完成集团公司现场测试情况，得出广州公司全年的得分。
（此话去年就有）
（3）考核指标解释
a）覆盖率，定义：
覆盖率＝试呼总次数/总取样点数×100％；
说明：
Ø总取样点数＝测试点数×每个测试点主叫次数；
Ø试呼总次数＝符合试呼条件的取样点数＝信号强度连续5秒大于－90dbm的取样点数；
Ø覆盖率取主叫手机的统计结果；
Ø此指标以手工纪录
b）接通率，定义：
接通率＝接通总次数/试呼总次数×100％；
说明：
Ø试呼次数：
以channelrequest和CMservicerequest同时出现来确定试呼开始；
Ø接通次数：
当一次试呼开始后出现了Connect，ConnectAcknowledge消息中的任何一条就计数为一次接通；
Ø接通率取主叫测试手机的统计结果
c）掉话率，定义：
掉话率＝掉话总次数/接通总次数×100％；
说明：
Ø接通次数：
当一次试呼开始后出现了Connect，ConnectAcknowledge消息中的任何一条就计数为一次接通
Ø掉话次数：
在一次通话中如出现Disconnect或ChannelRelease中任意一条，就计为一次呼叫正常释放。
只有当两条消息都未出现而由专用模式转为空闲模式时，才计为一次掉话（如通话时间不足规定时长，出现释放，要求通过层3信令解码判断原因）
Ø掉话率取主、被叫手机的统计结果；
Ø掉话率＝（主叫掉话+被叫掉话）/（主叫接通+被叫接通）×100％
d）话音质量
说明：
Ø取SUB值，列出RxQual0-7级各级的采样点数。
Ø每部手机话音质量具体算法如下：
话音质量＝[RxQual（0级）＋RxQual（1级）＋RxQual（2级）]×1＋[RxQual（3级）＋RxQual（4级）＋RxQual（5级）]×0.7/（总采样点数）×100％。
Ø话音质量取主、被叫手机的统计结果之和平均
四、数据业务（含短信）拨测评分办法
1、评分原则：
数据业务现场测试考核内容包括管理考核、数据业务质量考核、与联通数据业务质量对比考核及GPRS绑定考核四部分。
全年满分共8分，即在各市公司全年的网络运行维护管理考核100分中占8分。
2、适用范围：
本检查办法适用于2008年各市公司的GPRSCQT、WAP、彩信、KJAVA、飞信和短信数据业务现场测试。
3、分值分配：
项目
分值
备注
管理考核
1.5分（全年）
市公司按照省公司要求完成每月数据业务测试的相关工作。
采用扣分制，每月扣分上限为0.5分；全年扣分上限为1.5分
数据业务质量考核
6分（全年）
省公司全年组织4次现场测试，其中网内业务测试占总分80%，网间对比测试占总分20%。
GPRS绑定考核
（PDP激活成功率）
0.5分（全年）
4、评分标准
（1）.网内测试项目（4.8分）
●评分细则：
设置Kh、Kl，优于Kh得满分，低于Kl得零分，中间指标的分线性分布，即：
得分=（测试指标-Kl）/（Kh-Kl）*满分
专业
指标名称
占分值比例
测试时间
K1
Kh
实现方式
GPRS（14%）
GPRSATTACH成功率
7%
每年4次测试
90%
98%
ITOUCH自动测试
GPRSPDP激活成功率
7%
每年4次测试
96%
99%
ITOUCH自动测试
彩信（16%）
彩信端到端成功率
8%
每年4次测试
90%
98%
ITOUCH自动测试
彩信PUSH下发时延（注1）
8%
每年4次测试
10秒
7秒
ITOUCH自动测试
短信（15%）
点对点短信成功率
5%
每年4次测试
95%
99%
人工测试+自动测试
点对点短信时长
5%
每年4次测试
4.8秒
4.5秒
人工测试+自动测试
梦网短信业务点播成功率
5%
每年4次测试
95%
99%
人工测试+自动测试
WAP（26%）注2
WAP首页登陆成功率
8%
每年4次测试
96%
99%
ITOUCH自动测试
WAP首页登陆时长
5%
每年4次测试
10秒
6.5秒
ITOUCH自动测试
WAP页面刷新成功率
5%
每年4次测试
95%
98%
ITOUCH自动测试
WAP页面刷新时长
4%
每年4次测试
10秒
7秒
ITOUCH自动测试
WAP铃图下载速率
4%
每年4次测试
1.5Bps
1.9Bps
ITOUCH自动测试
KJAVA（4%）
KJAVA离线下载成功率
4%
每年4次测试
90%
98%
ITOUCH自动测试
飞信
（5%）
注3
手机客户端登陆成功率
3%
每年4次测试
90%
95%
人工测试
手机客户端登陆时长
2%
每年4次测试
35秒
30秒
人工测试
（注1：
以上指标的范围适用于ITOUCH测试软件的结果
注2：
WAP的各项统计时间不包括页面推送需要的时间
注3：
飞信测试使用NOKIAN73手机进行测试
手机客户端登陆成功率：
用户点击飞信链接开始，在60秒内与飞信服务器交互所有登陆流程，并从服务器获得正确的获取好友列表应答消息（SVC-GetContactList）为登陆成功，否则认为失败；
手机客户端登陆时长：
用户点击飞信链接开始，到手机客户端收到好友列表应答消息（SVC-GetContactList）时间间隔）
（2）.网间对比测试项目（1.2分）
●评分办法：
上下限比优法，结果优于上限或介于上下限且优于联通为满分、结果低于下限但优于联通为2/3*满分、介于上下限但低于联通为1/3*满分、其余情况为0分。
专业
指标名称
占分值比例
测试时间
K1
Kh
实现方式
短信（4%）
点对点短信成功率
4%
上半年
95%
99%
人工测试+自动测试
下半年
彩信（5%）
彩信端到端成功率
5%
上半年
90%
98%
ITOUCH自动测试
下半年
WAP（8%）注2
WAP首页登陆成功率
2%
上半年
92%
99%
ITOUCH自动测试
下半年
WAP首页登陆时长（注1）
2%
上半年
10秒
6.5秒
ITOUCH自动测试
下半年
WAP页面刷新成功率
2%
上半年
92%
98%
ITOUCH自动测试
下半年
WAP页面刷新时长（注1）
2%
上半年
10秒
7秒
ITOUCH自动测试
下半年
KJAVA（3%）
KJAVA离线下载成功率
3%
上半年
90%
98%
ITOUCH自动测试
下半年
（注1：
以上指标的范围适用于ITOUCH测试软件的结果）
注2：
WAP的各项统计时间不包括页面推送说需要的时间）
（3）.GPRS绑定考核：
PDP激活成功率（0.5分）
通过网管系统统计各SGSN所在市公司PDP激活成功率指标，指标采集时间为非重要节假日（春节、国庆、五一、中秋、元旦）网络正常运行的忙时，考核时段为8：
00—11：
00；18：
00—21：
00。
计算公式：
ØSGSN所在市公司的PDP激活成功率
=GPRS终端发起的PDP上下文激活成功次数/（GPRS终端发起的PDP上下文激活尝试次数-由于用户原因激活失败次数）×100%
Ø非SGSN所在市公司的PDP激活成功率＝PCU归属SGSN所在市公司的PDP激活成功率
采集方法：
省公司话务网管自动采集
计分方法：
当市公司GPRSPDP激活成功率全年平均值不低于挑战值时，得满分；当市公司GPRSPDP激活成功率全年平均值低于基准值时，得零分；当市公司GPRSPDP激活成功率全年平均值低于挑战值但不低于基准值时，按如下公式计算得分：
得分＝（满分*60％）+SQRT（（全年平均值-基准值）/（挑战值-基准值））×（满分*40％）
2008年的挑战值及基准值为：
关键指标
基准值
挑战值
PDP激活成功率
97.5%
99%
说明：
ØGPRS终端发起的PDP上下文激活成功次数：
SGSN成功执行辖区内MS发起的PDPcontext激活过程（包括静态和动态）次数，即向MS发送"ActivatePDPContextAccept"消息的次数。
ØGPRS终端发起的PDP上下文激活尝试次数：
SGSN执行辖区内MS发起的PDPcontext激活过程（包括静态和动态）次数，即从MS接收到"ActivatePDPContextRequest"消息的次数。
Ø由用户原因造成的MS发起的PDP上下文激活程序的失败次数包括：
●missingorunknownAPN;
●unknownPDPaddressorPDPtype;
●userauthenticationfailed;
●serviceoptionnotsupported;
●requestedserviceoptionnotsubscribed
5、其他
由于数据业务的种类不断增加，用户对数据业务质量的要求也不断提高，省公司会根据网络的实际发展情况及时调整相关的测试指标要求和测试内容，届时会以补充公文形式下发。
本检查办法适用于2008年中国移动广东公司网络运行质量现场检查，解释权在省公司网络部。
升级会员 