EHPRS网络性能KPI指标评价体系(初稿).docx
《EHPRS网络性能KPI指标评价体系(初稿).docx》由会员分享,可在线阅读,更多相关《EHPRS网络性能KPI指标评价体系(初稿).docx(14页珍藏版)》请在冰点文库上搜索。
网络性能指标评估体系(初稿)
为了合理评价网络的性能,发现网络中存在的问题。
特制定网络性能指标评估体系。
相关的分为日常考核和现场测试指标两部分。
日常考核包括网络使用、信道质量、拥塞、拥塞和拥塞几方面。
如下表:
其中左边的针对全网所有小区进行统计,右边的在系统中针对小区中的进行统计,在,华为系统中针对开启业务的小区进行统计。
现场测试指标包括定点拨打测试和城市测试两部分。
一、日常考核指标
1、下行流量
目的:
该指标反映了网络中下行层数据业务量的大小。
统计级别:
全网、、小区、
单位:
门限值:
无
公式:
a.公式
(1()*22+2()*28+3()*37+
4()*44+5()*56+6()*74+
7
(2)*112+8
(2)*一三6+9
(2)*148))
)/1024
=(+)
(s):
注:
由于7,8,9编码的无线块包含2个块,所以上式中除以2。
b.公式
c.华为公式
(587204580_3587203043*22+587204580_3587203044*28+587204580_3587203045*37+587204580_3587203046*44+587204580_3587203047*56+587204580_3587203048*74+587204580_3587203049*56+587204580_3587203050*68+587204580_3587203051*74)*8/1024
2、下行阻塞率
目的:
该指标是指由于无线资源的限制导致的下行分配失败的比例。
反映网络下行硬拥塞情况。
该公式不区分、。
即计算所有下行的阻塞率。
统计级别:
全网、、小区、
单位:
百分比
典型值:
小于2%
公式:
a.公式
()
100*
(1+2+3+4
+5+6+7+8)
(s):
b.公式
上行阻塞率=
(1)*100%
c.华为公式
(587202740_3.587202743/587202740_3.587202741)*100%
3、上行阻塞率
目的:
该指标是指由于无线资源的限制导致的上行分配失败的比例。
反映网络上行硬拥塞情况。
该公式不区分、。
即计算所有上行的阻塞率。
统计级别:
全网、、小区、
单位:
百分比
典型值:
小于2%
公式:
a.公式
()
100*
(1+2+3+4
+5+6+7+8)
(s):
b.公式
上行阻塞率=
(1)*100%
c.华为公式
(587202710_3.5872027一三/587202710_3.587202711)*100%
4、上行每时隙数
目的:
该指标反映了网络上行软阻塞的情况。
该公式不区分,。
统计级别:
全网、、小区、
单位:
个数
典型值:
小于4个
公式:
a.公式
()
()*100
(s):
b.公式
c.华为公式
587202710_3.587202721/587202940_3.587202948
5、下行每时隙数
目的:
该指标反映了网络下行软阻塞的情况。
该公式不区分,。
统计级别:
全网、、小区、
单位:
个数
典型值:
小于4个
公式:
公式
()
()*100
(s):
公式
c.华为公式
587202740_3.587202750/587202940_3.587202949
6、数据业务拥塞小区比例
目的:
该指标反映全网数据业务的硬拥塞情况
统计级别:
全网
单位:
百分比
典型值:
小于1%
公式:
(出现上行或下行拥塞率大于1%的小区个数)+(上行或下行每时隙数大于4个的小区个数)
100*
有效小区个数
有效小区定义:
统计时段数据流量(包括、流量)大于100的小区
7、7、8、9编码块在块中所占的比例(方式块)
目的:
该指标反映了信道质量,包括网络的无线环境的好坏、的混用的影响、拥塞的影响质量。
统计级别:
全网、、小区、
单位:
百分比
典型值:
公式:
公式
7-9()
100*
1-9()
(s):
b.公式
(77+88+99)
(11+
22+
3+3+
44+
55+
66+77+88+
9+9)
c.华为公式
(587204590_35872590_35872590_3587203051)
(587204580_3587203043+587204580_3587203044+
587204580_35872580_3587203046+
587204590_35872590_3587203048+
587204590_35872590_3587203050+
587204590_3587203051)
8、单信道下行吞吐率
目的:
该指标反映了下行信道质量,包括无线环境的好坏、的混用的影响、拥塞的影响
统计级别:
全网、、小区、
单位:
典型值:
35
公式:
公式
()
=
()
(1()*22+2()*28+3()*37+4()*44
+5()*56+6()*74+7()*56+8()*68
+9()*74)*8/1000
1..6()/50+7..9()/2/50
==+
(s):
b=
公式
下行平均吞吐量=
{〔(11)*22+(2+2)*28+
(3+3)*37+(4+4)*44+
(5+5)*56+(6+6)*74+
(7+7)*112+(8+8)*一三6+
(9+9)*148〕*8/1000}
〔(1+234+
5+6+7+8+91+2+3+
4+5+6+7+
8+91+2+
3+4+5+6+
7+8+9)/50〕
c.华为公式
((587204580_3587203043*22+587204580_3587203044*28+587204580_3587203045*37+587204580_3587203046*44+587204580_3587203047*56+587204580_3587203048*74+587204580_3587203049*56+587204580_3587203050*68+587204580_3587203051*74)*8/1024)/587202940_3.587202949
9、拥塞率
目的:
该指标反映了资源对数据传输的影响
统计级别:
全网、、小区、
单位:
百分比
公式:
公式
()
100*
(1+2+3+4
+5+6+7+8
1+2+3+4
+5+6+7+8)
公式
拥塞率=(*100)*100%
c.华为公式
(587202740_3.587202743+587202710_3.5872027一三)/(587202710_3.587202711+587202740_3.587202741)*100%
10、上下行利用率
目的:
该指标反映了带宽的利用率
统计级别:
单位:
百分比
典型值:
80%
公式:
公式
(8*(1+2+3+4
+5)/(*60))
=100*
(*16)
=
(s):
(8*(1234
+5)/(*60))
=100*
(*16);
=
(s):
b.公式
()*8的带宽
带宽为多少时隙乘以64。
()*8的带宽
带宽为多少时隙乘以64。
c.华为公式
下行利用率:
((587203210_3.5872032一五)*8/(3600*1024))的带宽,带宽为是隙乘以64
上行利用率:
((587203210_3.587203214)*8/(3600*1024))的带宽,带宽为是隙乘以64
11、拥塞率
目的:
该指标反映了全网链路的拥塞情况
统计级别:
全网、
单位:
百分比
典型值:
上行或下行利用率大于80%的链路条数
100*
链路的总条数
二、现场测试考核指标
参考集团公司2007年业务测试规范,制定业务测试规范。
1、测试方式
对城区重要场所的检查采用定点拨打测试方式,对城市主要道路的检查采用测试方式。
测试中全部使用全球通卡,且必须使用本地的卡进行测试;卡要有业务功能。
测试手机需使用支持的490或498,设置为3+1模式。
测试软件使用支持测试的4.0。
2、检查方法及内容
(一)定点测试:
1.测试时间:
必须安排在周一至周五上午9:
00-19:
00进行。
2.测试地点:
(1)地点选择
大型城市(福州、泉州、厦门)选30个测试点,中型城市选20个测试点。
全部要求为室内测试点。
具体测试点分布要求如下:
测试地点
大型城市
中型城市
机场候机楼
1
1
火车站候车室
1
1
三星级以上酒店30%
9
6
大型商场休闲区10%
3
2
地铁/城铁站台
0
0
大学学校(教学楼/研究生宿舍楼)10%
3
2
大型居民小区占[电梯间外(室内)或楼门口(室外)]*城区内一五%
4
3
商务场所(高层写字楼、会所)大堂/会议室30%
9
5
共计
30
20
(2)地点分布
测试地点应尽量均匀分布在市区范围内。
(3)测试位置
对于各测试点,主要测试公共场所,如酒店主要测试大堂。
要求在测试前应首先检查测试点有信号覆盖(可通过软件或测试手机的信息来判别)并测量当前位置的无线信号,避免在测试过程中频繁小区重选(重选次数控制在3-4次之内)。
3.测试网站、服务器:
(1)测试站点为.。
(2)和的测试服务器(服务器采用版本)由省公司提供。
(3)准备大小为500K文件若干。
4.测试内容、测试记录项目及定义:
(1)测试
测试数量:
每个测试点要求做10次网络附着测试
统计结果:
成功率及平均时长
指标定义:
l成功率:
成功次数/总尝试次数×100%
l成功指在手机发出后一五秒钟内收到信令
l平均时间:
各次成功的时间相加成功次数。
l成功时间定义为手机发出第一个后到收到的时间
(2)激活测试
测试数量:
每个测试点要求做10次激活测试
统计结果:
统计激活成功率及平均时长
设置要求:
使用为激活
指标定义:
l激活成功率:
激活成功次数/总尝试次数×100%
l激活成功指在手机发出后在一五秒钟内收到信令
l平均激活时间:
各次激活成功的时间相加激活成功次数。
l激活成功时间的定义为手机发出第一个后到收到的时间。
(3)登录测试
测试数量:
对每点做5次1协议登陆测试,5次2.0协议登陆测试
统计结果:
网站平均登录时长,登录成功率
设置要求:
网站登录地址为..5次测试使用1协议(\),模拟手机设置为7650;5次测试设置为2协议,模拟手机类型设置为N73
指标定义:
l登录成功率:
登录成功次数/尝试登陆次数×100%
l登录成功指开始测试后网站的首页面文本信息在60秒内正确显示(如果出现收费提示页面应继续访问至真正首页)
l平均首页显示时间:
各次首页成功显示的时间相加/首页显示成功次数
首页显示时间:
指登录测试过程中激活时间+网关连接时间+页面响应时间
(4)页面刷新测试
测试数量:
对每点做10次页面刷新测试
统计结果:
页面刷新平均时长,刷新成功率
设置要求:
10个页面应该为不同页面
指标定义:
l页面刷新成功率:
页面刷新成功次数/尝试页面刷新次数×100%
l页面刷新成功指被选择浏览的页面在60秒内文本信息完整正确的显示
l页面刷新平均时长:
各次页面刷新成功的时间相加页面成功刷新次数
l页面刷新时长为发出浏览请求到最终页面完全正确显示为止的时间(包含页面被重新定向或重传的时间)
(5)图铃下载测试
测试数量:
对每点做5次图片,5次铃声下载测试
统计结果:
图铃下载平均速率,图铃下载成功率
设置要求:
每个铃声和图片的大小应在25-35K之间
指标定义:
l下载成功率:
成功下载次数/尝试下载次数×100%
下载速率:
实际成功下载总数据量()/实际成功下载总时间
(6)下载测试
测试数量:
对每点做5次下载测试
统计结果:
下载平均速率,下载成功率
设置要求:
每个程序的大小应在80-90K之间
指标定义:
l下载成功率:
成功下载次数/尝试下载次数×100%
下载速率:
实际成功下载总数据量()/实际成功下载总时间
(7)测试
测试数量:
对每点做10次测试
统计结果:
成功率,平均时长
设置要求:
包大小为500,间隔时长为8秒,超时为5秒
指标定义:
l成功率:
成功的次数尝试次数×100%
l平均时延:
各次成功的时间相加成功的次数
(8)下载测试
测试数量:
下载500K文件一次
统计结果:
下载成功率,平均应用层下载下载速率、平均吞吐量、平均、平均吞吐量、 比例、平均时隙使用数量、平均编码使用率、19编码使用比例
设置要求:
停传超时时间为120秒,即如果连续120秒钟内没有任何下载数据流量即判为下载超时
指标定义:
l应用层下载速率:
成功下载的实际下载数据量/成功下载的总下载时间
l下载时间定义客户端发出文件请求到完整接收到最后一个数据包的时间
l平均吞吐量:
在下载时间内层的平均每秒吞吐率
l平均:
在下载时间内,平均每秒的误块率
l平均吞吐量:
在下载时间内层的平均每秒吞吐率
l 比例:
下载时间内,总时长/下载总时长
l平均时隙使用数量:
在下载时间内,(1个下行时隙时长+2*两个下行时隙时长+3*三个下行时隙时长)/总下载时长
l平均编码使用率:
在下载时间内,(1包数量*1+2包数量*2+…+9包数量*9)/总包数量
编码使用比例:
MC1编码使用比例定义为,在下载时间内,1包数量/总包数量*100%,依次类推29
(9)点到点测试
测试数量:
对每点做10次点到点测试
统计结果:
发送成功率,发送平均时长,成功率,时长,提取成功率,提取平均时长,点到点成功率
设置要求:
发送彩信的大小设置为30K,发送使用商用手机,接收使用测试手机
指标定义:
l发送成功率:
成功发送次数/尝试发送次数
l发送成功指开始尝试发送后在120秒内收到确认发送成功
l发送时长:
发送开始的激活时间+消息被确认时间
l成功率:
接收手机收到消息数量/发送成功数量
l成功指成功发送后在120秒内收到消息
l时长:
发送成功到接收端收到消息时间
l提取成功率:
成功提取次数/收到次数
l提取成功指开始尝试提取后在120秒内完整收到消息
l提取时长:
提取开始的激活时间+获得时长
l点到点成功率:
成功提取次数/尝试发送次数*100%
5.其它测试要求
(1)所有城市使用相同型号的测试手机,手机处于自由双频模式。
(2)每次测试前,需记录小区的信号强度。
(二)城市测试方法
1.测试时间:
必须安排在周一至周五9:
00-19:
00进行。
大型城市必须测满8个小时,中型城市必须测满6个小时。
2.测试路线
要求均匀覆盖市区主要街道,并且尽量不重复
3.测试内容
(1)测试
测试数量:
循环进行登录测试(3次),页面刷新测试(5次),下载测试(3次)
统计结果:
网站登陆成功率、网站登陆时长、页面刷新成功率、页面平均刷新时长、下载成功率、平均下载速率
设置要求:
测试站点为:
\\.;下载铃声为25至35K之间
指标定义:
与测试相同
(2)下载测试
测试数量:
循环进行下载测试
统计结果:
下载成功率,平均应用层下载下载速率、平均吞吐量、平均、平均吞吐量、平均时隙使用数量、平均编码使用率、19编码使用比例、平均值,平均值
设置要求:
停传超时时间为一八0秒,即如果连续一八0秒钟内没有任何下载数据流量即判为下载超时,停传期间应间隔一五秒来服务器,并记录是否成功
指标定义:
与测试相同
l8平均值:
在下载时间内,手机上报的8平均值
l8平均值:
在下载时间内,手机上报的8平均值
l平均值:
在下载时间内,手机上报的平均值
l平均值:
在下载时间内,手机上报的平均值
(3)测试其它统计指标
l网络覆盖率:
网络覆盖的测试里程/总测试里程X100%。
(是否有覆盖通过小区广播消息判断)
l网络覆盖率:
覆盖里程/总测试里程X100%。
满足以下条件之一判别为无覆盖:
a.手机的处于关闭状态且超过90秒钟以上没有接收到一三的路段为无覆盖里程
b.关闭后服务小区电平低于-94且最强的邻小区电平低于-90,并持续5秒钟以上的路段
l掉线率:
掉线次数/总下载尝试次数X100%,满足以下条件之一判别为掉线:
a.网络原因造成连接断开,以下行信令或作为判断依据。
b.测试过程中超过3分钟没有任何数据传输,且尝试后数据链路仍不可使用。
此时应断开拨号连接并重新拨号来恢复测试。
每次掉线后重建拨号连接,并且应重新开始一次下载过程。
如果发生掉线是由于覆盖原因造成,掉线将不再重复计算。
l平均间隔时间:
总次数/总测试时间
l平均间隔距离:
总次数/总测试距离)
l平均小区重选间隔时间:
总小区重选次数/总测试时间
l平均小区重选间隔距离:
总小区重选次数/总测试距离
3、其它测试要求
a.测试过程中手机和接收机需连接计算机并记录测试过程的信令和轨迹。
测试手机置于车内,手机使用自动双频模式测试。
b.测试速度在市区保持正常行驶速度,最高限速30-50。
总的公里数不应少于30(N为该城市应测的小时数)。
c.测试中将测试和测试分别进行,但需要保证测试的线路、时间、公里数应和测试的线路、时间、公里数尽量一致,且总的公里数不应少于30(N为该城市应测的小时数)。
(三)测试报表格式与内容
l城市汇总统计报表
1.测试概况:
测试时间、测试人员、测试工具等基本信息。
2.城市测试统计表,表格应包含规范要求的所有项目的汇总统计指标以及单项测试的明细指标,各测试点明细信息,此外还应包含服务小区,接收电平相关信息,参考附件的统计表;
3.分别列出中城市测试汇总表,表格应包含规范要求的所有项目的统计指标以及单项测试的明细指标,此外还应包含测试里程、电平等信息,参考附件的统计表
4.测试信号分布图,进行下载测试的以下数据生成地理分布图:
分布,应用层吞吐率分布,层下行吞吐率分布,层下行吞吐率分布,下行分布,下行平均编码率分布
l原始日志
对于所有、测试应保留完整的原始日志文件,其中应包含详细的\、层三信令。
(四)测试参考指标(讨论)
挑战值
基准值
覆盖率(覆盖标准的认定)
85%
50%
掉线率()
1%
3%
平均应用层吞吐率()
70
40
网站登陆成功率
0.9
0.6
首页显示时间(秒)
12
24
网页刷新成功率
90%
60%
网页刷新时长
8
20
图铃下载成功率
90%
60%
图铃下载平均速率()
30
16
挑战值
基准值
测试
平均时间(秒)
2.5
5
成功率(%)
98%
90%
激活测试
激活时间(秒)
1.5
3
激活成功率(%)
99%
90%
测试
平均首页显示时间(秒)
8
16
网站登陆成功率(%)
98%
60%
页面刷新时延(秒)
3
6
页面刷新成功率(%)
98%
80%
下载成功率
90%
60%
下载速率()
30
20
500k
平均时延(秒)
1.5
3
成功率(%)
98%
80%
测试
平均下载文件速率()
100
60
平均上载文件速率()
30
一五
彩信
手机发送彩信成功率(%)
96%
80%
发送时长
一五
45
用户提取彩信成功率(%)
96%
80%
提取时长
一五
45
点到点成功率
96%
80%
短信消息下发成功率(%)
96%
80%
短信消息下发平均时延(秒)
20
60
下载平均成功率(%)
90%
75%
在线应用接入成功率(基于)
90%
60%
在线文档:
.
.(.....)成立于2004年,专注于企业管理培训。
提供60万企业管理资料下载,详情查看:
提供5万集管理视频课程下载,详情查看:
提供2万高清管理视频课程硬盘拷贝,详情查看:
2万高清管理视频课程目录下载:
12000
高清课程可提供免费体验,如有需要请于我们联系。
咨询x020-.
值班手机:
.
网站网址:
....