ewsd紧急情况培训.docx

ewsd紧急情况培训.docx

《ewsd紧急情况培训.docx》由会员分享，可在线阅读，更多相关《ewsd紧急情况培训.docx（74页珍藏版）》请在冰点文库上搜索。

ewsd紧急情况培训

EWSD

紧急情况培训

广西电信实业技术服务分公司

EWSD紧急情况培训

幻灯片2　EWSD紧急情况处理培训

●紧急情况的定义

●紧急情况的处理

幻灯片3　紧急情况的基本定义

●大量用户（V9：

50%用户）不能通话

●大量中继（V9：

30%中继）不能使用

●两个硬盘的APS都不可用

幻灯片4　可能是紧急情况的症状

●因整个系统崩溃而无法访问系统（循环Recovery状态）

●CP使用DISK上的GEN做RECOVERY（NSTART0-3和ISTART1/2）都不成功，并自动进入呼叫处理基本模式（CALLPROCESSINGBASICMODE）

●CP选用一个BACKUP或GOLDENGEN做ISTART2G

●呼叫处理继续保持，但不能访问任何磁盘，此时AMA已不能保留在DISK，很多MML不执行

●MB、TSG、SSG掉电，或双侧UNA

幻灯片5　可能是紧急情况的症状

●系统对终端输入没有反应或所有的电话没有拨号音。

●对象为“CENTRALUNITS”的紧急告警。

这有可能指示出双硬盘故障。

●对象为“RECOVERY”的紧急告警。

这有可能指示出ISTART2G。

●对象为“SYP”的紧急告警。

这有可能指示CP进入了呼叫处理基本模式。

●大量电话用户有关呼叫业务的申告。

●除以上症状外，当机房出现温度过热，要通知TAC。

由TAC决定是否部分或全部系统人工关电，以避免损坏硬件。

幻灯片6　指定一位紧急情况协调员emergencycoordinator

●为了避免在紧急情况下没有协调的情况，我们建议在每个网管中心OMC指定一位有经验的维护人员作为紧急情况协调员。

当然，如果维护人员上轮班，应多设几位。

●当发生紧急情况时，维护人员不应独自行动，而应该立即通知紧急情况协调员

幻灯片7　紧急情况的处理

●第一阶段维护人员识别紧急情况的最初症状，并通知紧急情况协调员

●第二阶段紧急情况协调员根据系统状态和错误发生的结果判断是哪一种紧急情况，并通知TAC

●第三阶段TAC决定采用紧急情况手册中哪一个处理流程

幻灯片8　第一阶段维护人员的责任

●有以下4种情况发生，可以怀疑出现紧急情况

–1、SYPD上有严重告警Criticalalarm

●两个红灯交替闪动（“CENTRALUNITS”，“RECOVERY”，“SYP”，……

–2、系统对输入没有反应/或者没有拔号音

●当然应证实不是终端或电源的故障

–3、很多用户申告：

没有拔号音

–4、很多用户申告：

某个方向打不通

●维护人员的操作

–记录时间

–通知紧急情况协调员

幻灯片9　第二阶段紧急情况协调员的责任

●识别告警

–接受维护人员的通知，明确四种情况中是哪一种情况发生

–进入以下处理流程之一

●”SYP_AL“

●”SY_N_REA“

●“SUB_COM”

●”EMCY“、

●”TAC_MENU“

●”SSP_LIST“

●”T_CALLS“

幻灯片10　1、SYPD上有严重告警Criticalalarm

●相对于其它三种情况，系统很有可能识别到一个中央错误并且正在自动恢复

●Entrypoint:

SYP_AL

幻灯片11　2、系统对输入没有反应/或者没有拔号音

●首先排除不是终端或电源的问题

●不要惊慌

●不要中断系统

–有一些RECOVERY要持续大约30分钟（例如：

ISTART2G），一般来讲这段时间内不能够建立呼叫

●Entrypoint:

SY_N_REA

幻灯片12　3、很多用户申告：

没有拔号音

●首先检查外围部分是否中断（例如：

公用的LTGB、DLU）

●与第二点的区别是：

从紧急情况开始到现在已过去几分钟，此时系统已进入准稳状态

–ISTART2G正在运行

–重复RECOVERY

–系统中央硬件故障

–电源中断

–过热

●Entrypoint:

SUB_COM

幻灯片13　4、很多用户申告：

某个方向打不通

●第四点与第三点的区别：

用户有拔号音但不能拔打某个方向

●可能原因：

–本交换机内外围设备故障（DLU、LTG、SN、MB、CCNC）

–其它交换机故障（对端市话局、长途局、汇接局等），出中继故障

–软件或数据库错误

●Entrypoint:

SUB_COM

幻灯片16

幻灯片17

幻灯片19

幻灯片20

幻灯片21　EY100

循环Recovery（整个系统崩溃）

●由于CP不能按升级概念完成任何一级的RECOVERY,而导致系统进入循环Recovery,可参考EY100来处理.

●不成功Recovery可能是由以下不同的错误引起的：

1、由外围硬件错误引起，如双侧SN、MB或所有LTG；

2、由CP硬件错误引起，如MDD-0和MDD-1或IOC-0和IOC-1；

3、由软件错误引起，如LTG上的CODE或DATA错误，或CP上软件错误；

幻灯片22　EY100的处理流程

●如是系统过热引起的系统崩溃则可参考EY350处理。

●根据初始化消息判断：

tracepoints是Bx74orB254则是外围设备的SW/HW出错。

tracepoints是Axx5则是CP的HW出错

●根据上述判断对出错设备进行Offlinediagnostics，后转至EY130从MDD进行人工启机。

幻灯片23　EY100的处理流程

●如从MDD人工启机成功，则可根据SW231将错误症状储存起来。

●如从MDD人工启机后问题还没解决,查看硬盘上是否有别的GEN来再启机,没有则要转至EY350/EY370进行部分或全部关机后启机，如还不成功则可转至EY150或从磁带或光盘人工启机，

●如问题解决，也要根据SW231将错误症状储存起来。

如问题依然存在，则通报更高级TAC。

●EY100至此结束

幻灯片24　从MDD人工启机（EY130）

●可选择从BAP-0或BAP-1进行人工启机，这以从BAP0启机为例：

●关BAP-1侧的电，按下BAP-0的BOOT键。

●输出：

TODISPLAYHISTORY:

“HIST;”

TODIAGNOSEMEMORY:

“DIAG;”

TOFORMATMEMORY:

“FORMAT;”

TOCONTINUE:

“;”

幻灯片25　从MDD人工启机（EY130）

●输入：

；

MAN；

IOC-0；

ACTGEN；（输入装载于MDD0中的GEN名）

CODE（/DATA）；（对LTG进行装载填CODE）

●打开BAP-1侧的电。

然后分析输出的启机消息，如启机不成功，从EY100来的就转回EY100，否则转到EY190

幻灯片26　从MDD人工启机（EY130）

●删除告警信息：

DISPALARM：

OBJECT=RECOV；

SELALSTAT：

MSGNO=msgno，ALSTAT=C；

●核对计费，根据终端输出的信息，输入相关指令，例：

SAVEMET:

FUNC=FALLBACK

●后续工作：

检查各个硬件状态。

●EY130至此结束

幻灯片27　EY151

从季度带启机

●EY151讲述如何从APS季度保留带启机

●注意：

必须先执行EY171，以保留计费和LOG文件

幻灯片28　从季度带启机

●装上季度带

●关BAP-1

●按一下BAP-0的BOOT键

幻灯片29　从季度带启机

●屏幕显示

键入FORMAT；

幻灯片30　从季度带启机

●

屏幕显示

键入；

幻灯片31　从季度带启机

●屏幕显示

键入UTI；

幻灯片32　从季度带启机

●屏幕显示

●键入MOD；

幻灯片33　从季度带启机

●屏幕显示

●键入010C23（CP113C的MTD-0的DEVICE-NO）

幻灯片34　从季度带启机

●屏幕显示

●键入SY.INSTALL

幻灯片35　初始化硬盘

●如果怀疑硬盘扇区有故障，先初始化硬盘，再加标签

–INITMD：

DEVOUT=010C01；（MDD-0）

–LABELMD：

DEVOUT=010C01；（MDD-0）

–INITMD：

DEVOUT=030C01；（MDD-1）

–LABELMD：

DEVOUT=030C01；（MDD-1）

●否则直接加标签即可

–LABELMD：

DEVOUT=010C01；（MDD-0）

–LABELMD：

DEVOUT=030C01；（MDD-1）

幻灯片36　从季度带拷贝文件

●开BAP-1的电源

●TRANSFILE：

DEVIN=010C23，DEVOUT=010C01，FILECAT=*，OLDGEN=*，NEWGEN=*；　　

如果有EY171创建的METER带，则键入“Y”，然后换上此光盘，回车

取下光盘

幻灯片37　从例存带拷贝文件

如果没有EY171创建的METER带，则

–装上最近一次保留的例存带

–TRANSFILE:

DEVIN=devin,DEVOUT=devout,

FILECAT=CA.IC.UCHA&CA.ST.UCHA&CA.SU.UCHA&CA.TF.UCHA&CA.TR.UCHA,OLDGEN=*,NEWGEN=*;

–键入“N”

–取下光盘

否则直接跳到下一步

幻灯片38　情况判断

●DISPMDDIR：

DEVIN=010C01；

●本季度是否保留过例存带？

–是，继续下一步

–否，跳到从BACKGEN启机

幻灯片39　安装模式启机

●关BAP-1

●按一下BAP-0的BOOT键

幻灯片40　安装模式启机

●屏幕显示

键入；

开BAP-1电源

幻灯片41　安装模式启机

●屏幕显示

键入INS；

幻灯片42　安装模式启机

●屏幕显示

键入IOC-0；

幻灯片43　安装模式启机

●屏幕显示

键入GEN号；（前面的屏幕输出的BACKGEN）

幻灯片44　安装模式启机

●STARTFCP；

●屏幕有RECOVERYREPORT输出

●STARTOM；

●如果使用Q3：

STARTOM：

APPL=Q3IF；

●STARTDB；

●STARTSFGSW；

●STARTCSWD；

●

幻灯片45　拷贝FIXGEN

装上APS例存带

DISPGEN；

DISPGEN:

VSN=LOGMOD；（记下fixgen的GEN号）

TRANSSYFILE：

GEN=fixgen，VSN=LOGMOD，REASON=REINST，VERIFY=Y；

幻灯片46　激活FIXGEN

●如果TRANSSYFILE命令不执行（NOTEXEC’D），取下光盘，跳到从BACKGEN启机

●DISPGEN；

●可看到有两个GEN：

BACKUP和FIXPOINT

●MODGEN：

GEN=fixgen,，VALIDITY=VALID；

幻灯片47　用FIXGEN启机

●取下例存带

●关BAP-1

●按BAP-0的BOOT键

幻灯片48　用FIXGEN启机

●

屏幕显示

键入；

开BAP-1电源

幻灯片49　用FIXGEN启机

●屏幕显示

键入MAN；

幻灯片50　用FIXGEN启机

●屏幕显示

键入IOC-0；

幻灯片51　用FIXGEN启机

●屏幕显示

键入GEN号；（前面的屏幕输出的FIXGEN）

幻灯片52　用FIXGEN启机

●屏幕显示

键入FORCED；

幻灯片53　用FIXGEN启机

●此时有RECOVERYREPORT输出

●启机成功？

–是，跳到恢复数据

–否，继续下一步

幻灯片54　用BACKGEN启机

●关BAP-1

●按BAP-0的BOOT键

幻灯片55　用BACKGEN启机

●屏幕显示

键入；

开BAP-1电源

幻灯片56　用BACKGEN启机

●屏幕显示

键入MAN；

幻灯片57　用BACKGEN启机

●屏幕显示

键入IOC-0；

幻灯片58　用BACKGEN启机

●屏幕显示

键入GEN号；（前面的屏幕输出的BACKGEN）

幻灯片59　用BACKGEN启机

●屏幕显示

键入FORCED；

此时有RECOVERYREPORT输出

幻灯片60　恢复数据

RESETCFOPT；

DISPGEN；

EXECCMDFILE:

FILE=CG.SA.REC54；（激活LOG功能）

幻灯片61　恢复数据

如果有从EY171保存下来的LOG带，则

–RESETCFOPT

–SETCFOPT：

ON=15；

–装上此LOG带

–EXECCMDFILE：

FILE=CG.SA.REC54；（拷贝LOG文件）

–取下带子

如果没有，直接到下一步

幻灯片62　恢复数据

●此时需要判断：

–当前GEN是BACKGEN还是FIXGEN？

–本季度是否有例存带？

–是否有从EY171保留下来的LOG带？

幻灯片63　恢复数据

●如果当前GEN是FIXGEN（数据已恢复到例存带保留的日期）

–如果有LOG带，则跳到从LOG带恢复数据

–没有LOG带，则需要手工恢复数据，逐一输入从例存带保留日期起一直到现在所有的改变数据库的指令。

然后跳到后处理工作

幻灯片64　恢复数据

●如果当前GEN是BACKGEN（数据已恢复到季度带保留的日期）

–如果有例存带，跳到从例存带恢复数据

–如果没有例存带，但有LOG带，则跳到从LOG带恢复数据

–如果没有例存带，也没有LOG带，则只能手工恢复数据，逐一输入从季度带保留日期起一直到现在所有的改变数据库的指令。

然后跳到后处理工作

幻灯片65　从LOG带恢复数据

RESETCFOPT；

SETCFOPT：

ON=16；

ACTIAOPT：

BLBUFR=ADMREC；

EXECCMDFILE：

FILE=CG.SA.REC54；

CANIAOPT：

BLBUFR=ADMREC；

跳到后处理工作

幻灯片66　从例存带恢复数据

●装上例存带

●RESETCFOPT；

●此例存带是本季度第几次？

–第1次，则n=12

–第2次，则n=13

–第3次，则n=14

–第4次，则n=15

–第5次，则n=16

●SETCFOPT：

ON=n；

幻灯片67　从例存带恢复数据

ACTIAOPT：

BLBUFR=ADMREC；

EXECCMDFILE：

FILE=CG.SA.REC55；

CANIAOPT：

BLBUFR=ADMREC；

取下光盘

如果有LOG带，跳到从LOG带恢复数据

如果没有LOG带，则只能手工恢复数据，逐一输入从例存带保留日期起一直到现在所有的改变数据库的指令。

幻灯片68　后处理工作

●RESETCFOPT；

●EXECCMDFILE：

FILE=CG.SA.REC53；

●DISPALARM：

OBJECT=RECOV；

●SETALSTAT：

MSGNO=msgno，ALSTAT=C；

幻灯片69　删除多余的GEN

●DISPGEN；

●注意当前GEN（NAMEOFCURRENTGENERATION）是哪一个

●保留此GEN，删除另一个没用的GEN

–CANGEN：

GEN=gen；

幻灯片70　删除话务测量工作

●DISPTRAMORD：

STATUS=ALL；

●如果有内容显示，则删除这些话务测量工作

–CANJOB：

JN=jn，CMDCOD=code；

–DISPTRAMORD：

STATUS=ALL；

–此时显示应无内容

幻灯片71　恢复METER表

●如果是从EY601进来的，回到EY601

●SAVEMET：

FUNC=FALLBACK；

●执行SW210（保留APS带）

●EY151至此结束

幻灯片72　EY171

拯救硬盘数据

●EY171讲述如何从硬盘拯救计费、LOG以及错误症状等数据，这些数据在执行EY151时用到

●EY171何时执行：

当交换机断电，电源恢复后手动启机失败，需要从后备带启机（EY151），在EY151执行前必须先执行EY171，以便保存必要的数据

幻灯片73　安装模式启机

●关BAP-1

●按一下BAP-0的BOOT键

幻灯片74　安装模式启机

●屏幕显示

键入；

幻灯片75　安装模式启机

●屏幕显示

键入INS；

幻灯片76　安装模式启机

●屏幕显示

键入IOC-0；

幻灯片77　安装模式启机

●屏幕显示

键入GEN号；（前面的屏幕输出的GEN-N）

幻灯片78　安装模式启机

●STARTFCP；

●屏幕有RECOVERYREPORT输出

●STARTOM；

●如果使用Q3：

STARTOM：

APPL=Q3IF；

●STARTDB；

幻灯片79　存数据带

显示METER、LOG及历史文件和命令文件：

DISPFILE：

FILE=CA.；

DISPFILE：

FILE=LG.；

DISPFILE：

FILE=LQ.；

DISPFILE：

FILE=SG.；

DISPFILE：

FILE=HF.；

DISPFILE：

FILE=TM.；

幻灯片80　存数据带

如果有内容显示，则

–装上新光盘

–RESETCFOPT；

–EXECCMDFILE：

FILE=CG.SA.REC76；

–如果成功，取下光盘，贴上标签以备用（这些数据在执行EY151时用到）

–如果不成功，取下光盘（此带可继续使用）

如果无内容显示，直接到下一步

幻灯片81　存数据带

显示AMA、IAR、INA及IARSTAT文件

DISPFILE：

FILE=IA.；看是否有IA.ICAMA文件、IA.ICIAR文件和IA.ICINA文件。

DISPIARJOB；看是否有内容显示

幻灯片82　存数据带

如果有内容显示，则

–装上新光盘

–如果有口令，ENTRFILEPSW；（输入口令）

–RESETCFOPT；

–EXECCMDFILE：

FILE=CG.SA.REC77；

–如果成功，取下光盘，贴上标签以备用

–如果不成功，取下光盘（此光盘可继续使用）

如果无内容显示，直接到下一步

幻灯片83　结束

●EY171至此结束

●往下应继续执行EY151（从季度带启机）

幻灯片84　EY190

后备GEN启机

●EY190讲述如何用后备GEN将交换机恢复回原来的状态

●EY190用于何种情况：

–用后备GEN自动启机后，需要执行后处理程序，以恢复数据

–用当前GEN启机不成功或启机后系统不能正常工作，需要用后备GEN启机

幻灯片85　情况判断

●是否从EY195（启机测试失败）进来的？

–是，跳到恢复数据

–否，继续下一步

幻灯片86　情况判断

●本流程使用目的：

–用后备GEN自动启机后，需要执行后处理程序，直接跳到下一步

–用当前GEN启机不成功或启机后系统不能正常工作，需要用后备GEN启机，则键入RECOVSYSTEM：

LEVEL=ISTART2G[，GEN=generation]；

幻灯片87　消除告警

●DISPALARM：

OBJECT=RECOV；（记下msgno）

●SRCHALARM：

MSGNO=msgno；

●SETALSTAT：

MSGNO=msgno，ALSTAT=C；

幻灯片88　取消METER带的每日例存

●如果交换机有METER计费，则需取消METER带的每日例存：

●DISPCFTJOB；（找出CG.SA.MxxAP的JN号）

●CANJOB:

JN=jn，CMDCOD=EXECCMDFILE；

幻灯片89　情况判断

●DISPGEN；

幻灯片90　情况判断

●看“NAMEOFCURRENTGENERATION”与哪个GEN相同：

–同ACTGEN，继续下一步

–同BACKGEN，跳到当前GEN为BACKGEN

–同OLDGOLD，转去执行EY191

幻灯片91　一些消息输出

●屏幕会有“CHARGINGSAFEGUARDINGMESSAGE”输出

●如有“IACHASTAMESSAGE”输出，记下旧的IACHASTAT备份文件的文件名CA.IC.UCHA.dddhhs，以备用

幻灯片92　回传METER表

●如果交换机有METER计费，回传METER表

●SAVEMET：

FUNC=FALLBACK；

幻灯片93　保存错误症状

●取下磁带机/光盘机上的磁带/光盘

●执行SW231（保存错误症状文件）

●执行完SW231后，继续下一步

幻灯片94　有METER计费否？

●如果交换机无METER计费，则EY190至此结束

●如果交换机有METER计费，继续下一步

幻灯片95　存METER带

●装上APS例存带

●EXECCMDFILE：

FILE=CG.SA.M11AP；（MT）

●EXECCMDFILE：

FILE=CG.SA.M21AP；（MO）

幻灯片96　恢复每日例存

●EXECCMDFILE：

FILE=CG.SA.M11AP，DATE=yy-mm-dd，TIME=hh-mm，PER=YES;（MT）

●EXECCMDFILE：

FILE=CG.SA.M21AP，DATE=yy-mm-dd，TIME=hh-mm，PER=YES;（MO）

●EY190至此结束

幻灯片97　当前GE