网络运维及机房应急方案.docx

1、网络运维及机房应急方案文档网络运维小组应急预案随着网络信息化建设的不断深入， 加强机房各类设备、 系统以及信息与网络平安等方面应对突发事件的处理能力将是我们目前面临的一项重要任务。 为确保系统及机房平安与稳定，以保证正常运行为宗旨，按照“预防为主，积极处置的原那么，本着建立一个有效处置突发事件，建立统一指挥、职责明确运转有序、反响迅速处置有力的机房平安体系的目标， 将正在发生或已发生事故的损害程度减轻到最低，确保员工平安，特制定本应急处置预案。本预案共分为应用系统故障应急流程和机房突发事件应急流程系统故障应急流程一、系统故障应急流程说明1、故障发生系统运维效劳小组可从以下途径得知故障的发生：1

2、.1 、运维效劳中心通过网管告警发现故障1.2 、维护站点通过维护巡检发现故障1.3 、用户发现故障，报给呼叫中心1.4 、驻场工程师发现故障2、报障受理监控系统运维效劳小组得知系统故障发生后， 立即响应，并向报障人或单位详细了解系统故障情况。3、信息研判运维效劳小组根据了解到的系统故障情况进行分析判断， 以确定采用一般故障处理流程还是立即启动系统突发故障应急处理预案。4、预案启动如需启动应急预案， 那么立刻通知系统突发故障应急领导小组， 由领导小组启动应急预案，对系统突发故障应急事件进行全面管控处理。5、资源确认文档系统突发故障应急预案启动后， 首先是根据现场突发故障实际状况、 紧急程度、技

3、术难度、备品备件等情况对相关资源主要是参与人员依据经验进行调度和确认，主要有以下资源：我公司技术支持人员；相关厂家技术支持人员；我公司聘请的技术专家6、预案执行按照既定的预案进行突发故障抢修， 如遇到问题及时向系统突发故障应急领导小组汇报。7、预案终止预案的终止时间由故障现场技术人员根据现场的实际进展情况， 在与用户单位有关部门协调后报系统突发故障应急领导小组决定。8、结果上报预案中止后， 相关预案参与人员将整个事件过程中的经验和教训， 修改、完善事件应急预案。然后集中上报至系统突发故障应急领导小组。文档二、 系统故障应急处理流程图文档机房突发事件应急流程一、机房突发事件分类1、自然灾害：指地

4、震、火灾等因自然因素引起的网络与信息系统的损坏。2、事故灾难：指电力中断、网络损坏、软件、硬件设备故障等引起的网络与信息系统的损坏。3、人为破坏：指人为破坏网络线路、通信设施，黑客攻击、病毒攻击、恐怖袭击等引起的网络与信息系统的损坏。二、 应急处理人员组织机构三、 应急机构人员岗位职责1、应急总指挥职责1.1 、保证在任何时间，及时协调应急行动所有涉及的岗位人员；1.2 、提供必须的紧急响应设备；1.3 、在紧急情况下全面负责紧急行动；1.4 、在必要时向外界求救，例如： 119、110、120 等。2、应急副总指挥职责2.1 、在总指挥领导下具体开展工作，当总指挥不在时履行总指挥职责；2.2

5、 、根据获得的应急信息下达命令。3、各相关设备负责人职责文档3.1 、负责尽快收集信息向应急总指挥汇报事故情况；3.2 、负责现场临时设备抢救和对事态的控制；3.3 、听从上级指挥人员的指挥。四、突发事件处理原那么1.预防为主。立足平安防护， 加强预警，重点保护根底信息网络和关系信息平安、稳定的重要信息系统，从预防、监控、应急处理、应急保障等环节，在管理、技术、人员等方面采取多种措施充分发挥各方面的作用， 共同构筑平安保障体系。2.快速反响。突发事件发生时， 按照快速反响机制， 及时获取充分而准确的信息，跟踪研判，果断决策，迅速处置，最大程度地减少危害和影响。3.分级负责。按照“谁主管，谁负责

6、的原那么，建立和完善平安责任制及联开工作机制。根据各负责人的职能，各司其职，加强各负责人的协调与配合，共同履行应急处置工作的管理职责。4.以人为本。把保障人员以及公共利益的平安作为首要任务。5.常备不懈。加强技术储藏， 标准应急处置措施与操作流程， 定期进行预案演练，确保应急预案切实有效， 实现网络与信息平安突发公共事件应急处置的科学化、程序化与标准化。五、机房应急开关机具体措施机房各设备关闭顺序如下：六、机房日常维护1、建立健全机房管理制度1.1 在正常工作日内，信息技术部人员负责对机房进行监控， 主要职责是：巡视网络设备及系统的运行情况， 发生异常情况及时处理， 消除网络故障隐患。1.2

7、节假日期间技术人员轮流值班，负责处理有关异常情况。1.3 机房采取来人来访登记制度，未经允许，无关人员不得进入公司机房区域。2、机房内严格采取防雷、防火、防尘、防静电等措施以及机房 24 小时监控文档等措施。3、认真做好数据备份工作，定期做一次数据库完全备份，每月检查效劳器运行和备份情况。4、对机房的主要网络设备路由器、主干交换机等进行工作时间内全程监控，发现异常情况应及时进行处理，确保整个网络的正常运行。七、效劳器及存储设备故障处理1、排错流程文档2、应急处置具体措施 机房漏水应急预案1发生机房漏水时，第一目击者应立即通知运维效劳小组，并及时报告监控系统突发故障应急领导小组。2假设空调系统出

8、现渗漏水，运维效劳小组负责人应立即安排停用故障空调，去除机房积水，并及时联系设备供给方处理，同时启动备用空调，必要情况下可临时用备用空调对效劳器进行降温。3假设为墙体或机房门渗漏水，运维效劳小组负责人应立即采取有效措施确保机房平安，及时去除积水，维修墙体或门窗，消除渗漏水隐患。 设备发生被盗或人为损害事件应急预案1发生设备被盗或人为损害设备情况时，使用者或管理者应立即报告系统突发故障应急领导小组，同时保护好现场。2系统突发故障应急领导小组接报后，通知用户保卫部门、相关领导，一同核实审定现场情况， 清点被盗物资或盘查人为损害情况， 做好必要的影像记录和文字记录。3事发单位和当事人应当积极配合公安

9、部门进行调查， 并将有关情况向系统突发故障应急领导小组汇报。4系统突发故障应急领导小组安排运维效劳小组、事发单位及时恢复系统正常运行，并对事件进行调查。 运维效劳小组和事发单位应在调查结束后一日内书面报告系统突发故障应急领导小组。 事态或后果严重的，应向相关领导汇报。 机房长时间停电应急预案1定期检查机房供电设备的运行状况和电路线缆器材情况，当发生以下突发事件时，按照以下方案进行处置：（2当机房发生市电供电突然停电或是电源异常时。首先应和后勤部门联系确认正常停电以及预计停电时间。 检查不间断电源的电池可供电时间， 确保设备正常运行， 如遇到突然断电， 应及时将空调等不在 UPS电源供电范围内的

10、设文档备及时断电，预防突然来电时瞬间电流过大导致设备损坏等现象。（3当确定停电时间超出机房 UPS承载范围后，首先确定停电的范围以及受影响的设备范围。 并及时通知各部门做好停电应急准备。 然后通知机房电源维护人和设备的负责人到达现场， 做好各设备的电源停电准备。 在 UPS供电电量仅剩 10%之后，严格按操作手册停掉各效劳器的电源，最后停核心交换机和路由器，等待电力恢复。4当确定停电原因是在本身供电系统范围内，立即汇报给负责领导，并及时联系相关维护人员到达现场检修。 对于恢复时间无法预计的， 要通知后勤部门做好柴油机发电及移动电源车供电准备5恢复供电后，严格按照操作程序逐步恢复机房设备和 UP

11、S的供电，以防瞬间电流过大造成设备损坏。 通信网络故障应急预案1发生通信线路中断、路由故障、流量异常、域名系统故障后，操作员应及时通知本单位信息系统管理员， 经初步判断后及时上报运维效劳小组和系统突发故障应急领导小组。2 运维效劳小组接报告后， 应及时查清通信网络故障位置， 隔离故障区域，并将事态及时报告系统突发故障应急领导小组， 通知相关通信网络运营商查清原因；同时及时组织相关技术人员检测故障区域， 逐步恢复故障区与效劳器的网络联接，恢复通信网络，保证正常运转。3 事态或后果严重的，应向应急指挥办公室和相关领导汇报。4应急处置结束后，运维效劳小组应将故障分析报告，在调查结束后一日内书面报告系

12、统突发故障应急领导小组。 不良信息和网络病毒事件应急预案1发现不良信息或网络病毒时，信息系统管理员应立即断开网线，终止不良信息或网络病毒传播， 并报告指挥调度中心运维效劳小组和系统突发故障应文档急领导小组。2运维效劳小组应根据系统突发故障应急领导小组指令，采取隔离网络等措施，及时杀毒或去除不良信息，并追查不良信息来源。3事态或后果严重的，应向监控中心办公室和相关领导汇报。4处置结束后 , 运维效劳小组应将事发经过、造成影响、处置结果在调查工作结束后一日内书面报告系统突发故障应急领导小组。 效劳器软件系统故障应急预案1发生效劳器软件系统故障后，运维效劳小组负责人应立即组织启动备份效劳器系统， 由

13、备份效劳器接管业务应用， 并及时报告系统突发故障应急领导小组；同时安排相关责任人将故障效劳器脱离网络， 保存系统状态不变， 取出系统镜像备份磁盘，保持原始数据。2运维效劳小组应根据系统突发故障应急领导小组的指令，在确认平安的情况下，重新启动故障效劳器系统；重启系统成功，那么检查数据丧失情况，利用备份数据恢复；假设重启失败，立即联系相关厂商和上级单位，请求技术支援，作好技术处理。3事态或后果严重的，应向监控中心应急指挥办公室和相关领导汇报。4处置结束后 , 运维效劳小组应将事发经过、 处置结果等在调查工作结束后一日内报告系统突发故障应急领导小组。 黑客攻击事件应急预案1当发现网络被非法入侵、网页

14、内容被篡改，应用效劳器上的数据被非法拷贝、修改、删除，或通过入侵检测系统发现有黑客正在进行攻击时，使用者或管理者应断开网络，并立即报告系统突发故障应急领导小组。2接报告后，系统突发故障应急领导小组应立即指令运维效劳小组核实情况，关闭效劳器或系统， 修改防火墙和路由器的过滤规那么， 封锁或删除被攻破的登陆帐号，阻断可疑用户进入网络的通道。3运维效劳小组应及时清理系统，恢复数据、程序，恢复系统和网络正文档常；情况严重的，应向监控中心应急指挥办公室和相关领导汇报，并请求支援。4处置结束后 , 运维效劳小组应将事发经过、处置结果等在调查工作结束后一日内报告系统突发故障应急领导小组。 核心设备硬件故障应

15、急预案1发生核心设备硬件故障后，运维效劳小组应及时报告系统突发故障应急领导小组，并组织查找、确定故障设备及故障原因，进行先期处置。2假设故障设备在短时间内无法修复运维效劳小组应启动备份设备，保持系统正常运行；将故障设备脱离网络，进行故障排除工作。3运维效劳小组故障排除后，在网络空闲时期，替换备用设备；假设故障仍然存在，立即联系相关厂商，认真填写设备故障报告单备查。4事态或后果严重的，应向监控中心应急指挥办公室和相关领导汇报。 业务数据损坏应急预案1 发生业务数据损坏 时，运维效劳小组应及时报告系统突发故障应急领导小组，检查、备份业务系统当前数据。2运维效劳小组负责调用备份效劳器备份数据，假设备

16、份数据损坏，那么调用磁带机中历史备份数据，假设磁带机数据仍不可用，那么调用异地备份数据。3业务数据损坏事件超过 2 小时后，运维效劳小组应及时报告系统突发故障应急领导小组，及时通知业务部门以手工方式开展业务。4运维效劳小组应待业务数据系统恢复后，检查历史数据和当前数据的差异，由相关系统业务员补录数据； 重新备份数据， 并在工作结束后一日内报告系统突发故障应急领导小组。 雷击事故应急预案1 遇雷暴天气或接上级部门雷暴气象预警， 运维效劳小组应及时报告系统突发故障应急领导小组， 经请示同意后关闭局部效劳器， 切断电源，暂停内部计算机局部网络工作。文档2雷暴天气结束后，运维效劳小组报经系统突发故障应

17、急领导小组同意，及时开通效劳器，恢复内部计算机网络工作，对设备和数据进行检查。3 因雷击造成损失的，运维效劳小组应会同相关部门进行核实、报损，并在调查工作结束后一日内书面报告系统突发故障应急领导小组。 必要时，应向监控中心应急指挥办公室和相关领导汇报。 空调设备故障应急预案假设机房专用空调损坏， 应第一时间启用机房备用空调， 并通知厂家上门进行维修，并及时报告信息部相关领导请示， 获得授权后按机房设备关闭顺序关闭各类设备。 火灾事故应急预案（1一旦机房发生火灾，应遵照以下原那么：首先确保人员平安；其次保护关键设备、数据平安；三是保护一般设备平安；2人员疏散的程序是：机房工作人员立即按响火警警报

18、，并通过119 电话向公安消防请求支援， 所有人员戴上防毒面具， 所有不参与灭火的人员按照预先确定的线路，迅速从机房中撤出；3人员灭火的程序是：首先切断所有电源，启动自动喷淋系统或使用灭火器，灭火值班人员戴好防毒面具，从指定位置取出泡沫灭火器进行灭火。 电源设备故障应急预案机房目前使用 UPS系统，在紧急情况发生时，应按如下步骤进行关机：1确认所有负载均已平安关机。2关闭 UPS负载电源。3将 UPS的系统启用开关切换到 off 的状态。4将电池连接断路器切换到 off 的位置。文档八、 维护小组成员1.现场效劳人员联系方式职务 姓名 2.厂家协助效劳人员联系方式姓名 公司 职责网络设备代理商效劳器及小型机等设备代理商机房弱电相关事项机房强电相关事项机房空调UPS设备发电机设备物业工程部消防设施