MES系统应用服务器宕机应急处置演练

MES系统应⽤服务器宕机应急处置演练

⽂|01⼀线

⼀、编制MES系统应⽤服务器宕机应急处置预案（可省略）1 ⽬的

为了提⾼井冈⼭卷烟⼚MES系统应⽤服务器宕机的突发事件的能⼒，形成科学、有效、反应迅速的应急⼯作机制，确保重要⽹络通讯的正常使⽤，根据《中华⼈民共和国安全⽣产法》、国家安全⽣产监督管理总局《⽣产经营单位安全⽣产事故应急预案编制导则》（GB/T29639-2013）的精神和要求，结合《MES系统现场应急处置预案》中⽹络中断事故实际情况，特制定本预案。

2 事故（事件）现场处置⽅案2.1事故特征序号

事故类型

事故前可能出现的征兆⾮操作员本⾝意愿造成的重启——如供电(⽋压，过载，波动)、震动、硬件质量(热稳定性(热敏度)和抗⼲扰能⼒)、资源冲突、系统不完善或瓶颈问题、病毒、灰尘、散热不良……等等原因⽽造成重启

⼀年四季都可

由于⽤户访问量过⼤、数据能异常，造成资源耗尽，数据超出系统设定的空间限制范围。

由操作员意向操作的重启——⽤于维护或更新服务器、部署机房或特殊情况等等

MES系统⽆法应⽤

事故发⽣的可能时间

可能造成的危害程度

1

MES系统应⽤服务器宕机

2

3

2.2应急组织与职责

2.2.1应急⾃救组织形式及⼈员构成情况

由部门领导、系统管理员及⽹络管理员形成应急⼩组，其他⼈员形成事故增援⼩组。序号12345

名称现场负责⼈指挥员技术组通讯联络组增援组

组成⼈员部门负责⼈

⽹络管理员、机房管理员⽹络管理员、MES系统管理员

部门员⼯

相关部门电⼯、相关部门系统管理员及各

系统⼚家

2.2.2相关⼈员的应急⼯作职责

应急⼩组

⼯作职责

a） 负责指挥⼯单下发不了事件，掌握及评估事件状况，以及采取必要的应急措施。b） 向上级报告事故排查处理情形。

现场负责⼈

c） 接受上级的指令和调动。

d） 现场负责⼈不能到达现场，由其指定代理现场负责⼈履⾏职责。负责现场应急组织⼯作。

技术组⼈员根据异常提⽰排查问题，待解决问题后恢复相关数据

a） 负责应急处置过程的⼈员、信息的保障。

b） 将现场事故处理结果通知各部门。

增援组2.3应急处置

2.3.1事故应急处置程序

增援技术组，确保系统问题解决后恢复正常运⾏。

指挥员技术组通信联络组

2.3.2事故现场应急处置准备

2.3.2.1MES系统管理员发现MES系统⽆法访问的情况，MES系统管理员通过与相关⼈员进⾏商议，确定排查⽅案，对异常进⾏检修判断；

2.3.2.2如MES系统应⽤服务宕机，需要重启信息系统，⽹络管理员、MES系统管理员需通知相关的关键⽤户，暂停使⽤系统，待重启恢复后通知使⽤。2.4事故现场处置预案

2.4.1 MES系统管理员查看异常现状，判断异常原因，估计现场恢复所需时间，如果恢复时间在30分钟内，则进⾏异常排查。

2.4.2 若现场检修时间超30分钟，应告知其它集控系统、数采系统、⾼架系统、糖⾹料系统管理员按各⾃的系统应急⽅案进⾏⽣产。

2.4.3 待系统恢复后，将各项数据重新反馈回MES系统

2.4.4 应急处置结束后，MES系统管理员应将事件分析报告，在调查结束后以书⾯报告部门负责⼈。

2.5 注意事项

2.5.1必须保持MES系统管理员、各车间管控系统管理员联系畅通。2.5.2必须确保系统恢复后，MES系统各项数据完整。3附件

现场应急组织联系⽅式

序号

1 2

指挥部职务现场负责⼈指挥员所有应急组

成员

XX何XX、周XX、王XX、朱XX、洪XX姓名

现任职务

⾼级⼯程师、信息安全管理师系统管理员

电话XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX………………

3

相关部门/单位通讯录(表：内容略)

序号…

单位名称……

联系电话……

⼆、编制MES系统应⽤服务器宕机应急处置演练⽅案（可省略）

MES系统应⽤服务器宕机突发事件

现场应急演练⽅案（2020年度）

⼀、⽬的：检验MES系统应急预案的科学性、有效性、可操作性；检验确保MES系统应⽤服务器宕机出现事件时，做到信息准确、报告及时、指挥⼀致、分⼯明确、⼯作协调、措施有⼒、处置得当，保证车间⽣产计划的准确执⾏。

⼆、依据：《MES系统应急处置预案》。

三、组织：信息管理科负责⼈主持策划和前期培训与沟通，信息管理科、外包运维相关⼈员⽀持和配合⼯作。

3、成⽴应急⾃救⼩组

3.1应急⾃救⼩组组长：信息管理科科长

应急⾃救⼩组成员：MES 系统管理员、⽹络管理员、外包运维⼈员、各管控系统管理员与MES系统对接⼈员。

3.2职责

组长职责：负责组织现场应急救援⼯作，并向上级报告事故情况。指挥员职责：负责相关⼈员的协调与沟通⼯作。其它成员职责：负责参与事故现场的应急处置⼯作。四：时间：2020年12⽉17⽇上午14：30开始五、地点：MES系统应⽤各环节

六、⼈员：现场演练由罗余作同志指挥。信息管理科系统管理员、⽹络管理员参加演习。现场演练前，由现场应急指挥给参加演练的⼈员简要回顾现场的应急处置预案内容，强调各环节注意事项。

七、现场应急处置程序

2020年12⽉17⽇上午，MES系统访问异常。

1、报告：MES系统管理员发现MES系统访问异常的情况。――14：30，信息科MES系统管理员点检时发现系统访问异常。 2、接报：信息科MES系统管理员获知情况后，确定解决⽅案：

――14：31，何XX⽴即向应急⼩组组长罗XX简要汇报事件情况，宣布启⽤应急⽅案。――应急⼩组组长罗余作向⼚领导简要报告事件及应急处置⽅案情况。

――14：32，由⽹络管理员进⾏⽹络排查，如果异常则执⾏计算机房应急处置⽅案，否则由MES系统管理员进⾏问题排查。

――14：33，由何XX通过远程连接应⽤服务器进⾏异常诊断，并配合洪天强远程恢复应⽤系统。

――14：40，何XX测试MES系统访问是否正常。

――事件处置：何XX在确保MES系统恢复正常后，由何XX在MES系统⾥查看各项数据是否完整。

――14：43

――何XX向应急⼩组组长罗余作简要汇报事件处置结果。――应急⼩组组长罗XX向⼚领导反馈结果。⼋、现场应急后勤保障措施1、⼈员保障

演练⼈员全部就位，如有特殊情况需要提前⼀天告知信息科。2、⼯具保障

⽹络管理员要保障⽹络通讯正常。九、注意事项

1、必须优先保证车间的⽣产要求。

2、各部门关键⽤户要及时配合，⼿机要保持通畅。3、功能恢复后，将数据进⾏恢复。

2020年12⽉17⽇三、MES系统应⽤服务器宕机应急处置演练记录

现场应急处置演练纪录

编号： ⽇期：2020年12⽉17⽇

MES系统各相关

现场罗XX

演练部门演练名称

信息管理科

MES系统应⽤服务器宕机

演练地点指挥⼈

参加⼈：罗XX 何XX 周XX 王X 朱X 彭XX 洪XX演练过程：

2020年12⽉17⽇上午，MES系统访问异常。

1、报告：MES系统管理员发现MES系统访问异常的情况。――14：30，信息科MES系统管理员点检时发现系统访问异常。 2、接报：信息科MES系统管理员获知情况后，确定解决⽅案：

――14：31，何XX⽴即向应急⼩组组长简要汇报事件情况，宣布启⽤应急⽅案。

――14：32，由⽹络管理员进⾏⽹络排查，如果异常则执⾏计算机房应急处置⽅案，否则由MES系统管理员进⾏问题排查。

――14：33，由何XX通过远程连接应⽤服务器进⾏异常诊断，并配合洪天

强远程恢复应⽤系统。

――14：40，何XX测试MES系统访问是否正常。

――事件处置：何XX在确保MES系统恢复正常后，由何XX在MES系统⾥查看各项数据是否完整。　　　　　　　　　　演练存在的问题及整改措施：1、存在的问题

现场⼈员演练紧张度不够，演练前培训不到位、沟通效率低。2、整改措施

增强应急处置的责任意识，加深应急⽅案的培训⼒度，提⾼响应紧张程度，为提⾼沟通效率，建⽴⼀个MES系统⽤户微信群，提⾼业务技能以增强应急处置能⼒，修订更新应急处置预案，认真对待并培训熟悉每个现场处置细节。

演练指挥⼈签字：罗余作

评价⼈签字：罗余作

现场应急预案处置演练评审记录

编号：JY-AB-021 ⽇期：2020年12⽉17⽇

演练部门演练名称

信息管理科

MES系统应⽤服务器宕机

演练地点指挥⼈

各现场罗余作

参加⼈：信息管理科：罗XX 何XX 周XX 王X 朱X 彭XX 洪XX效果评价及完善意见：

1、效果评价

在这次演练活动中，使我们对井冈⼭卷烟⼚MES系统现场应急处置突发事件有了⼀定的认识，并积累了⼀些经验，为以后应对MES系统突发事件打下⼀定的基础，分析这次演练活动的经验和教训，我们认为⾸先要加强演练前的培训⼒度与提⾼相关⽤户的沟通效率，其次是多增加⼀些排查⼯具的使⽤培训，提升相关的排查效率。

2、完善意见

平时各相关岗位⼈员加强学习和练习应急操作程序，熟悉突发事件发⽣时应对⽅法，加深应急⽅案的培训，要求要提⾼响应时间，建⽴⼀个MES系统相关的⽤户微信群。

评价⼈签字：

罗余作 2020年12⽉17⽇

附件1：现场演练实况

（⼀）、演练准备：应急预案演练准备⼯作：确定⼈员到位和分⼯情况，学习了解演练⽬的、要求，确认演练流程。

（⼆）、演练开始：

1、MES系统管理员发现应⽤服务器异常。

2、系统管理员与⽹络管理员进⾏⽹络软硬件排查，并向应急指挥⼩组成员和应急组长汇报情况。应急组长接报后向⼚部分管⽣产的领导汇报。

3、运维⼈员就位，应急指挥⼩组组长宣布启动应急处置预案，进⾏故障排查并对故障进⾏处理。

4、故障处理完毕，应急指挥⼩组成员共同检验效果，同时，应急指挥⼩组组长向分管⼚领导报告现场处置结果。5、演练结束。（三）、演练总结：

对演练过程中发现问题进⾏归纳、总结，进⼀步完善预案。（四）、预案的持续改进：

将演练总结中提出的⼏点的意见修改完善预案。

四、MES系统应⽤服务器宕机应急处置演练报告

MES系统应⽤服务器宕机应急处置演练报告

（2020年12⽉17⽇）

⼀、应急演练⽬的

为保障江西中烟井冈⼭卷烟⼚MES系统的正常运⾏，通过应急处置演练，检验应急预案的科学性、实效性和操作性，提⾼应急保障队伍响应速度。

⼆、应急演练原则

1、真实性原则：实战演练的内容与实际发⽣的业务⽆偏差，具有实⽤性。

2、着眼实战，讲求实效。以提⾼应急救援指挥⼈员的指挥协调能⼒、应急队伍的实战能⼒为着眼点。重视对演练效果及组织⼯作的评估、总结、及时整改存在的问题。

3、精⼼组织，确保安全。围绕演练⽬的，精⼼策划演练内容，科学设计演练⽅案，周密组织演练活动，确保活动规范、有序、⾼效。

三、应急演练⼯作要求

1、严格按时按要求完成实战任务。

2、实战过程中发现问题，对问题进⾏准确清晰描述，并按问题清单格式做好问题记录。3、实战内容完成后，由应急执⾏⼩组组长向应急指挥⼩组组长汇总实战情况，对实战执⾏情况进⾏分析，形成实战演练报告。

四、应急演练职责分⼯1、应急指挥⼩组：组长：罗余作

指挥员：罗余作（兼）

组员：何XX /周冬卫/王丹/朱明/彭⼩红/洪天强

——负责应急指挥、组织协调和过程控制；——在应急处置过程中统⼀对外发布信息；——宣布应急响应状态的解除；

——报告应急处置进展情况，总结相关⼯作。 2、应急执⾏⼩组：组长：何XX组员：周XX/洪XX

——报告应急处置各个环节情况；——进⾏应急处置相关⼯作；

——应急恢复后数据恢复，完善处置程序。五、应急演练准备

1、进⾏演练培训。相关⼈员按应急处置流程简述处置办法，熟悉演练⽅案和⽹络通断测试⽅法、执⾏流程。

2、搭建演练环境。

——模拟井冈⼭卷烟⼚，MES系统访问异常情况。

——通讯保持联系，及时说明进度与问题，便于掌握演练情况，发现演练中存在的问题。六、演练关键环节

（⼀）发现与记录：

1、 ⽣产过程中，MES系统管理员发现MES系统访问异常，应向应急指挥⼩组通报情况。2、 应急执⾏⼩组⼈员确认情况，进⾏确认并向应急指挥⼩组组长报告，并做好记录。（⼆）报告与紧急处置：

3、 应急指挥⼩组应急执⾏⼈员对故障进⾏诊断、分析，找出根本原因。

4、 应急执⾏⼩组⼈员就位，向应急指挥⼩组报告故障诊断结果和故障处置办法。5、 应急指挥⼩组组长按应急预案通知有关⼈员就位进⾏应急处置。（三）处置：

6、 应急执⾏⼩组按应急预案搭建处理环境。7、 应急执⾏⼩组查找故障源，进⾏相关处置。

8、 应急执⾏⼩组⼈员向应急指挥⼩组组长、指挥员报告应急处置结果。（四）恢复：

9、 应急执⾏⼩组组长确认完成应急处置。

10、 应急指挥⼩组组长、副组长检查处置情况，下达恢复指令。七、应急演练记录

演练⽇期：2020年12⽉17⽇序号

时间

项⽬过程应急预案演练准备⼯作：确定⼈员到位和分⼯情

1

14:25

况，学习了解演练⽬的、要求，确认演练流程

图⽚记录

2

14:30（演练开始）

MES系统管理员发现应⽤服务器异常

314:32

系统管理员与⽹络管理

员进⾏⽹络软件排查

4

14:33

硬件排查

向应急指挥⼩组成员和应急组长汇报情况

5

14:34

应急组长接报后向⼚部分管⽣产的领导汇报。

6

14:35

预案，进⾏故障排查并对故障进⾏处理。。

14.3614:3714:38

故障处理完毕，应急指挥⼩组成员共同检验效果，同时，应急指挥⼩组组长向分管⼚领导报告现场情况。

演练结束，对演练过程

7

14:39

中发现问题进⾏归纳、总结，进⼀步完善预案。

8

14:40

（演练结束）

维⼈员就位，应急指挥⼩组组长宣布启动应急处置

⼋、应急演练⼩结

1、本次演练针对井冈⼭卷烟⼚MES系统访问异常情况。此次活动从预习到正式演练历时10分钟，演练了⽅案中规定的程序和涉及内容。其中，现场应急处置过程实际耗时5分钟，演练时间节点和过程都记录备案。

2、本次应急演练，按计划顺利完成演练任务，通过本次实战演练，可以综合判断MES系统运⾏稳定有效。在实战演练的过程中，发现现场⼈员演练紧张度不够，反应不够迅速，演练前培训还不深、沟通效率低,建议建⽴⼀个MES系统相关的⽤户微信群,相关信息在群⾥通知，以提⾼应急效率。事后现场由信息科罗XX科长强调了应急处置的责任意识，要求要提⾼响应时间，提⾼应急能⼒，更新演练⽅案，认真对待每个现场处置细节。

3、本次演练检验了应急⽅案（预案）的科学性、实效性和操作性，MES系统应⽤服务器宕机应急处置应急⾃救⼩组和各相关岗位⼈员平时应加强学习和练习应急操作程序，熟练掌握系统遭遇突发事件时的应对⽅法。为保障江西中烟井冈⼭卷烟⼚MES系统的正常运⾏打下了⼀定基础。

作者声明：

——本⽂系作者原创，转载请注明！另外，本⽂仅代表个⼈观点，若作品中的⽂字、美术、摄影等有涉及您的版权问题，请您及时与我取得联系，我将会在第⼀时间删除转载内容或作品！

作者简介：罗余作，男，汉族，1965年11⽉出⽣，江西吉安永和⼈，中共党员，⾼级⼯程师，⽹络与信息管理师，2019年中国优秀CIO获得者，⾼峰论坛特邀嘉宾，中国知名专家学者，著名科技⼯作者。长期从事设备技术、企业管理、⽹络与信息技术。个⼈辞条列⼊⼤型⽂献《⾛进⼤家》、《中国知名专家学者辞典》、《世界优秀专家⼈才名典》、《百度百科》、《世界名⼈录》等⼤型⽂献。2018年进⼊吉安县诗词学会理事会，担任学会理事和期刊《⽂⼭艺苑》编委，吉安市庐陵诗词学会会员，吉安市吉州区诗词楹联学会会员；2019年4⽉13⽇当选吉安县⽂学协会副主席，担任协会期刊《庐陵⽂苑》编委。2020年荣获中国乡村作家荣誉称号。