作者：华夏银行信息科技部副总经理易永丰、华夏银行信息科技部魏中伟

华夏银行信息科技部副总经理 易永丰

  本次疫情给社会各行各业都带来了重大且长远的影响，未来，运维工作者们不仅要关注IT基础设施方面的极端风险，还要增强对重大社会性事件或其他极端事件的应急管理，主动对运维保障能力进行多维度高强度的检验，尤其是加大在多点多活、资源动态调配、数据备份恢复、远程系统维护上的研发和投入，持续提升应对各种突发情况的能力，为持续稳定经营和生产保驾护航。

  庚子年伊始，面对突然爆发的新冠病毒肺炎疫情，全国人民万众一心，共克时艰，在党中央的领导下，打响了疫情防控的人民战争。金融业作为经济运行的核心，在疫情期间尤其要保障系统稳定运行，使业务高效运转，特别是通过线上业务的全面开展，尽可能减少疫情带来的不利影响，在满足人民日常生活需要的同时，帮助企业渡过难关。

  华夏银行数据中心在严格落实中央、北京市委和华夏银行各项疫情防控部署的前提下，在保护好公司员工安全的基础上，坚持一手抓疫情防控、一手抓稳定运行，通过紧急部署、上下协同，充分运用智能化运维手段快速响应总分行各类紧急需求，全力做好疫情防控期间的系统运维工作，保障了系统的持续稳定运行和IT服务的质量与效率。

  一、疫情当前，运维管理面临的挑战

  众所周知，新冠病毒肺炎具有很强的传染性，现场办公存在较高风险。如果现场办公的人员中有无症状、处于潜伏期的感染者，就存在聚集性交叉感染的可能。一旦出现疫情，相关人员以及工作场地就会被隔离，将严重影响运维保障工作的开展，使系统的稳定运行面临很大的风险。

  然而，对于数据中心来说，现场办公又是非常必要的。数据中心的机房和生产操作间都需要7×24小时值班，定期检查生产设备的运行状态，及时处理各种异常报警。

  值得注意的是，为了支援武汉乃至全国人民共同抗疫，华夏银行紧急做出了多项业务调整，推出多项新业务功能，这些都需要快速投产上线，远程办公系统也需要紧急扩容，数据中心需要快速组织完成相关生产变更的方案设计和风险评估，在符合安全和生产规范的前提下，保障新业务新功能的紧急投产。

  然而，如何在确保人员和场地安全的同时，完成系统的各项运维工作，是华夏银行数据中心面临的前所未有的挑战，也是对数据中心运维保障能力的一次全面考验。

  二、迅速反应，抗疫应急方案快马加鞭

  面对疫情防控和保障生产稳定运行的双重要求，华夏银行数据中心立即制定并发布了疫情防控期间的应急工作方案，迅速与机房园区和办公区物业建立联动机制，共同采取多种措施来保障人员和场地的安全，全力做好数据中心的各项运行维护工作。

  系统运维保障的应急工作方案是根据疫情期间已经出现以及预判可能出现的多种情况制定的，以确保在最极端情况下，保证人员有备份、岗位有备份、场地有备份、运维有手段。

  根据应急工作方案，运维人员严格执行关键岗位A/B不同时现场上班的要求;及时对应急办公场地进行全面检查，确保可以随时投入使用;全部人员假期内完成远程维护终端的安装调试，确保在两个运维场地都不能用的极端情况下，可以通过远程维护系统继续保障生产系统的稳定运行。

  此外，数据中心快速组织对员工及合作公司人员进行摸排，全面掌握所有人员的分布和行程安排，统计本人及家人的健康情况，并要求大家全力配合所在地区的防控安排，加强对个人及家人的防护，自1月下旬起，建立每日健康和行程报告制度。

  面对复工后带来的现场办公的风险，华夏银行数据中心紧急启动了“现场+远程”相结合的办公模式。根据“最少必要”原则优先安排可以通过自驾、步行、骑车等方式到办公场地的人员进行现场值班，其他人员全部远程办公。值得注意的是，基于“现场+远程”相结合的办公模式，华夏银行数据中心从1月31日开始就实现了复工。

  在与外部机构联动方面，华夏银行数据中心在疫情出现后迅速与各机房园区和办公区物业建立了疫情防控工作联系机制，专人负责及时通报各种管理要求和人员信息，协调现场防控措施安排，全力保障场地安全。

  具体执行方面，主要包括：各机房园区和办公区都设置体温检测和登记岗位，每天对值班区域进行多次消毒;同时，要求参与现场值班的人员必须符合隔离观察期规定，并需要提前一周报告共同居住和密切接触人员情况;值班期间，要求员工全天佩戴口罩，办公间距不少于2米，分时分开就餐，并为现场值班人员配发口罩、洗手液、消毒液、消毒湿巾等防疫物资;对计划进入值班区域的外部来访人员严格执行提前申报制度，确认满足疫情防控要求才能进入等。

  三、剑及履及，运维保障工作有序开展

  在各项抗疫举措快速落实的同时，得益于在平台化、自动化、移动化、智能化运维等方面奠定的坚实基础，华夏银行数据中心一直在紧张有序地持续开展各项运维保障工作。

  1.积极助力抗疫相关措施顺利实施

  为了支持武汉分行远程处理业务的需求，数据中心与总分行多个部门协同合作，为武汉分行紧急开通了15个系统的远程访问功能。

  为了实现“现场+远程”联合办公，数据中心对远程办公系统的网络和系统设备资源进行了紧急扩容，满足了近2400名信息科技人员同时在线远程办公的要求，并对生产和测试环境进行了全面的系统安全加固。

  为了评估和应对多项紧急变更和常规变更，在线召开生产调度会，保障各项为抗疫而采取的紧急业务措施的投产，支持各项目的开发测试工作按计划有序推进。

  制定远程办公期间的视频会议方案，加快OS魔方等移动运维工具的开发上线，为远程运维提供有力的支持。

  2.充分发挥平台化、移动化运维重要的基础作用

  在克服疫情防控带来的不利影响，完成系统运维保障工作的过程中，华夏银行数据中心长期推进的平台化、自动化、移动化、智能化运维战略发挥了重大作用，是能够大幅度降低现场值班人员数量的关键，更是正常开展各项系统运维工作的强力支撑。

  (1)平台化运维是基础。华夏银行数据中心一直在整合各种运维管理系统和运维工具，打造自主可控的统一的运维管理平台。实践证明，平台化战略显著降低了资源访问及流程化操作的复杂度，提升了系统安全防护能力。目前，数据中心已经建成的平台包括：一体化运维监控平台，实现对系统运行状态的全面监控、集中展示和故障自动定位;云管平台，实现对所有云平台的统一管理和资源动态调配;自动化运维平台，实现对日常运维、生产变更、故障处理等运维操作的自动化;移动运维平台，实现可以随时随地进行日常运维操作、紧急故障处理、运维流程审批等工作;IT服务管理平台，实现对所有运维流程的统一管理。

  (2)移动化运维是亮点。为了持续提升系统运维的效率，华夏银行数据中心一直在大力推行移动化运维，并打造了一个功能强大、独具特色且完全自主的移动化运维平台。因此，随时随地进行系统巡检、系统实时状态查看、多种运维信息查询、运维流程审批、应用版本发布、突发事件处理、投产指挥等操作成为可能。此外，移动运维平台同时向总行和所有分行的技术人员提供服务，是用户进行日常维护时必不可少的帮手，在此特殊时期，更成为了总分行技术人员完成工作的一件重要利器。

  (3)一键式自动化操作工具是驱动力。通过实现“一键式自动化”工具这个抓手，华夏银行数据中心以点带面，有力驱动了系统运维的移动化、智能化程度的不断提高。实际上，数据中心已经实现了多个运维场景中的一键式健康检查、一键式故障恢复，大大简化了运维操作，缩短了问题排查和处理时间，充分体现了其敏捷IT能力。

  宝剑锋从磨砺出，梅花香自苦寒来。华夏银行数据中心依靠长期努力打下的坚实基础，在突如其来的疫情危机面前经受住了考验，有力保障了系统运维的稳定运行，助力各项抗疫措施的顺利实施。

  四、疫情之下，运维工作的再思考

  毫无疑问，本次疫情对金融业的运维工作是一次大练兵、大考验。在疫情防控期间，华夏银行数据中心从未停止总结与思考，尤其是如何更有效地从战略层面构建一体化运维管理机制。

  1.继续实行平台化战略，推进平台整合和功能完善

  平台化运维战略通过整合多种运维管理系统和工具，能够降低运维管理和操作的复杂度，提升系统运维的工作效率，实现单个运维管理系统难以提供的功能，增强安全防护能力，节省系统运维成本。在已经建成的9个系统运维平台的基础上，华夏银行数据中心还需继续推进平台的整合，加大平台之间的融合，继续推进各平台对其他运维工具的集成，持续丰富和完善关键运维平台的功能。

  2.继续推进“一键式自动化”工具的构建

  “一键式自动化”工具是华夏银行数据中心推进运维操作实现智能化乃至无人化的重要抓手，也是数据中心借助新兴技术降低成本、提升系统运维效能的着力点。因此，应继续推进“一键式自动化”工具的构建，高效驱动华夏银行数据中心的运维管理能力不断迈上新的台阶。

  3.加大对不确定性因素的防范和管理

  当前社会正处在一个互动频繁、流动迅速、彼此关联的状态，信息和人员互动的高密度意味着即便是较小数量的因素改变，也能迅速对大局造成不可预测的影响。因此，系统运维应该在追求效率的同时，加大对不确定性因素的防范与管理。

  本次疫情给社会各行各业都带来了重大且长远的影响，未来，运维工作者们不仅要关注IT基础设施方面的极端风险，还要增强对重大社会性事件或其他极端事件的应急管理，主动对运维保障能力进行多维度高强度的检验，尤其是加大在多点多活、资源动态调配、数据备份恢复、远程系统维护上的研发和投入，持续提升应对各种突发情况的能力，为持续稳定经营和生产保驾护航。