一步一脚印 华为践行数据中心容灾之路

       2014年春节大年初一、初二、初三连续三天，当大多数人正在享受阖家团圆的天伦之乐时,华为IT管理部容灾团队的兄弟们仍然奋斗在工作岗位上。在此期间，他们实施了异地数据中心带业务容灾演练，通过数据中心管理系统将500多个IT系统从深圳总部数据中心整体切换到1300多公里外的南京异地容灾中心，在正常提供全球业务服务一天后，又回切至深圳总部数据中心，取得了演练的圆满成功。

　　罗马不是一天建成的

　　“看似一次简单的容灾演练，却蕴含着华为人十几年的心血。”华为企业业务BG规划咨询部部长傅依林向记者娓娓道来。

　　作为一名1996年进入华为的老员工，在流程IT部门一干就是17年，傅依林对于911、512、日本海啸等天灾人祸对于企业业务的影响有着深刻的理解。“考虑到公司目前的规模和信息化程度，从公司内部业务的运作和发展来说，华为对于数据中心灾备也有着相当高的需求;另一方面，华为的许多大客户对于业务连续性有着苛刻的要求，所以华为也要证明自身在容灾备份上的能力。“这是华为一直以来在数据中心容灾方面的内外因。”

　　傅依林将华为数据中心与灾难恢复的能力分为三个阶段，摸索阶段、一主一备阶段以及未来的两地三中心阶段。

　　“2001年在北京建立关键系统的镜像系统，2005年建成了同城同步容灾，2008年实现了国内外研发中心的数据异地容灾。”这时候的华为尚处于摸索阶段。 傅依林特别强调了华为目前所处的一主一备阶段：“2009年华为结合了业界最佳实践发布了完整的容灾管理体系，随后启用了南京容灾中心，建立了专业的容灾组织，每年进行容灾演练。”2011年华为实现了产品数据管理系统的单系统业务容灾演练;2012年，LTC流程相关系统的端到端容灾演练;2013年实现了数据中心的集成功能演练。

　　伴随着一次次的阶段性成功，进行数据中心异地带业务容灾演练似乎就成为了顺理成章的事情。但横在华为IT管理部容灾团队面前的是：深圳与南京之间1300多公里的距离;500多个系统之间复杂的集成关系。“数据量大、距离远、环境负载，要在规定的时间内完成目标仍然是一个困难的问题。”

　　在演练实施前，IT容灾团队根据公司内部的业务连续性管理计划，既IT灾难恢复计划来设定相应组织和流程以及实施步骤：包括演练准备、切换、验证及容灾端的运行、回切、运行及问题处理缓冲等多个阶段。

　　“之所以选择在春节期间进行，是因为演练涉及业务量巨大并且需要停机。虽然如此，但春节期间的全球业务并未中断，仍然在正常运行，ERP系统在演练过程中的并发用户就有2500以上。”傅依林如是说。

　　业务所规定的4小时停机时间在IT容灾团队看来虽然紧迫，但并不是关键所在。据专家介绍，“异地容灾演练最大的技术难点是什么？广域网延时。”据了解，华为IT系统的集成度非常高，SOA、EIP等技术应用非常广泛，没有一个系统是孤立存在的，各系统之间互相调用。比如ERP系统的集成关系就有着2000多条。 “一些在局域网中跑得很好的系统，到了广域网上就会因延时没法运行。因此，单个系统的带业务演练无法实施，必须做集成演练，进行多系统的整体切换。只要有一个系统没有同步，切换过去就意味着数据丢失，这是必须避免的。”

　　“只有把容灾环境当成生产环境来运行，才能保证数据中心的数据同步。”正如傅依林所言，这次演练之所以成功的关键也在于华为数据中心日常运行中的“好习惯”。“IT系统每天都在变，每个礼拜有上百处变更，这意味着所有的改变必须同步到容灾中心去。”华为IT服务体系一直以来都很重视学习、引进国际先进管理标准与实践， 2005年通过BS 15000认证并引进ITILV2、2006年通过ISO 20000认证，2008年引进ITIL V3。

　　自信地迈入下一阶段

　　“牛顿力学早被论证可以发射卫星，但是距离卫星飞上近地轨道还是经历了一个很漫长的过程，这是一个复杂的工程。”对于本次演练的重大意义，傅依林笑言道：“华为自身就是一个信息化建设的样品板。”其与时俱进的全球化运作，本次异地数据中心带业务容灾演练中所展现出的能力：从规划、设计、建设到运营。正如傅依林所言：“实战和落地的能力是华为最大的优势。”

谈论一个端到端的容灾中心，必然不能绕过数