桑迪应急预案.doc

飓风桑迪：曼哈顿数据中心的灾难应急方案
2012-11-0810:48佚名51CTOHYPERLINK"http://server.51cto.com/ManageDC-364248.htm"\l"commment"\t"_self"我要评论(0)字号：HYPERLINK"javascript:setfont(12);"\t"_self"T|HYPERLINK"javascript:setfont(16);"\t"_self"T

灾备规划已经被公认为数据中心运维工作中的最佳实践之一，但飓风桑迪用自己的强大的威力证明，自然灾害一旦出现，管理人员意料之外的情况总会不请自来。在这个时候，固有灾难恢复计划很可能暴露出诸多弊端，这就需要管理者即兴发挥、针对具体情况迅速做出反应。
AD：
【51CTO专稿】在曼哈顿下城区，飓风的影响令电梯无法正常工作，Peer1Hosting公司的管理员们不得不用大桶为位于18楼的柴油发电机补充燃料。而在新泽西州，SunGard公司则紧急规划燃油车行进路线，避免车辆为洪水所困。
纽约城严阵以待，中心商业区曼哈顿的证券交易所门口摆满了沙袋
灾备规划已经被公认为数据中心运维工作中的最佳实践之一，但飓风桑迪用自己的强大的威力证明，自然灾害一旦出现，管理人员意料之外的情况总会不请自来。在这个时候，固有灾难恢复计划很可能暴露出诸多弊端，这就需要管理者即兴发挥、针对具体情况迅速做出反应。
即使是SunGard公司这样一家专门从事灾难恢复工作、有着丰富经验的企业同样在新泽西迦勒斯大遇上了麻烦。那里河堤崩溃、附近的三家数据中心受到严重影响。他们在现场搭建起架空地板，希望能凭借这一丁点高度上的优势避免洪水在漫入停车场之后触及数据中心设施。问题还不仅如此，为备用发电机运输燃料的车队同样举步维艰。正所谓祸不单行，接踵而至的打击令管理人员一筹莫展。
位于曼哈顿低处百老汇街75号附近的Peer1基础设施处境尴尬，管理人员们组成的救灾小队凭借健壮的体魄与坚强的意识，把一个个五加仑容量装满柴油的燃料桶从地下停车场运送到17楼——这堪称一项壮举，理应获得由市长办公室颁发的应变能力奖。数据中心后备柴油发电机位于18楼，源源不断供往17楼日常供应油箱的燃料被泵至上层，保证了服务的正常运作。
Peer1Hosting公司董事长兼CEOSabioBanducci指出，他的公司不得不在“大厅积水达四英尺深”的情况下停止办公，积水甚至一路下渗、影响到了地下室以及正在修建当中的燃料输送系统。本来能够在飓风侵袭下发挥巨大的作用的地下管道就这样被洪水瞬间击溃。
75号的建筑工程师们正试图修建一套后备管道系统，但其传导压力不足以将燃油提升到17层楼的高度。Peer1公司的灾难恢复小队曾经在2003年困扰整个曼哈顿地区的大规模停电事故中表现出色、成功在逆境中维持了数据中心可用性，这一次他们再次迅速做出反应，希望通过车载泵等手段解决问题。然而现实令人沮丧，由于公共交通几近瘫痪、城市街道严重堵塞，运输公司无法及时为Peer1提供燃料供应。眼看日常供应油箱里的储备已经不多，停机似乎根本无法避免。
作为Peer1公司的客户，网站开发企业SquareSpace很快意识到问题的严重性，并在第一时间通知自家用户之余，提醒Peer1称：全市“燃油与供水都处于短缺状态。”该公司于本周二在博客上专门撰写博文陈述了当时的情况。
Peer1公司也在周二上午10：45更新了博客状态，指出“有计划实施计划内停机。”好在应急小队的英勇表现终于力挽狂澜，使得这次飓风并未导致任何停机故障。
Peer1公司的柴油发电机部署在大楼楼顶，这一方面免去了设备被雨水淹没的后顾之忧，却在另一方面导致工作人员很难为其供应燃料。Peer1数据中心经理及其团队决定组织一个“尖刀班”，在电梯无法使用的情况下依靠人力将燃料从楼梯间搬运到油箱所在地。这是一场人与自然之间的艰苦斗争，他们无法利用任何现有灾备计划，只能凭借头脑与双手奋力一搏。
数据中心工作人员连同其他Peer1员工及多家分包商组成了25个攻坚团队，自十月三十号晚到十月三十一号上午一刻不停地为17楼的日常供应油箱加注燃料，以确保柴油发电机的长效运转。而接到“计划内停机通知”的客户也行动起来，为可能发生的故障提前做好数据保护工作。然而与预期不同，服务并未中断，Peer1公司不负众望、在飓风桑迪的肆虐下顽强坚持了下来。
“不少客户都以为停机在所难免，但在得知我们为维持服务所做出的艰苦努力后，他们也加入到应急工作中来，”Banducci告诉我们。
由25人组成的运输队在大楼楼梯间随时待命，将装有五加仑柴油的大桶逐级向上传递。曼哈顿网站开发企业SquareSpace公司是率先加入到工作中来的Peer1客户，其雇员还把双方携手奋战的照片于本周三