虚拟存储整合技术在新疆油田公司的运用.docx

虚拟存储整合技术在新疆油田公司的应用新疆油田公司数据中心金云华朱玉凤王晓军新疆油田公司近年来逐步建立了由决策层、管理层、执行层和支撑层构成的信息化管理体系，成功地研发了油田数据管理平台、油田空间数字平台、业务流程管理平台等数字油田信息平台。同时，收集整理了自1941年以来的油田生产数据，目前拥有数据78TB，各类应用系统120套及强大的数据库服务器和应用服务器。为了实现油田数据的共享，充分发挥数据在油田各行业中的作用，各二级单位数据和应用需要逐渐实现集中管理，并对现有资源进行整合。目前，油田公司数据中心存储设备主要有4套：用于油田公司中心数据库数据存储的容量为6TB的HDS9585；用于为地球科学和钻井系统及上游生产信息系统(A1A2系统)数据存储的容量为24TB的EMCCX700、一套IBM3584自动带库以及一套IBM3494自动带库。为了充分利用这4套设备资源，便于应用和管理，需要对这4套存储设备进行整合，做到统一规划、数据共享。生产经营数据存储设备使用现状及需求分析2004年，油田公司数据中心先后购置了一台容量为6TB的HDS9585数据存储和三台SunE4900数据库服务器，实现了中心数据库集群，使勘探、开发、经营、管理数据实现集中管理。由于HDS9585和EMCCX700存储设备相互独立，且各系统发展不均衡，导致某些系统建设之初规划了很大的容量和很高的性能，但实际运行过程中却没有那么大的需求，而另一些应用建设之初却陷入了容量和性能不足的困境，而其他系统富裕的资源却不能拿来使用，导致HDS9585存储必须升级扩容，而EMCCX700存储资源却被闲置的局面，各存储资源不能做到统一规划，协调利用。此外，由于HDS9585和EMCCX700存储设备厂商不同而形成了数据孤岛，资源不能互通和有效利用，同时为系统的维护管理、性能优化、故障排查、数据迁移、容灾备份等都带来极大的不便和困难。因此，油田公司需要建设一套集中统一的高性能、高可靠性的存储平台。新平台必须能够对原有的异构存储环境进行整合，能将原有的存储设备作为新存储平台的外部存储设备，使新的存储设备和原有的存储设备形成一个统一完整的存储池，由新的存储设备进行统一管理，最大限度地发挥原有存储资源的再利用能力。同时，新的平台能够提高原有存储环境的整体运行性能，整个存储环境对各业务透明，存储平台可以根据各业务的特性和需要，灵活分配存储容量、处理能力等各种资源，确保关键业务的稳定可靠运行。借助新的存储平台，存储设备能方便扩容，各存储设备能够方便地进行无缝的数据迁移，并且实现集中的存储备份，并满足未来容灾的需要。存储整合技术思路在存储整合过程中，需要着重考虑以下几方面原则：平台整合整合不但要满足数据中心目前和未来集中存储的需要，还要对已有系统的存储环境进行最大限度地整合，实现服务器的集中访问、数据资源的集中存储和处理。高性能新的存储平台整合了所有的应用后，必须具备强大的处理能力，能消除原有存储设备的性能瓶颈。可扩充性应确保在原有的系统平台上扩展和实现新功能、新业务的增加。高可靠性存储平台具有高可靠性，支持服务器平台的高可用性集群技术；具备先进的容灾设计；充分保证系统的高扩展能力和高容错能力，具有通道负载自动均衡能力和存储系统性能调节能力。高可用性在存储和其他应用系统尽量不停机的情况下，实现扩容、维护、升级等服务，提高性能以满足新的业务需求，具备7×24连续工作的能力，系统的可用性应能达到100%，可以实现磁盘数据的在线不停机备份。可管理性要求配置实时性能监测管理软件，可对CPU使用率、内存使用率、交换区使用情况、I/O操作、队列状态、磁盘空间、卷磁盘错误、系统事件、系统中各进程对系统资源占用等性能和操作数据等服务器性能进行实时监控、管理和调配。技术先进性系统设计采用当前先进而成熟的技术，不仅可以满足现实工作的需求，也应把握未来存储整合的发展方向。虚拟化存储设计方案根据以上分析，公司决定采用日立数据系统(HDS)有限公司企业级存储产品TagmaStoreNSC55网络存储控制器或UniversalStoragePlatformV(USPV)作为数据中心存储整合的核心设备，配合HDS的存储管理软件、数据快照镜像软件，形成一套完整、高效的存储整合解决方案。本项目采用SAN架构进行整个存储系统的建设，存储网络将分为服务器层、网络交换层和集中存储平台三个层次。服务器层需要对公司数据中心各业务系统的服务器进行改造，增加光纤通道主机卡HBA，使这些主机具有访问存储网络的能力。网络交换层采用Brocade企业级大吞吐量的SAN交换机，保证服务器和外部存储设备到网络存储控制器的高速连接。集中存储