1、业务连续性容灾解决方案V100R003C00用户指南(双活数据中心)文档版本01发布日期2015-08-15华为技术有限公司版权所有 华为技术有限公司 2015。 保留一切权利。非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形式传播。商标声明和其他华为商标均为华为技术有限公司的商标。本文档提及的其他所有商标或注册商标,由各自的所有人拥有。注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。除非合同另有约定,华为公司对本文档内容不做任何明示或默示的声明或保证。由于产品版本
2、升级或其他原因,本文档内容会不定期进行更新。除非另有约定,本文档仅作为使用指导,本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。华为技术有限公司地址:深圳市龙岗区坂田华为总部办公楼 邮编:518129网址:http:/文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司i目 录1 前言.12 方案描述.32.1 方案定位42.2 方案组网52.3 方案特点73 配置指南.93.1 配置流程153.2 配置准备183.3 配置规划193.4 配置波分设备223.5 配置交换机233.5.1 配置FC交换机233.5.2 配置以太网交换机.273.6 配置
3、防火墙283.7 配置虚拟化平台283.8 配置数据库293.9 配置中间件293.10 配置负载均衡器303.10.1 配置全局负载均衡器.313.10.2 配置本地负载均衡器.313.11 安装配置仲裁软件313.11.1 安装仲裁软件.323.11.2 配置仲裁软件.333.12 配置存储阵列353.12.1 配置基础存储业务.363.12.2 配置HyperMetro373.13 配置多路径软件453.14 配置容灾管理软件473.14.1 配置基础容灾管理.483.14.2 (可选)配置快照.503.15 检查配置结果51业务连续性容灾解决方案用户指南(双活数据中心)目 录文档版本
4、01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司iiA 附录52A.1 产品介绍.53A.1.1 存储阵列OceanStor V3融合存储系列 .53A.1.2 服务器(RH2288系列/RH5885系列/E9000).54A.1.3 服务器RH128855A.1.4 FC交换机OceanStor SNS系列.56A.1.5 波分设备OptiX OSN系列.57A.1.6 以太网交换机CloudEngine系列.58A.1.7 防火墙USG9500系列60A.1.8 多路径软件OceanStor UltraPath60A.1.9 容灾管理软件OceanStor BCM
5、anager60A.2 FC交换机Zone划分.61A.3 术语表.65业务连续性容灾解决方案用户指南(双活数据中心)目 录文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司iii1 前言概述业务连续性灾备解决方案包括四个子解决方案:双活数据中心解决方案、本地高可用解决方案、主备容灾解决方案和两地三中心容灾解决方案。本文档详细的描述了双活数据中心解决方案的定位、特点、配置流程和配置步骤等。读者对象本文档主要适用于以下人员:l技术支持工程师l维护工程师符号约定在本文中可能出现下列标志,它们所代表的含义如下。符号说明用于警示紧急的危险情形,若不避免,将会导致人员死
6、亡或严重的人身伤害。用于警示潜在的危险情形,若不避免,可能会导致人员死亡或严重的人身伤害。用于警示潜在的危险情形,若不避免,可能会导致中度或轻微的人身伤害。用于传递设备或环境安全警示信息,若不避免,可能会导致设备损坏、数据丢失、设备性能降低或其它不可预知的结果。“注意”不涉及人身伤害。业务连续性容灾解决方案用户指南(双活数据中心)1 前言文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司1符号说明用于突出重要/关键信息、最佳实践和小窍门等。“说明”不是安全警示信息,不涉及人身、设备及环境伤害信息。修订记录修改记录累积了每次文档更新的说明。最新版本的文档包含以前
7、所有文档版本的更新内容。文档版本 01(2015-08-15)第一次正式发布。业务连续性容灾解决方案用户指南(双活数据中心)1 前言文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司22 方案描述关于本章华为双活数据中心解决方案是业务连续性容灾解决方案的子方案之一。本章节介绍双活数据中心解决方案的定位、组网和特点。说明华为提供两种双活数据中心解决方案:l VIS6600T双活:通过存储虚拟化网关VIS6600T实现两个数据中心数据同步镜像,详见业务连续性容灾解决方案 V100R002C10 用户指南(双活数据中心)。l HyperMetro双活:通过Ocean
8、Stor V3融合存储系列(以下简称V3系列)的HyperMetro特性实现数据同时写入两个数据中心的存储阵列。2.1 方案定位华为双活数据中心解决方案是端到端的双活方案,实现跨数据中心的数据零丢失,业务零中断。2.2 方案组网介绍双活数据中心解决方案的组网及6层双活的实现方式。2.3 方案特点双活数据中心解决方案具有高可靠架构、业务稳定和扩展灵活等特点。业务连续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司32.1 方案定位华为双活数据中心解决方案是端到端的双活方案,实现跨数据中心的数据零丢失,业务零中断
9、。随着信息化技术的飞速发展,信息系统在各行业的关键业务中扮演着越来越重要的角色。在通讯、金融、医疗、电子商务、物流、政府等领域,信息系统业务中断会导致巨大经济损失、影响品牌形象并可能导致重要数据丢失。因此,保证业务连续性是信息系统建设的关键。各行业普遍通过异地建设灾备中心的手段来保护生产数据的安全,进而保证关键应用的业务连续性。这种部署方式为一个生产中心对应一个灾备中心,灾备中心平时不对外提供业务访问。一旦生产中心发生灾难,业务中断,无法短时间恢复时,灾备中心才应需启动对外提供业务。这种灾备系统面临以下挑战:l当生产中心遭遇供电故障、火灾、洪灾、地震等灾难时,需要手动将业务切换到灾备中心,有可
10、能需要专业的恢复手段和长时间调试,业务中断时间长。l灾备中心平时不能对外提供业务,常年处于闲置状态,资源利用率低。在这种情况下,华为适时推出了双活数据中心解决方案,帮助客户解决以上痛点问题。双活数据中心解决方案是指两个数据中心同时处于运行状态,同时承担业务,提高数据中心的整体服务能力和系统资源利用率。两个数据中心的数据实时保持一致,当单设备故障甚至一个数据中心故障时,业务自动切换,数据零丢失,业务零中断。其架构如图2-1所示。业务连续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司4图2-1 双活数据中心架构
11、华为存储阵列FC交换机接入交换机核心交换机数据中心A存储层计算层网络层数据中心B波分设备波分设备网线光纤裸光纤SLBGSLB路由器OracleWebLogicWebSphere应用层传输层VMwareFusionSphere防火墙WANFC交换机接入交换机核心交换机SLBGSLB路由器OracleWebLogicWebSphereVMwareFusionSphere防火墙业务A业务B裸光纤业务安全层第三方存储阵列华为存储阵列第三方存储阵列华为双活数据中心解决方案是端到端的6层双活方案,分别为:传输层、安全层、网络层、应用层、计算层和存储层,消除单点故障,保证业务连续性。2.2 方案组网介绍双活
12、数据中心解决方案的组网及6层双活的实现方式。双活数据中心解决方案组网如图2-2所示。业务连续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司5图2-2 双活数据中心解决方案组网存储阵列FC交换机核心交换机数据中心A存储层计算层网络层数据中心B波分设备网线光纤裸光纤SLBGSLB路由器应用层传输层防火墙WAN裸光纤DB APPVM WebVMSAN接入交换机安全层存储阵列FC交换机核心交换机波分设备SLBGSLB路由器防火墙DBSAN接入交换机WAN第三方仲裁站点APPVMWebVMGSLB:Global Se
13、rver Load Balance SLB:Server Load BalancingDB:Database APP:Application Server双活数据中心解决方案是端到端的6层双活方案。各层双活的实现方式如表2-1所示。表2-1 双活实现方式名称描述存储层通过OceanStor V3系列存储阵列的HyperMetro特性实现存储层的双活:l数据同时存入两个数据中心的存储阵列中,保证两个数据中心可同时提供业务。l无需存储网关,减少了方案故障点,避免网关的I/O瓶颈,同时降低了成本。另外,通过两个存储阵列间的双写优化功能,将标准的1次写I/O的2次来回优化到1次来回,提升写性能。业务连
14、续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司6名称描述计算层通过集群技术实现计算层双活。采用华为FusionSphere或VMware等虚拟化平台提供跨数据中心大集群技术,满足企业多种关键业务双活的需求,保证在故障场景下,快速完成业务切换,实现业务零中断数据零丢失。应用层通过集群技术实现应用层双活:l Web和APP可以部署在虚拟机或者物理机上,数据中心内的多台服务器组成集群,或者跨数据中心的多台服务器组成集群。单部件故障时,业务自动切换。l数据库建议部署在物理机上,跨数据中心组成一个集群。网络层通过两
15、种类型链路实现网络层双活:数据中心间IP网络和FC网络均互通,当一个数据中心故障时,业务自动切换到另一个数据中心,不影响业务连续性。根据时延或业务,通过全局负载均衡器GSLB实现数据中心间的负载均衡。数据中心内通过本地负载均衡器SLB实现应用服务器间的负载均衡。安全层采用华为USG系列防火墙。每个站点部署2台防火墙,通过1+1冗余方式实现双活。通过数据中心间光传输加密技术,预防数据中心间传输的数据被窃听。传输层采用华为OptiX OSN系列波分设备。通过线路冗余、板卡冗余和设备冗余三种1+1保护方案,实现传输层双活,满足多级可靠性要求。2.3 方案特点双活数据中心解决方案具有高可靠架构、业务稳
16、定和扩展灵活等特点。l端到端高可靠双活架构端到端6层双活架构,提供最高级别的业务连续性保障。l业务稳定应用级双活方案,当单设备甚至单数据中心故障时,数据零丢失,业务零中断(RPO=0,RTO=0)。l数据中心间业务负载均衡,充分利用灾备资源两个数据中心同时提供业务,通过GSLB实现负载均衡,充分利用灾备资源。l支持异构存储,保护已有设备投资通过OceanStor V3系列存储阵列的SmartVirtualization特性,实现异构利旧,将不同类型的存储阵列资源池化,实现存储资源的整合和优化,提高资源利用率。l多品牌设备统一可视化管理通过容灾管理软件OceanStor BCManager,实现
17、存储与业务服务器的统一管理,提高运维管理效率。l扩展灵活业务连续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司7通过OceanStor V3系列存储阵列提供远程复制等增值特性,可以平滑扩展至两地三中心容灾解决方案,进一步增强容灾能力。业务连续性容灾解决方案用户指南(双活数据中心)2 方案描述文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司83 配置指南关于本章介绍双活数据中心解决方案配置组网、配置准备、配置流程及详细的配置步骤。某企业使用双活数据中心解决方案,两个数据中心
18、间距离小于100km,组网如图3-1所示。其中,数据库使用Oracle RAC(Real Application Clusters),中间件部署在VMware虚拟机上。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司9图3-1 双活数据中心解决方案典型组网存储阵列AFC交换机核心交换机数据中心A存储层计算层网络层波分设备网线光纤裸光纤SLBGSLB路由器应用层传输层防火墙WAN裸光纤接入交换机安全层存储阵列BFC交换机核心交换机波分设备SLBGSLB路由器防火墙接入交换机WAN第三方仲裁站点RAC节点
19、ESXi主机VM VM VM VMCSSiStackVM VM VM VMVMVMRAC节点ESXi主机OracleRAC集群APPWeb数据中心BCSSiStack管理服务器网线APP:Application RAC:Real Application ClustersCSS:Cluster Switch System SLB:Server Load BalancingGSLB:Global Server Load Balance VM:Virtual Machine说明双活数据中心解决方案(VIS)的配置流程和配置步骤,请参见业务连续性容灾解决方案V100R002C10 用户指南(双活数据中
20、心)。各单产品及业务功能说明双活数据中心解决方案中的各单产品及业务功能说明如表3-1所示。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司10表3-1 双活数据中心解决方案中单部件说明部件名称产品说明全局负载均衡器(GSLB)F5 GTM每个数据中心部署一台,实现数据中心间的业务负载均衡。本地负载均衡器(SLB)F5 LTM每个数据中心部署两台(主备),实现数据中心内的业务负载均衡。波分设备OptiXOSN1800/6800/8800系列每个数据中心部署两台,跨数据中心两两级联,实现数据中心间的低时延
21、、高可靠二层网络互联。防火墙USG9500系列每个数据中心部署两台(主备),保证数据传输安全和存储安全。核心交换机CE12800系列每个数据中心部署两台,汇聚所有接入交换机。接入交换机CE5800/CE6800系列每个数据中心部署两台,避免数据中心内的设备单点故障。中间件Apache、OracleWebLogic、IBMWAS(WebSphereApplicationServer)等部署在VMware虚拟机上。Oracle RAC节点RH5885两个数据中心的所有节点组成Oracle RAC集群。当节点故障时,业务自动切换至其他节点。ESXi主机RH5885根据业务需要部署适量的设备。ESXi
22、主机上部署VMware。管理服务器RH2288管理服务器部署一台,位置选在优先存活数据中心。用于安装容灾管理软件BCManager。本实例中Oracle RAC(Real ApplicationClusters)采用“2+1”的部署方式,即数据中心A部署2台主机,数据中心B部署1台主机。在Oracle RAC集群出现心跳链路故障时,RAC节点(即图3-1中的主机)多的数据中心A为优先存活数据中心。其他场景需要按业务需要规划优先存活数据中心。FC交换机SNS2248每个数据中心部署两台,跨数据中心级联,实现数据中心间SAN网络的高可用性。存储阵列OceanStor V3系列每个数据中心必须部署一
23、台华为OceanStorV3系列存储阵列。配置HyperMetro特性实现两个数据中心的存储阵列双活。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司11部件名称产品说明多路径软件OceanStor UltraPath安装在每台应用主机(RAC节点和ESXi主机)上,保障应用主机与存储设备之间的路径安全性。多路径软件必须使用华为OceanStorUltraPath。容灾管理软件OceanStorBCManager安装在管理服务器上,统一管理容灾系统。第三方仲裁站点-部署一台服务器作为第三方仲裁站点。当
24、两个数据中心的存储阵列间的链路故障时,存储阵列间无法实时镜像同步数据,仲裁站点根据仲裁机制判定一个数据中心提供业务,保障数据的一致性。网络规划说明为了保证存储系统的可靠性,建议主机到存储设备网络、双活复制网络、数据中心间同城网络以及仲裁网络都冗余连接。表3-2 网络规划说明网络分类说明主机到存储设备网络网络类型支持8Gb FC、16Gb FC和10 GE网络。组网方式l主机到存储设备采用全互联组网,即每个业务主机到两个双活存储设备都有逻辑连线。l跨数据中心双活,建议采用交换机级联。双活复制网络网络类型l支持8Gb FC、16Gb FC和10 GE网络。l双活复制网络的组网与主机到存储的组网类型
25、一致,FC或IP组网。组网方式双活阵列每个控制器2条链路冗余。数据中心间同城网络网络类型采用光纤网络互联。组网方式l建议使用DWDM设备互联数据中心间网络。l 25KM以内可使用裸光纤直连,存储层至少保证2对(4根)的裸光纤网络,应用层至少保证2对(4根)的裸光纤网络,用于集群心跳互联。l如果双活复制网络是FC组网,光纤交换机一对一级联;如果双活复制网络是IP组网,以太网交换机之间一对一级联。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司12网络分类说明仲裁网络网络类型l仲裁链路支持GE和10GE组
26、网,不支持FC组网。l仲裁链路支持IPV4和IPV6。l不支持NAT转换。组网方式l建议采用双交换组网,阵列侧每个控制器1个GE/10GE连第三方仲裁服务器,仲裁服务器的业务网口连接到两端存储系统,确保仲裁服务器与每个存储系统中的控制器都有连接。l采用第三方仲裁站点部署方式,仲裁站点仲裁服务器必须与两个数据中心的阵列的网络都能互通。l仲裁站点到两个数据中心可以使用L3网络互通。l仲裁服务器建议部署在第三方站点,如果没有第三方站点,建议部署在两数据中心中的一个。l仲裁服务器以及仲裁链路相关设备进行UPS掉电保护,确保数据中心1停电时,数据中心2阵列能访问到仲裁服务器。3.1 配置流程在进行双活数
27、据中心解决方案配置前,请了解配置流程,以确保配置操作顺利进行。3.2 配置准备介绍双活数据中心解决方案配置前提条件及需要准备的文档。3.3 配置规划介绍配置前需要规划的内容。3.4 配置波分设备介绍波分设备的配置要求,保证数据中心间的数据安全传输。3.5 配置交换机介绍网络层的核心交换机和接入交换机的配置要求,存储层的FC交换机的配置步骤。3.6 配置防火墙介绍防火墙的配置要求,保证数据安全传输与存储。3.7 配置虚拟化平台介绍主流虚拟化平台的配置要求。3.8 配置数据库介绍主流数据库Oracle的配置要求。3.9 配置中间件介绍中间件的配置要求。中间件是提供应用与数据库连接的中间载体,包括A
28、pache、Oracle WebLogic、IBM WebSphere Application Server等。3.10 配置负载均衡器介绍实现数据中心间业务负载均衡的配置要求,及数据中心内业务负载均衡的配置要求。3.11 安装配置仲裁软件业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司13介绍在仲裁服务器(部署在第三方仲裁站点)安装和配置仲裁软件的操作步骤。3.12 配置存储阵列配置存储阵列包括:配置基础存储业务和配置HyperMetro,实现两个数据中心的存储阵列可同时读写数据。3.13 配置多路
29、径软件介绍配置多路径软件的操作步骤。在双活数据中心解决方案中,通过配置多路径软件UltraPath可以提升I/O处理的效率,减少访问延时。3.14 配置容灾管理软件容灾管理软件BCManager可以进行容灾管理,及通过快照功能增加数据副本。3.15 检查配置结果本方案所有配置完成后,需要确认读写操作是按设计路径进行的,以确保方案可以正确运行。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司143.1 配置流程在进行双活数据中心解决方案配置前,请了解配置流程,以确保配置操作顺利进行。双活数据中心解决方案
30、配置流程如图3-2所示。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司15图3-2 双活数据中心解决方案配置流程配置项必选配置子项配置前准备检查配置正确性开始配置准备配置规划配置波分设备配置交换机配置防火墙配置虚拟化平台配置中间件配置存储阵列配置多路径软件配置容灾管理软件检查配置结果结束配置全局负载均衡器配置本地负载均衡器配置以太网交换机配置FC交换机配置HyperMetro安装配置仲裁软件配置数据库配置基础存储业务配置传输层、网络层(交换机)和安全层设备可选配置子项配置负载均衡器配置应用层和计算层
31、设备配置网络层(负载均衡)设备配置存储层设备和软件安装仲裁软件配置仲裁软件(可选)配置快照配置基础容灾管理双活数据中心解决方案配置步骤说明如表3-3所示。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司16表3-3 双活数据中心解决方案配置步骤说明序号配置步骤说明执行位置1 3.2 配置准备介绍双活数据中心解决方案配置前提条件及需要准备的文档。-2 3.3 配置规划介绍配置前需要规划的内容。-3 3.4 配置波分设备介绍波分设备的配置要求,保证数据中心间的数据安全传输。每台波分设备4 3.5 配置交换
32、机介绍网络层的核心交换机和接入交换机的配置要求,存储层的FC交换机的配置步骤。1. 3.5.1 配置FC交换机:每台FC交换机2. 3.5.2 配置以太网交换机:每个数据中心的核心交换机和接入交换机5 3.6 配置防火墙介绍防火墙的配置要求,保证数据中心所有业务访问的安全性,保证数据安全传输和安全存储。每台防火墙。6 3.7 配置虚拟化平台介绍虚拟化平台的配置要求。每台ESXi主机。7 3.8 配置数据库介绍数据库的配置要求。每台数据库主机(如Oracle RAC节点)8 3.9 配置中间件介绍中间件的配置要求。中间件是提供应用与数据库连接的中间载体,包括Apache、OracleWebLog
33、ic、IBM WAS(WebSphere Application Server)等。根据所用中间件的实际情况确定。9 3.10 配置负载均衡器介绍实现数据中心间及数据中心内业务负载均衡的配置要求。1. 3.10.1 配置全局负载均衡器:F5 GTM2. 3.10.2 配置本地负载均衡器:F5 LTM10 3.11 安装配置仲裁软件介绍第三方仲裁站点的安装配置步骤。第三方仲裁站点的仲裁服务器11 3.12 配置存储阵列配置存储阵列包括:配置基础存储业务和配置HyperMetro,实现两个数据中心的存储阵列可同时读写数据。每台存储阵列12 3.13 配置多路径软件介绍配置多路径软件的操作步骤。在双
34、活数据中心解决方案中,通过配置多路径软件UltraPath可以提升I/O处理的效率,减少访问延时。每台应用主机的UltraPath业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司17序号配置步骤说明执行位置13 3.14 配置容灾管理软件介绍在容灾管理软件BCManager上创建容灾管理和配置快照的操作步骤。管理服务器的BCManager14 3.15 检查配置结果介绍检查双活数据中心解决方案配置正确性的方法。本方案所有配置完成后,需要确认读写操作是按设计路径进行的,以确保方案可以正确运行。每台存储阵
35、列3.2 配置准备介绍双活数据中心解决方案配置前提条件及需要准备的文档。前提条件配置双活数据中心解决方案的前提条件如下:l已完成所有单产品的安装。已完成所有单产品的硬件安装和软件安装。已参考本方案的LLD(Low Level Design)完成单产品间的连接。已参考License操作指导书完成本方案所需License的申请和安装。应用主机(RAC节点和ESXi主机)上,已安装华为多路径软件UltraPath和BCManager Agent,并启动其服务。管理服务器上,已经安装BCManager Server,且与各设备的管理网口网络可达。说明业务连续性容灾解决方案 V100R003C00 LL
36、D设计模板(双活数据中心_HyperMetro)和业务连续性容灾解决方案 V100R003C00 License操作指导书获取方法:1.登录http:/ 产品支持 IT 云计算数据中心 BC&DR Solution”路径,获取对应文档。l两个数据中心间的IP/FC网络通信正常。l如果存在异构存储阵列,请确认华为存储阵列与异构存储阵列兼容。说明华为存储阵列具体兼容的异构存储阵列的型号请参考所选用产品对应的兼容性列表:华为OceanStor V3融合存储兼容性列表。获取方法:登录http:/,在搜索框中输入文档名称,单击搜索按钮,选择“营销资料”,下载对应的文档。获取文档配置前,请登录http:/
37、 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司18表3-4 文档清单文档名称应用场景获取路径OceanStorSNS2124&SNS2224&SNS2248&SNS3096&SNS5192&SNS5384 光纤交换机 V100R002C01 产品文档3.5.1 配置FC交换机“技术支持 产品支持 IT 存储 统一存储 存储网络 OceanStorSNS2248”OceanStor 5300 V3&5500V3&5600 V3&5800V3&6800 V3 存储系统V300R003 基础存储业务指南(块业务)3.12.1 配置基础存储业务“技术支持
38、 产品支持 IT 存储 统一存储 中端存储 OceanStor 5600V3”说明此处存储阵列以中端存储V3系列为例,18000系列存储阵列所需文档可在如下路径查找获取:“技术支持 产品支持 IT 存储 高端存储”。OceanStor 5300 V3&5500V3&5600V3&5800V3&6800 V3 存储系统 V300R003HyperMetro 特性指南3.12.2 配置HyperMetroOceanStor UltraPath forLinux V100R008C20 用户指南3.13 配置多路径软件“技术支持 产品支持 IT 存储 统一存储 UltraPath”OceanStor
39、 BCManagerV100R005C00 产品文档3.14.1 配置基础容灾管理“技术支持 产品支持 IT 存储 海量存储 数据保护 OceanStorBCManager”说明本文档中,各产品以表3-4中的版本为例。如实际配置时,各产品版本与此处所列不一致,请获取对应版本的文档,并参考完成配置。3.3 配置规划介绍配置前需要规划的内容。存储规划两个数据中心的存储阵列配置规划相同,下面以数据中心A的规划为例。存储阵列上硬盘规划示例如表3-5所示。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司19表3
40、-5 硬盘规划硬盘域硬盘类型硬盘数量(块)存储池RAID策略RAID容量(GB)DiskDomain01l SSDl SASl SSD:16l SAS:48ArrayA_POOL_RAC_11gl RAID10l RAID6(8D+2P)4800SAS 32 ArrayA_POOL_VMwareRAID6(8D+2P)4800存储阵列上LUN规划示例如表3-6所示。表3-6 LUN规划LUN组LUN名称所属存储池归属控制器说明ArrayA_RAC_LUNl ArrayA_RAC_CRS1l ArrayA_RAC_CRS2l ArrayA_RAC_CRS3ArrayA_POOL_RAC_11gC
41、ET0.A说明l根据实际业务量划分归属控制器,确保控制器间负载均衡。l双活LUN在存储阵列A和存储阵列B中的归属控制器相同。用于存储OracleRAC集群注册信息及仲裁信息。l ArrayA_RAC_SYS1l ArrayA_RAC_SYS2用于存储Oracle系统文件。l ArrayA_RAC_REDO1l ArrayA_RAC_REDO2用于存储Oracle在线日志文件。l ArrayA_RAC_USRO1l ArrayA_RAC_USRO2用于存储Oracle用户数据。l ArrayA_RAC_ARCO1l ArrayA_RAC_ARCO2Oracle归档日志卷用于存储Oracle归档日
42、志信息。ArrayA_VMware_LUNl ArrayA_VM_LUN01l ArrayA_VM_LUN02ArrayA_POOL_VMwareCET0.B根据虚拟机上部署的业务规划LUN的数量和容量。存储阵列映射的主机规划示例如表3-7所示。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司20表3-7 主机规划主机组主机映射关系说明OracleRAC l OracleRAC_Node01l OracleRAC_Node02l OracleRAC_Node03主机组LUN组ArrayA_RAC_LU
43、NArrayB_RAC_LUNOracleRAC映射主机组中包含所有RAC节点。VMware l ESXi_Host01l ESXi_Host02l ESXi_Host03l ESXi_Host04主机组LUN组ArrayA_VMware_LUNArrayB_VMware_LUNVMware映射主机组中包含所有ESXi主机。IP规划IP规划如表3-8所示。表3-8 IP规划组网平面站点属性类型详细IP需求分类IP地址备注管理网络数据中心AFC交换机SNS2248管理IP 192.168.5.2122 L3网络以太网交换机CE5810以太网交换机管理IP192.168.5.4142 L3网络存储
44、设备S5600_1存储设备A/B控管理IP192.168.5.5152 L3网络数据中心BFC交换机SNS2248管理IP 192.168.6.2122 L3网络以太网交换机CE5810以太网交换机管理IP192.168.6.4142 L3网络存储设备S5600_2存储设备A/B控管理IP192.168.6.5152 L3网络应用网络说明根据实际项目的业务情况,可选。数据中心AOracle DC1_OracleDB_1数据库Public IP192.168.5.71 L3网络VMwareDC1_vCenter_1的vCenter IP192.168.5.81 L3网络业务连续性容灾解决方案用户
45、指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司21组网平面站点属性类型详细IP需求分类IP地址备注数据中心BFusionSphereDC1_VRM_1的VRM IP192.168.5.91 L3网络Oracle DC2_OracleDB_1数据库Public IP192.168.5.101 L3网络仲裁网络数据中心A存储设备S5600_1存储设备A/B控仲裁端口IP192.168.5.3132 L3网络数据中心B存储设备S5600_2存储设备A/B控仲裁端口IP192.168.6.3132 L3网络第三方站点仲裁服务器仲裁服
46、务器仲裁端口的IP192.168.7.3132 L3网络(可选)主机连存储网络说明如果双活是IP组网,才需要规划此项。数据中心A存储设备S5600_1存储设备A/B控连主机端口的IP10.69.5.25 L2网络服务器RH2288业务服务器业务端口的IP10.69.5.67 L2网络数据中心B存储设备5600_2存储设备A/B控连主机端口的IP10.69.6.25 L2网络服务器RH2288业务服务器业务端口的IP10.69.6.67 L2网络(可选)双活复制网络说明如果双活是IP组网,才需要规划此项。数据中心A存储设备S5600_1存储设备A/B控双活镜像端口的IP10.69.5.1114
47、L2网络数据中心B存储设备S5600_2存储设备A/B控双活镜像端口的IP10.69.6.1114 L2网络说明更多规划信息请参考业务连续性容灾解决方案 V100R003C00 LLD设计模板(双活数据中心_HyperMetro)。3.4 配置波分设备介绍波分设备的配置要求,保证数据中心间的数据安全传输。业务连续性容灾解决方案用户指南(双活数据中心)3 配置指南文档版本 01 (2015-08-15)华为专有和保密信息版权所有 华为技术有限公司22波分设备的配置要求:l每个数据中心建议部署2台波分设备,跨数据中心两两级联,组成数据中心间的双传输平面。l如果每个数据中心只部署一台波分设备,则每台
48、至少部署2块传输卡,保证板间冗余。l在满足系统误码率要求的情况下,可以关闭FEC(Forward Error Correction)功能或者采用GFEC(General Forward Error Correction)/AFEC(Advanced Forward ErrorCorrection),降低传输时延。l如果双活数据中心间裸光纤物理距离大于40km或线路色散较大,则采用FBG(FiberBragg Grating)色散补偿方案。FBG方案本身基本不引入延时(小于0.1us),具有非常大的低时延优势。如果采用40G/100G波分系统,则可以配置DSP(Digital Signal Pr
49、ocessing)算法,彻底消除色散补偿光纤对延时的影响,无需色散补偿。l端口要求:每台设备提供两个FC端口(2GB及以上),用于连接存储层的FC交换机。每台设备提供两个IP端口,用于连接网络层的核心交换机。说明根据上面的配置要求,请参考对应波分设备的产品资料完成配置。华为波分设备,请登录http:/ 产品支持 企业网络 传送网 波分”。3.5 配置交换机介绍网络层的核心交换机和接入交换机的配置要求,存储层的FC交换机的配置步骤。3.5.1 配置FC交换机FC交换机配置包括设置Domain ID、配置链路的长距离模式和创建Zone。本配置以SNS2248为例。前提条件已获取FC交换机的登录帐号和密码。背景信息通过FC交换机跨数