1、数据中心变革及NetApp存储及数据保护解决方案介绍,Ruihua 芮华 13916395170,2,大纲,NetApp 公司介绍NetApp存储产品软硬件和解决方案介绍NetApp部分成功案例,3,NetApp 概况,拥有遍布全球的企业客户 广泛的创新的存储和数据管理解决方案 行业领先的合作伙伴 全面的专业服务 全球支持 客户的成功是我们成长的动力,超过 7000 名员工,Fortune 1000,在 110 多个国家/地区设有办事机构,NASDAQ 100,S&P 500,4,以客户的成功为已任的企业文化,“我们以客户的成功来衡量我们的成功。” Dan Warmenhoven，CEO,5,
2、NetApp 的客户,能源,电信,政府,金融,媒体/互联网,医疗,技术,制造,6,为广泛的需求提供服务,数据中心 应用,远程办公应用,垂直行业 应用,数据库 商务应用 虚拟服务器 消息传送,数据保护 协作,产品设计 软件开发 地震分析 媒体和娱乐,虚拟化 备份 灾难恢复 安全性 法规遵从 归档,协作服务 文件服务 应用程序的测试和开发,健康和生命科学 电信 高性能计算和研究,文件服务 整合,7,Gartner 中端磁盘阵列魔力象限,数据来源：Gartner, Inc.，2008 年 1 月 Stanley Zaffos，Roger W. Cox， Pushan Rinnen 中端磁盘阵列魔力象
3、限，2007 年下半年 此“魔力象限”(Magic Quadrant) 报告随一项较大型的研究报告发布，应放在整个报告的语境下评估。可以向 NetAPP 申请索取此报告。 该“魔力象限”已在 2008 年 1 月 12 日由 Gartner, Inc. 声明版权，并已得到允许加以引用。“魔力象限”是对特定时间期的市场情况的图形化表示。它描述了 Gartner 根据 Gartner 所定义的市场的标准对特定供应商的表现进行的分析。Gartner 不对“魔力象限”中提及的任何供应商、产品或服务提供担保，也并未建议技术用户仅选择放在“领导者”象限中的供应商。“魔力象限”的唯一用途只是一种研究工具，并
4、不是为了成为某个特定的行动指南。Gartner 不对本项研究承担任何明示或暗示的担保，包括对特定目的的适销性或适用性的任何担保。,截至 2008 年 1 月,8,大纲,NetApp 公司介绍NetApp存储产品软硬件和解决方案介绍NetApp在制造业成功案例,9,企业传统IT架构所面临的痛点,MS SQL服务器,门户网站服务器,文件服务器,PDM系统,ERP系统,分支机构办公室,CADCAM客户端,X,MS Exchange,分散的资源导致很低的资源利用率 关键的应用数据没有最完善的适合的保护措施 关键业务数据无法做到横向分布式集中扩展 缺乏快速数据恢复手段以及数据整体容灾环境基础 职员的职责
5、无法明确划分 缺乏有效IT服务管理架构整体规划,46%,26%,3%,3%,3%,3%,3%,3%,10,简化并整合的存储解决方案,MS Exchange,CADCAM,MS SQL服务器,Oracle,ERP,分支机构办公室,大型数据库,X,文件服务器,11,统一存储IT架构带来的变革,MS SQL服务器,门户网站服务器,文件服务器,PDM系统,ERP系统,分支机构办公室 实现数据容灾,归档,CADCAM客户端,X,MS Exchange,通过一个框架进行管理 (DataONTAP) 分散的资源被集中利用，容量简单扩展 各个级别的存储满足相应的机构 维护管理人员精简、任务明确 数据可被快速恢
6、复 (SnapShot) 满足严格的Service Level Agreements 关键应用数据被保护 (RAID-DP) 拥有完整的灾备方案 (SnapMirror),80%,12,通过创新，实现价值,统一存储 克隆技术 精简配置的灵活卷技术 重复数据删除 RAID-DP Snapshot 与应用程序集成 基于策略的管理 普遍的虚拟化,节省成本 节省存储空间 减少人员配置,13,NetApp的统一存储体系结构模型,不兼容的孤岛,兼容的家族,平台,竞争厂家,NetApp,14,NetApp的模式如何体现价值,统一的: 硬件 降低成本 软件 降低复杂性 流程 降低风险,15,Netapp主存储
7、产品线,Netapp企业级存储产品：FAS存储系列 统一支持NAS/FC SAN/IP SAN,FAS6000,FAS2000,FAS3000,16,NAS (File文件),统一网络存储: 单一架构、多种连接、丰富应用、灵活使用,SAN (Block数据块),SAN,NAS,17,一体化数据管理 Data Fabric Manager（DFM）,集中管理和监控整个网络中的所有Netapp设备，同一个界面管理 NetApp FC SAN、IP SAN和 NAS,LUN Tab,Quick Sorting,Performance Statistics,Easy-to-Read LUN Repor
8、ts,LUN Sizes,18,灵活的升级能力,FAS2000,FAS3000,FAS6000,满足用户不同阶段的存储要求无需复杂耗时的数据迁移 投资保护,19,为整个数据中心增加价值,NetApp存储,数据中心 存储网络,其他厂商的存储,备份 服务器,FAS系列 和Data ONTAP,V系列 和Data ONTAP,服务器,磁带,Data ONTAP 管理系统,20,WAFL：条带化写入,数据盘,数据盘,数据盘,数据盘,数据盘,校验盘,21,RAID-DP: 有效避免MBER问题,安全性是普通 RAID 的 2,000 到 40,000 倍 通过双校验盘比镜像方式更可靠和稳定 14% 校验
9、盘数量 vs. 50% 镜像 72% 可用空间(*) Comparing 2P+12D vs. 7+7 Mirror,P,P,DP,RAID Protects against single disk failure,RAID DP Protects against any two-disk failure,22,RAID-DP 提供高数据可用性,在实际应用上RAID-DP的突破创新：Usenix 2004年度最佳论文 比RAID-1更卓越的数据保护 RAID-DP 比 RAID-5 稳定性提高 10,000 倍（或者说高 4 个数量级） 存储开销最低 性能影响最小,23,任意5块盘,1块盘,S
10、yncMirror,Checksums,RAID4,RAID-DP + SyncMirror,RAID-DP,任意2块盘,任意3块盘,硬盘故障保护方式,RAID-DP用于 同RAID组中单硬盘、扇区故障 同RAID组中两块硬盘故障 RAID-DP加SyncMirror (RAID DP+1)用于 任意同时发生的5块硬盘故障 存储盘架故障 任意同时发生的4块硬盘故障加1个读扇区故障 在Mirror的一方至少2处故障，另一方同样发生故障 RAID-DP以经济有效的方式提供增强的数据保护功能，磁盘有效利用率达到92.9%（数据盘和RAID组磁盘数之比）。,数据保护方案分类,数据保护 成本递增,24,
11、每一个卷支持255个拷贝 结合WAFL，不影响性能 无预留区的限制 零拷贝模式,无论快照还是快照恢复，完成时间仅数秒 可针对单个文件进行 普通用户可以自己访问自己的快照,Snapshot和SnapRestore,Snapshot,Snapshot,Before Snapshot,After Block Update,After Snapshot,A,B,C,D,Active FS,A,B,C,D,Active FS,C,A,B,C,D,Active FS,双机群集确保本地高可用性,Windows & UNIX Clients,Windows & UNIX Clients,File System
12、 A,File System B,Filer A,Filer B,Fibre Channel Arbitrated Loops,100 MB/S ServerNet,群集故障切换迅速,透明,Windows & UNIX Clients,Windows & UNIX Clients,File System A,File System B,Filer A,Filer B,100 MB/S ServerNet,27,传统的存储空间管理,3TB,ERP系统,28,传统存储空间管理导致的矛盾,3TB,ERP系统,1TB,质量动态系统,1TB,门户系统,2TB,OA系统,其它,2TB,需要扩容,已使用空间
13、,未使用空间,29,传统存储空间的管理导致的低使用率,40% 利用率,30,FlexVol,3TB,不占用实际空间,1TB,质量动态系统,2TB,1TB,门户系统,OA办公系统,2TB,其它,存储空间池,FlexVol,ERP系统,31,FlexVol的灵活性,3TB,ERP系统,1TB,质量动态系统,2TB,1TB,门户系统,OA办公系统,2TB,其它,存储空间池,实际占用的空间,扩展的空间,32,FlexVol提高存储空间的使用率,80% 利用率,Reclaimed Space,Available for Growth,实 际 可 用 容 量,全部可预分配容量,已使用容量,33,其它厂商的
14、空间分配方法介绍,RG1,RG2,RG3,RG4,RG5,ERP系统,磁盘,LUN,质量动态系统,门户系统,OA办公系统,立体库,其他,34,其他厂商在空间分配方法上的局限性,RG1,RG2,RG3,RG4,RG5,ERP系统,磁盘,LUN,质量动态系统,门户系统,OA办公系统,立体库,其他,访问热点,35,FlexVol给性能和管理上带来的变革,磁盘,LUN,更好的实现了磁盘IO的平均分布，提升了整个系统的性能消除了磁盘访问热点的出现大大简化了存储空间分配和管理上的复杂度,Volume,36,可缩放的高性能运算GX系统,全球命名空间 透明的数据迁移 集中化管理 故障管理 “无限的” 可缩放的
15、虚拟化层,Data ONTAP GX,37,Snap Suite家族产品,38,自主动态性能优化（Self-tuning Performance）自动提供优化性能，无需手工调整 直接磁带生成（Direct Tape Creation）100%的标准物理磁带格式影子磁带（Shadow Tape）加速离线磁带的恢复，智能磁带容量调整（Tape Smart Sizing）与其他 VTL 解决方案相比，能够节省 50% 的物理磁带空间,NetApp数据持续保护在数据中心应用应用思路,众多服务器和应用,主存储，光纤磁盘，在多时间点做不影响应用性能的快照全备份,Snapshot所有数据卷，文件格式和原始数
16、据格式一样，可以做到所见即所得的恢复，可以用Copy和命令做到秒级恢复 每个卷可以实现255份快照（不影响应用系统的性能，区别与任何厂家的Copy-in-write快照），一个主存储可以做上十万个快照。 Cache和NVRAM配合，永远一致的文件系统。 快速启动，2分钟。 同时提供FCP，ISCSI，CIFS，NFS服务 灵活横向纵向升级扩展，可以升级到网格架构 在线对LUN容量扩容和减少，提高利用率 FlexShare，灵活调整应用优先级 独特的WALF，高性能的并发读写和安全性 完整的RAID-DP（可以容错同一时刻坏两块硬盘） 简单管理 FlexClone，方便快速的实时数据上线测试 其
17、他非常丰富的软件技术功能等等,二级存储，SATA硬盘SnapVault方式,永远的Block块增量备份，每次只传输文件变化的Block块 可以将备份直接切换给服务器使用 对于开放系统的文件系统可以做到变化的Blocks或者文件增量备份 也可以众多备份软件无缝结合 所有的备份都生成一个全备份的Image文件 所有备份都是所见即所得的恢复 有完整的RAID-DP（可以容错同一时刻坏两块硬盘） 永远一致的文件系统 简单管理 具有主存储所有特点 其他非常丰富的软件功能等等,SnapMirror,主站和镜像站设备无须完全一致，大大节省投资 双向利用-FILER既为主站和镜像站, 实现多向冗灾的功能 支持
18、同步，异步准同步 容灾链路支持SAN和IP 链路要求低，最低可以使用64K带宽 本期解决方案中不做重点推荐，可以满足将来业务发展后的需求,磁带备份,随时使用NDMP对数据进行备份，实现Server-Less备份，提高备份效率和减少备份窗口 集中化管理和提高磁带使用效率,虚拟磁带库,39,存储架构的优势,存储整合: 多协议,多平台, 多系统整合, 统一管理。根据应用选择适合的网络存储技术（FCSAN/iSCSI/NAS) 高效协同: 减少数据访问时间，提高远端用户工作效率 高可靠性: 支持在线/离线备份，快速恢复，灾难恢复和应用级数据保护 简化使用: 降低使用/管理复杂度 高性价比: 通过提高利
19、用率和集中管理降低总体运维成本TCO 高可适性: 满足企业当前以及未来的存储需求,40,降低使用花费提高运行效率,NetApp 创新的软件技术最大化 提高存储使用效率,Savings compound when using multiple features!,41,Total Cost Index,100,162,164,91,Product Acquisition and Ongoing Vendor Costs,Downtime and Recovery Costs,Source: Oliver Wyman VMware Storage Total Cost Comparison Upd
20、ate, Dec 2007,Internal Operational Costs,Less primary storage required due to Snapshot copies and thin provisioning,NetApp has a 2x TB/FTE ratio compared to EMC and HP,NetApp has at least a 2x recovery time advantage over EMC and HP,TCO Comparison in VMware ESX Environments,As Much as 39% in TCO Sav
21、ings,42,卓越的性能,Workload SFS97_R1 benchmark represents file services (NAS) based workloadsResultsNew NetApp FAS3170 achieved 59% better throughput (OPS/sec) than EMC Celerra NS80GA low response time (ORT) is just as critical as throughput to many customers NetApp FAS3170 delivers 36% quicker response
22、time (sub-millisecond!) than EMC Celerra NS80G,SPEC and the benchmark name SPECsfs97_R1 are registered trademarks of the Standard Performance Evaluation Corporation. The results above are based on the best performing midrange NAS storage systems shipping from NetApp and EMC. The above SFS97_R1 resul
23、ts will be posted 6/10/08 on the Standard Performance Evaluation Corporation Web site and can be viewed at the following URLs. All comparisons are current as of 5/30/2008. FAS3170 (as of June 10, 2008) www.spec.org/sfs97r1/results/,Notes FAS3170 SFS97_R1 score will be published on June 10, 2008 OPS/
24、sec = Operations per second as measured in SFS97_R1.v3 benchmark ORT = Overall response time as measured in SFS97_R1 benchmark,43,行业领先的效率,应用环境 为 Oracle 降低 42% 的总拥有成本 为 SAP 降低 57% 的总拥有成本 为 Exchange 降低 56% 的总拥有成本 为文件服务降低 78% 的总拥有成本 为归档降低 35% 的总拥有成本 为 VMware 降低 39% 的总拥有成本运营效率 机架空间减少 50% 能耗降低 52%；发热量减少
25、51%,数据来源：Mercer 和 Oliver Wyman 的 TCO 研究,44,做得更多，做得更快,购买更少磁盘，存储更多 提高空间效率的技术 精简配置 通过重复数据删除功能实现 20:1 的空间节约 我们的副本只使用小部分空间 做得更多，做得更快 加快了应用程序配置速度 缩小了备份窗口 从几小时缩减为几分钟 为应用程序所有者提供 自助服务存储,45,业务实现突破,46,30,000个Linux 刀片计算机网格并支持超过10PB的NetApp存储器 不间断关键型业务环境 支撑1600个独立数据库环境 经实践得到了比以往高30%的使用率和快速应用部署 存储管理重叠开销降低50% 规模平滑地
26、扩展到1000多台/套服务器 2007年度数据中心,一种复杂和快速多变的业务,全球最大的企业级软件公司,坐落于奥斯汀的数据中心,同时支持Oracle内部的各种需求和被其托管的”Oracle On Demand” 业务.,47,领先的运营效率,与 EMC 和 HP 相比： NetApp 系统可节省 50% 的机架 NetApp 系统可节省 52% 的能耗 NetApp 系统可节省 51% 的热耗,10TB,存储部署,数据来源：“实现绿色 IT”, Oliver Wyman, 2007 年 12 月,EMC Clariion 和 HP EVA,22.9 TB 17 个机架单位,NetApp FAS
27、,11.2 TB 8 个机架单位,48,NetApp 数据备份D2D解决方案,SnapVault for Backup,传统的备份数据流,备份服务器,其他没有整合的 应用存储设备,内部硬盘或 直连存储设备,数据中心,好处,D2D解决方案,De-duplicate,数据备份过程SnapVault 和Backup software结合做为传统的 “DSU”使用，简单方便 实时数据的重复数据删除技术（极大的节约硬盘的空间）和提高备份效率 SnapVault备份数据可以让使用者直接访问（做到一定的容灾情况下快速数据切换） 可以高效的复制到二级设备中，二级存储采用高容量低成本的SATA硬盘 可用根据情况
28、在使用其他存储的主机端安装OSSV直接把数据备份到二级存储,每次备份数据的变化Block块，大大节省了二级磁盘空间需求 Block块的变化备份，提高了备份效率，可以加大备份的频度 最终用户可以直接所见即所得的恢复 结合NetBackup备份策略, 备份时间表，备份索引表可以管理所有的存储系统的备份文件数据和 数据库数据 可以在同一台设备上管理所有SnapVault备份，管理简单。 所有的数据备份可以有机的结合，达到最大的性能和最高的可用性 所有备份不影响生产系统，可以提高备份频度到秒级或分钟级,缺陷,数据缺乏有效低成本的磁带长期和离线保存机制,49,Tape versus SnapVault
29、with NearStore,Backup Environment Start with 2.1TB data Daily incrementals kept for 2 weeks Weekly fulls kept for 60 days Projected use: monthly fulls stored for 1 year 5% daily file change rate .5% daily block change rate,SnapVault with NearStore Tape,Day 1,2.1TB,2.1TB,Day 6,2.2TB,2.7TB,Day 30,2.25
30、TB,9.5TB,Day 60,2.3TB,18TB, 87% Space Savings at 60 days,1 year (proj.),2.7TB,39TB,50,NetApp 数据备份D2D2T解决方案,其他没有整合的 较大应用存储设备,内部硬盘或 直连存储设备,SnapVault for Backup,传统的备份数据流,备份服务器 NetBackup 6.0,数据中心,De-duplicate,整合后的 NetApp 存储设备 （主存光纤硬盘）,物理磁带库,NDMP&Tape Vaulting,好处,D2D2T解决方案,完善了方案二的不足，解决了数据长期归档和离线磁带保存机制 通过
31、物理磁带库NDMP方式的备份，可以把二级存储上的数据较快的备份或者Vaulting到物理磁带库中 磁带成本较低，可以大量存放历史数据,在方案二基础上增加了磁带做数据的长期归档和保存 磁带可以离线保存或者异地存放 磁带数据可以异地分发 结合NetBackup备份策略, 备份时间表，备份索引表可以管理所有的存储系统的备份文件数据和 数据库数据，可以有效的进行磁带的管理 可以在同一台设备上管理所有SnapVault备份和磁带库，管理简单。,缺陷,数据离线备份设备采用物理磁带库，备份和恢复性能存在瓶颈 长期的物理磁带库工作，机械故障比较高 按照目前物理磁带库单个LTO3磁带机理论80MB/S速度，40
32、0GB每盘磁带，50TB数据全备份需要约144小时和125盘磁带，恢复的时间窗口约为180小时。同时恢复125盘磁带，磁带的可靠性无法保证 需要购买大量磁带机和磁带，需要购买企业级大型高端磁带库，初期投资巨大，数据是否可以完整恢复？无法平滑升级和利旧。,NetApp 二级存储设备 （SATA硬盘）,51,NetApp 数据备份D2D2VTL2T解决方案,其他没有整合的 较大应用存储设备,内部硬盘或 直连存储设备,SnapVault for NetBackup,传统的备份数据流,备份服务器 NetBackup 6.0,数据中心,De-duplicate,整合后的 NetApp 存储设备 （主存光
33、纤硬盘）,物理磁带库,NDMP&Tape,好处,完整的解决方案,完善了方案三物理磁带库的不足，解决了数据备份和恢复速度问题,备份速度是物理磁带库机的几十倍 通过物理磁带库NDMP方式的备份，可以把二级存储上的数据快速的备份到虚拟磁带库中 虚拟磁带库可以做数据的硬件压缩(2:1,3:1)，极大的提高了后端的磁带库的备份压力 虚拟磁带库带有Export功能，可以把数据直接vaulting到后端物理磁带库中，减少了管理的复杂度,提高了磁带库磁带机的性能（通过虚拟磁带库对数据的硬件3:1的压缩） 减少了物理磁带库的投资和损耗（购买物理磁带机，磁带数量，磁带库规模），长期的投资得到保护。 减少磁带备份中
34、多数据流备份工作的复杂程度和提高了磁带的可用性 减少了备份服务器的负载 通过Raid技术实现影子磁带的高可用性，数据100的完整恢复。 多种方式的恢复，提高了恢复的效率 根据理论值，50TB数据全备份使用NetApp（业界最好的虚拟磁带库）1400MB/S需要8.2小时，全恢复10。2小时。,缺陷,初期投资较高,虚拟磁带库,52,大纲,NetApp 公司介绍NetApp存储产品软硬件和解决方案介绍NetApp部分成功案例,53,为西门子打造超大规模 Exchange 环境,针对德国和澳大利亚 20 万 Microsoft Exchange 用户，制定FC-SAN 和 iSCS 解决方案 以更低
35、的成本提高服务水平，提高了客户满意度和回头率 无限量的邮箱 提高了存储利用率 可快速恢复的可靠的 自动化备份 单邮箱恢复，自助服务 提高了 IT 部门的效率 Exchange 团队可以通过自助服务满足存储需求 不再使用磁带备份 在两年多时间里没有出现停机,西门子是一家全球百强制造企业。访公司在全球各地拥有超过 450,000 名员工，年收入超过 720 亿欧元。,54,为中远集团打造Vmware 环境方案拓扑图及配置,FAS3020CFCP, iSCSI & NFS,55,方案特色及优势,解决方案: 通过Vmware ESX 3.0(Virtual Infrastructure) 虚拟、整合多
36、个应用 通过NetApp存储提供统一的虚拟存储池 利用NetApp存储特性简单灵活地实现多种MSCS 同一物理主机上的两个虚机之间的MSCS 不同物理主机上的两个虚机之间的MSCS 虚机和物理主机之间的MSCS 利用Vmotion实现虚机在运行状态从一个物理主机迁移到另一个物理主机 优势: 一套存储设备实现多种方式的DataStore共享 FCP, iSCSI 和NFS 保护用户投资 升级时不需要数据迁移 非常灵活的存储部署 灵活的存储规划和部署满足不同业务部门的应用变化 存储部署随需而变，变化时不需要停机 管理成本低，正常工作时间就可完成所有管理任务,56,无锡希捷（Seagate）- 背景
37、及挑战,客户背景: 1979年成立，首家专为台式电脑制造5.25英寸硬盘的公司。 成功地依靠垂直整合策略设计、开发和应用存储产品的核心技术。 面临挑战: 众多的盘片制造流水线，保存各种数据的存储设备都是连接在自动的流水线上面。 流水线一年大概只有十个小时的可维护时间，希望部署的存储设备至少不会出现互坏的情况，在任何情况下都应该保证生产流水线的正常运行。,57,方案拓扑图及配置,FAS960C, FAS920NFS, CIFS, FTP & MetroCluster,58,方案特色及优势,解决方案: 将FAS960C的两个控制器部署在相隔300米的两个数据中心，并可实现故障接管； 两个数据中心的
38、数据相互镜像； 优势: 过在单个解决方案中集成高可用性和业务连续性功能，MetroCluster 可以降低复杂度、简化管理并提高投资回报 保护所有关键应用程序和提高可用性。当出现故障的情况下（无论是出自孤立的硬件问题还是整个站点灾难情况），MetroCluster 会将集群技术的优点扩展到距离遥远的站点,59,富士通中国（Fujistu）- 背景及挑战,客户背景: 富士通（中国）信息系统有限公司是富士通集团在中国设立的独资公司，也是富士通在中国业务的核心公司。 是中国屈指可数的从硬件到应用软件直至技术支持可提供一站式（One Stop）服务的全面技术解决方案供应商，公司在中国市场的地位与日俱增
39、。 面临挑战: 位于花旗集团大厦11楼的PSC（Platform Solution Center）需要展出的大量的硬件及软件方案 而对于SAP的解决方案FlexFrame更需要灵活的存储以满足不断变化的需求,60,方案拓扑图及配置,FAS270NFS,61,方案特色及优势,解决方案: 所有Linux服务器均通过Net Boot，操作系统保存在FAS270上 所有的SAP模块及数据均保存在FAS270上，NAS共享方式便于FlexFrame进行自动化管理 优势: 保护用户投资 升级时不需要数据迁移 保护用户数据 利用Snapshot技术进行快速备份和恢复，不影响SAP生产数据 通过SnapMirror进行远程数据镜像 非常灵活的存储部署 存储部署随需而变，变化时不需要停机 管理成本低，正常工作时间就可完成所有管理任务,62,我们的承诺：走得更远、走得更快,提高客户的业务的 效率和灵活性,加速和变革 客户的业务,建立以客户成功 为宗旨的伙伴关系,63,灵活性的基础架构,为您的应用选择最佳存储 为您的环境提供未来保障 快速广泛地实施新的创新技术,统一的体系结构,您现在可以,最广泛的统一存储平台 高性能的 SAN 和 NAS 可扩展的单一体系结构 支持多供应商的 存储,谢谢！,
