1、 第一部分：存储应用 第二部分： OS与存储快照备份生命周期管理存储虚拟化容灾存储应用存储的应用从数据保护说起 每个企业都在大量的使用计算机处理自己的核心数据，这些数据往往是企业生产经营必不可少的部分。依赖这些数据的计算机系统的停机往往会造成企业生产经营活动的停顿，给企业造成巨大的损失。所以，可以说，这些数据是企业的生命核心。企业的 IT管理员为了保证生产经营活动的持续运行 数据丢失的原因 硬件 故障 RAID也会损坏 病毒入侵 人 为操作 应用 錯誤 自然 灾难快照 关于指定数据集合的一个完全可用拷贝，该拷贝包括相应数据在某个时间点（拷贝开始的时间点）的映像。快照可以是其所表示的数据的一个副
2、本，也可以是数据的一个复制品。 快照是指向保存在存储设备中的数据的引用标记或指针。可以理解为：快照有点像是详细的目录表，但它被计算机作为完整的数据备份来对待。 分割镜像快照 分割镜像快照（ Splitting a mirror）写操作镜像子系统（存储阵列，逻辑卷管理器，虚拟化设备）源 镜像写操作镜像子系统（存储阵列，逻辑卷管理器，虚拟化设备）镜像关系终止源镜像快照代理保证数据一致性 database consistency 快照的数据一致性问题 业界大多数的存储系统在做快照时，都仅仅是对磁盘中的数据进行快照操作，而没有顾及服务器缓存中的数据。因此，经常发现快照出来的数据 “ 不对 ” ，与预期
3、中的数据不一致。 在存储设备执行数据快照操作时，必须同时兼顾磁盘和缓存中的数据，才能严格保证数据的一致性。 保证快照数据一致性的方法 接口调用：部分存储厂商提供编程接口，在主机端放置手动编写的脚本程序。做数据快照时，通过脚本调用数据库的接口，将缓存 “ 刷 ” 到磁盘上，以此保证数据一致性。 快照代理：少数厂商提供完全自动化的快照代理程序，针对不同的客户端应用，比如Oracle、 SQL Server、 Exchange、 Notes等，在客户端安装不同的快照代理程序，与应用程序进行联动，保证各种存储服务运行时关键业务数据的一致性和完整性。 备份系统构成和架构局域网备份系统 LAN备份设备 备
4、份服务器 备份客户机工作站业务 /数据库服务器 备份服务器安装备份管理服务器软件 备份客户机安装备份客户机软件 备份服务器连接备份设备备份软件作用 复制拷贝的局限性a) 只能完成一般文件系统的全备份，而不能完成增量备份；b) 不能灵活的制定自动备份策略；c) 不能自动的将大数据自动的备份到多个备份存储介质上去；d) 数据库模块，完成数据的联机备份e) 操作系统备份，完成操作系统的备份f) 不能有效的记录备份索引，如：什么时间备份，备份什么内容，备份级别？备份数据保存在哪，备份数据需要保存时间？备份软件体系结构 传统软件：集中式、文件式。性能下降、扩展问题备份源数据备份客户端Agent备份服务器
5、备份目录 /索引 备份管理目录 /索引管理磁带管理 备份数据目录 /索引信息备份发起增量与差分备份的差异 增量备份 备份前次备份后所产生的数据 恢复时需要最新的全备份及所有的增量备份 差分备份 备份所有在前一次全备份后所产生的数据 恢复时只需要最新的全备份及最新的差分备份备份数据流向管理 LAN Free基于 SAN的 Lanfree备份系统备份设备Disk/Tape Library/VTL备份服务器SANLAN磁盘阵列应用服务器磁盘辅助备份的技术磁带 (tape drives, tape automation)虚拟磁带(Virtual Library System) 基本备份和恢复功能 离线
6、保存 针对恶意破坏 (黑客 &病毒)的最佳保护 增强性能 增强可靠性 无缝的集成 “ 即时 ” 大量恢复 平衡高可用性投资快照和克隆技术(Business Copy)性能增加 获得成本增加Write-to-Disk技术如何工作的foo 1foo 2foo 3foo nhost 1host 2host 3host n低成本的磁盘本地或共享的存储 每个主机将自己的文件写到低成本的磁盘上 . 所有文件的传输通过备份软件管理 通过备份服务器将数据传输到磁带库上Backup serverTape虚拟磁带库如何工作host 1host 2host 3host n虚拟磁带设备 本地或共享存储 每个主机象磁带
7、库备份一样写到一个或多个虚拟驱动器上 . 所有文件的传输通过备份软件管理 通过备份服务器将数据传输到磁带库上Backup serverTapeWrite-to-Disk 和虚拟磁带库技术比较虚拟磁带库 Write-to-Disk设置复杂性 设置仅仅和真正的磁带库一样 需要配置 RAID组 , LUNs,卷和文件系统数据压缩 可以实现软件和硬件的压缩 (软件压缩通常会影响性能 ) 不可以基于设备级的压缩费用 较昂贵的购置成本备份软件许可证好象是带库一样或按每个 TB颁发许可证通过压缩获得存储效率较低的管理费用在绝大部分备份应用中都是免费或按 TB颁发许可较高的管理费用性能 针对连续读写操作调试硬
8、件设备 性能取决于设定的磁盘阵列和服务器虚拟磁带的目标客户 由于缓慢的服务器而不能满足备份时间（ backup windows）要求的客户。容量 200Gb左右或更高的 Windows服务器是一个很好的目标。 要执行很多单个文件恢复的客户 期望不再使用磁带的客户。警告这些客户并向他们解释可拆卸介质的益处 -站点保护、防范恶意攻击（病毒 /黑客）。同时，确保客户了解磁带的其它用途（数据分配和复制、存档、法规） 要备份具有较短生命周期的数据的客户。 对非关键数据使用快照和克隆技术的客户。数据生命周期的三个概念ABCDEFGABCDEFGABCDEFG 备份 Backup 归档 Archive 迁移
9、 MigratorDataMigrator 数据迁移 降低了在线存储的大小，从而改进了应用、备份和恢复的性能。 用 N层存储体系结构来透明的扩展主存储容量。 迁移数据可用来达到保存的目的（文件归档） 消除了时常发生的容量配额问题 当前用经济的磁盘系统来做分级存储是很实用的Data MigrationSet1,000 GbbeforeStatic dataWeekly 94Data Protection Backupsets700 Gb300 GbFree 300 Gbafter66 30% increase in free space30% decrease in backupRecallDM
10、 policyItems over 365 days old and bigger than 10K虚拟化的原理1 685 7管理2客 户管理员物理资源逻辑资源存储虚拟化的目的抽象 Abstract 统一数据管理功能“Virtualization”降低管理难度数据跨设备流动提高可扩展性提高设备使用效率隐藏 Hide隔离 Isolate设备构件化带内 virtualization 优点 不需修改主机结点 具有平台无关性 不足 虚拟化功能部件作为 I/O路径上的集中环节容易成为系统性能瓶颈 扩展性较差带外 virtualization 不足 需要在主机上增加代理软件 优点 appliance在 I
11、/O路径之外而不触及真正数据，性能较高 没有在 I/O路径上引入集中环节，扩展性较好容灾设计的关键指标 RTO（ Recovery Time Objective）代表容灾系统在灾难发生后数据或者系统恢复所用的时间。 RPO（ Recovery Point Objective）代表灾难发生时已经备份的数据与生产中心数据的时间差。 参考下图便于理解 RPO与 RTO的概念。成本效益分析 不能片面追求 RPO与 RTO TCO与 RIO的关系 成本效益模型分析 性能最好的方案不一定是最佳方案常见数据保护技术区别IIIIIIIVV12345678910（ CDP)最新数据备份快照复制CDP保护颗粒度1
12、-N 天1-N 小时只有最新数据保留过去时间点基于智能存储系统的数据容灾 利用存储系统内建的固件或操作系统 ,通过 IP网络或 DWDM光纤通道等传输界面连接 ,将数据以同步或异步的方式复制到远端。智能存储将存储器I/O操作 Log复制到远端的存储系统中并执行，保证数据的一致性。较容易实现主中心和备份中心的操作系统、数据库、文件的实时拷贝维护能力。 优点就是数据与运行分开 ,对主机系统的运行资源影响比较小。另外 ,借助高速缓存加速 I/O存取 ,两端的数据差异时间点比较小 , 存储系统本身具备一定的容错能力 ,使之具有一定的运行性能和可靠性。 最大的限制在于其昂贵的构造成本。一般需要来自同一个
13、厂家的存储系统。 SourceUnlimited DistanceTargetSourceLimited DistanceTarget基于智能存储系统的数据容灾以下所有技术支持同步和异步 CA直接 FC 500m为 1Gbit 300m为 2Gbit 50m线缆9m线缆交换的 FC 10km，通过标准的 LW GBIC或 SFP 40 或 80km，通过 ELW GBIC和延伸的结构 50m 50mFC交换机 FC交换机9m线缆CWDM / DWDM 200km DWDM，视交换机 /FW而定 100km CWDM hp continetalcluster/hp metrocluster支持
14、无协议转换。使用专用的光纤。 可以与其它光纤协议共享链路实时数据复制容灾技术层次生产系统生产系统 容灾系统容灾系统存储设备（磁盘阵列 /光纤交换机）交易控制存储设备（磁盘阵列 /光纤交换机）数据库 数据库应用软件 应用软件消息传输I/O控制数据块传输逻辑卷（卷管理 /虚拟化）逻辑卷（卷管理 /虚拟化）热容灾热容灾冷容灾冷容灾RealSync操作系统（卷管理软件）操作系统（卷管理软件）文件传输OS与存储OS与存储逻辑卷管理 传统分区缺点： 磁盘的划分通过分区来实现，在系统安装之前用户必须正确选择每个分区的大小 分区大小是固定不变的，同时也就限制文件系统和文件的大小 分配给分区的磁盘空间必须是连续，这个特点限制了分区不能跨越多个物理卷 LVM逻辑卷管理优点： 可分配非连续空间，可以跨越多个硬盘 可以动态增大逻辑卷的大小 方便存储管理操作，包括文件系统的备份、分区的删除、新分区的建立和文件系统的恢复等 新的硬盘很容易动态地添加到系统DriversVG操作系统物理存储Logical Volume Manager(LVM)LV LV数据库 文件系统VGLV文件系统
