1、备份基础知识介绍,TSS : 王特,近期接到一些同事的电话,都是围绕着客户备份系统建设展开的。 我整理了一些材料,帮助兄弟们从基础上了解一下: 备份系统建设的主要组成部分 哪些厂商的产品可以参与客户的备份项目 备份的基础原理和概念 新型的备份技术涉及哪些内容希望通过我整理的材料,可以更好地帮助大家了解客户的备份系统。当然这只是很基础的备份知识,后期如果兄弟们遇上备份的项目可以联系我,我们共同讨论。,Page 3,备份系统的组成,备份系统一般由以下几部分组成: 备份软件 优秀的备份软件包括加速备份、自动操作、流量控制、灾难恢复等特殊功能,对于安全有效的数据备份是非常重要的。 备份网络 备份网络可
2、以是LAN/MAN/WAN,也可以是SAN,或者是多种网络混合的形式。 备份介质 介质是数据的负载物,它的质量直接关系着备份数据的安全。 备份管理知识 一个好的备份/恢复系统,除了配置有好的软硬件之外,更需要有良好的备份策略和管理规划来进行保证。对于一个复杂的系统,必须根据各种应用和业务的处理类型来分别制定具体的备份策略。但总体上来讲,一个好的备份策略,必须考虑多方面的因素。,Page 4,备份软件,传统备份软件厂商及产品 IBM TSM、 TSM Fastback up Symantec NBU、BE EMC Networker Commvault Backbone HP DP,Page 5
3、,备份介质,物理磁带库 IBM TS系列带库、SUN、IBM、Quantum带库等 磁盘 DS3500、V3500、V3700,主流的存储设备都可以作为备份介质 虚拟磁带库通过虚拟磁带库机头+磁盘阵列组成的虚拟磁带库设备 例如IBM protect tire + DS or V 存储系统。如IBM TS7650G+ DS3500,Page 6,备份窗口计算,一般地,备份窗口指用户可以用于执行数据备份的时间段。 构建备份系统时,必须注意备份作业执行的时间不要超出备份窗口规定的时间段。L 例如:按数据量为500G来说,若网络是10MB/S,即使带宽全部分配给备份任务,需要500GB*1024/10
4、MB/S*3600 = 13.8小时完成,18:00,08:00,备份窗口,备份时间,18:00,02:00,Page 7,为什么要备份?,32%,随着应用环境的日趋复杂,威胁业务数据安全的风险无处不在:,不同行业对于数据备份的需求各不相同,需要综合考虑备份要素,给出适应不同典型场景的备份解决方案,业务数据安全解决之道数据备份!,根据经验,每丢失20MB关键数据对企业造成的直接损失:,市场营销,财务部门,生产部门,70万RMB,14万RMB,12万RMB,7,备份保护程度,备份实现成本,Page 8,衡量备份级别的两个概念,RPORecover Point Objective RTORecov
5、er Time Objective,备份点,Recover Point Objective,Recover Time Objective,故障点,启动点,时间轴,系统诊断,Restore,Recover,上次备份点后的所有修改的日志和记录,备份点状态,Page 9,目 录,为什么要备份? 备份方案关注要素 地域分布 数据类型 备份策略 备份介质 数据优化 统一管理 数据安全 集中备份解决方案 集中备份方案特点 成功案例,Page 10,地域分布,Page 11,备份数据类型,数据组织,数据结构,结构化数据的备份与应用密切相关,需要专门设计备份方案。,非结构化数据的备份与应用耦合度小,备份方案实
6、现方式多。,备份方案需要支持!,备份方案需要兼容!,主机类型,Page 12,备份策略,备份策略,Page 13,备份介质选择,Page 14,数据优化,备份分级存储,不同的备份数据存放于不同的备份介质 有效利用存储资源,软件压缩 硬件压缩 减少数据对存储空间的占用,数据压缩,删除重复的数据,全局单实例 减少磁盘成本,重复数据删除,在线存储,近线存储,离线存储,Page 15,统一管理,统一管理,Page 16,数据安全,Page 17,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 备份方案平台 集中备份方案概述 备份介质与备份数据生命周期管理 备份组网架构 集中备份方案特点 成
7、功案例,Page 18,多种备份新技术的采用导致额外的复杂性,Page 19,下一代数据保护框架就是对这些异构保护服务提供集中、端到端的管理,除非建设统一的备份管理平台,Page 20,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 备份方案平台 集中备份方案概述 备份介质与备份数据生命周期管理 备份组网架构 集中备份方案特点 成功案例,Page 21,集中备份方案概述,描述: 企业级数据保护方案,提供从桌面到数据中心,涵盖UNIX、Windows、Linux、及NetWare环境的全面数据备份和恢复 优势: 单一、集中的管理工具用于数据保护与灾难恢复的管理 高级的管理、报告、报警
8、和故障检测功能 融合了先进的基于磁盘的保护方法,同时保护了磁带存储的投资 广泛的OS、数据库和存储硬件的支持,Server Protection,Data Protection,Remote Office,Desktop & Laptops,Data Center,Offsite/ Vault,Page 22,备份方案架构,Page 23,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 备份方案平台 集中备份方案概述 备份介质与备份数据生命周期管理 备份组网架构 集中备份方案特点 成功案例,Page 24,磁带为非封闭介质,且磁带库中的磁带之间没有容错保护。备份任务涉及到的磁带组中
9、任一盘磨损、卡带、霉点、粘连等,均会导致整个备份任务无法恢复 ESG企业集团2004年的调查表明,磁带备份的不可恢复率高达20%,高维护负担:磁带驱动器为非封闭机械易损件,本身故障率高,灰尘、潮湿等更导致其故障率不可预期,导致设备可用性差 美国Storage Magazine 2002年统计,美国市场机械磁带库每年的维护成本高达磁带库采购成本的15%,磁带备份的更大困惑在于数据恢复效率低,传统物理磁带备份的困扰,机械磁带库容量成本低廉,但,存储可靠性低 备份质量堪忧设备可用性低 维护压力大恢复能力受限 服务响应慢,机械磁带库多个易损故障点组合,无容错能力 高备份失效率,Page 25,磁盘是改
10、善备份质量的基本方法,Disk,改善备份操作性和可靠性,改善可恢复性,多用途,提高备份成功率 提高备份速率 缩小备份窗口 简化备份操作,提高恢复成功率 提高恢复速率 支持细粒度备份与恢复 简化恢复操作,支持搜索备份集 可支持远程复制 可支持重复数据删除 大大降低维护成本,Page 26,物理磁带不可替代的特性,归档的要求 法规遵从,一次性写入 长期保存、搬离机房需求固有特性 容量大,支持PB级数据容量 较低的每GB成本,Page 27,集中备份方案备份数据生命周期管理(D2D2T),备份客户端,备份服务器,磁盘阵列,磁带设备,备份方案数据生命周期管理(D2D2T) 近期数据备份到磁盘阵列上,作
11、为近线保存,保证近期数据能够可靠快速恢复 将过期备份数据通过备份服务器迁移到磁带设备上,作为离线保存 支持直接通过磁带设备上的离线数据,恢复备份客户端数据到历史版本,Page 28,集中备份方案备份数据生命周期管理(D2V2T),备份客户端,备份服务器,VTL,磁带设备,备份方案数据生命周期管理(D2V2T) 近期数据备份到虚拟带库上,作为近线保存,保证近期数据能够可靠快速恢复 将过期备份数据通过虚拟带库直接归档到磁带设备上,作为离线保存 支持直接通过磁带设备上的离线数据,恢复备份客户端数据到历史版本,Page 29,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 备份方案平台 集
12、中备份方案概述 备份介质与备份数据生命周期管理 备份组网架构 集中备份方案特点 成功案例,Page 30,备份组网架构LAN_Base,备份服务器,客户端,客户端,客户端,生产阵列,备份介质,IP SAN/FC SAN,LAN_Base 备份数据从客户端通过业务网络,经由备份服务器保存到备份介质中优势 易于部署 成本低劣势 占用业务网络资源,Page 31,备份主服务器,应用+SAN Media,生产阵列,IP SAN/FC SAN,备份介质,备份组网架构LAN_Free 1(SAN Meida),应用+SAN Media,应用+SAN Media,LAN_Free(SAN Meida) 业务
13、服务器客户端集成介质服务器部分功能,备份数据直接从客户端通过SAN网络,保存到备份介质中优势 不占用任何业务网络资源 备份速率高劣势 占用应用服务器资源作介质管理 必须配置企业级客户端,提高成本,Page 32,介质服务器,SAN 客户端,SAN 客户端,SAN 客户端,主服务器,生产阵列,FC SAN,备份介质,备份组网架构LAN_Free 2(SAN Client),LAN_Free(SAN Client) 备份数据通过SAN网络,经由备份服务器,保存到备份介质中优势 不占用任何业务网络资源 备份速率高劣势 只支持FC SAN 需要部署额外FC HBA卡 成本较高,Page 33,目 录,
14、为什么要备份? 备份方案关注要素 集中备份解决方案 集中备份方案特点 重复数据删除功能 裸机系统恢复 数据库和应用保护 其他功能特点 成功案例,Page 34,内容数据,内容数据,内容数据,内容数据,集中备份重复数据删除技术原理,Client1File 1,Client2File 2,A,B,C,D,E,F,G,A,B,C,D,O,F,P,元数据,Client1File 1,Client2File 2,重复数据删除存储池,Page 35,重复数据删除集中备份方案,中央数据中心,容灾中心,重复数据删除存储池,物理带库,备份 介质服务器,磁带运输,备份客户端,重复数据删除 存储池,小型远程办公室,
15、远程办公室,重复数据删除客户端,重复数据删除 存储池,备份客户端,Network,带宽优化的数据传输 (客户端删除重复数据),常规数据传输,Network,备份 介质服务器,重复数据删除点,Page 36,Data Protected,Tape Backup,Deduplicated Disk,250 GB,250 GB,250 GB,250 GB,250 GB,250 GB,250 GB,250 GB,250 GB,250 GB,重复数据删除方案效果演示,Page 37,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 集中备份方案特点 重复数据删除功能 裸机系统恢复 数据库和应用
16、保护 其他功能特点 成功案例,Page 38,38,如果服务器坏了怎么办?,Page 39,39,Page 40,40,系统恢复 全新的自动方法,Award Modular BIOS v6.473, an Energy Star AllyCopyright C 1994-2003, Award Software Inc.Pentium 4 Centrino Mobile ProcessorMemory Test: 1024MB OKAward Plug and Play BIOS Extension v1.0ACopyright C 1995, Award Software Inc.Detec
17、ting primary master hard disk.FAILEDDevice I/O error: Unable to read sector 0 on primary hard disk Press any key to reboot.Press DEL to enter SETUP2/16/2008 W3HU4-877FH4-08,Page 41,集中备份方案支持裸机恢复 从裸机到可用的服务器只需几分钟,一个点击就可快速恢复,简单,可靠 恢复操作系统、配置、补丁、文件系统 支持UNIX、Linux、Windows 支持异机恢复,步骤9.8.7.6.5.4.3.2.1.,传统恢复,裸
18、机系统恢复,服务器恢复时间,Page 42,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 集中备份方案特点 重复数据删除功能 裸机系统恢复 数据库和应用保护 其他功能特点 成功案例,Page 43,数据库和应用的保护,减少风险和复杂性: 采用标准备份Agent,删除了script工作 集中管理: 统一控制台管理备份,恢复到不同数据库和应用,数据库和应用 备份客户端,备份服务器,Database or Logs,备份介质,API,Page 44,支持的数据库和应用,Page 45,目 录,为什么要备份? 备份方案关注要素 集中备份解决方案 集中备份方案特点 重复数据删除功能 裸机系
19、统恢复 数据库和应用保护 其他功能特点 成功案例,Page 46,VMware VCB 脱离 VM 的备份,主要优势:,降低了ESX CPU开销:由备份服务器执行备份 杜绝停机:VMs 始终保持运行 自动:通过备份企业客户端管理流程,一种“VMware 快照”,允许拍摄虚拟机的快照,并将其安装到备份服务器上 流程由备份企业客户端控制,VMware 全面恢复,主要优势:,减少时间和成本:只需采用、存储和管理一个备份 灵活性:映像级副本用于灾难恢复,文件级映射用于单一文件恢复,单个映像级备份 脱机映射的备份映像 映像级或文件级恢复,全面保护VMware,Page 47,合成备份缩减备份窗口,备份服
20、务器,Disk,Tape,备份客户端,合成备份,Disk,Tape,Page 48,支持NDMP NAS备份,支持NDMP备份和恢复NAS 支持 Direct Access Restore (DAR):NAS直接从磁带上恢复数据,本地备份,第三方备份,远端NDMP备份,LAN,Tape Drive,Automated Tape Library,备份服务器集成 NDMP Server,Tape Drive,Page 49,备份和恢复灵活性断点续传,断点续传 失败的备份和恢复任务自动的断点续传 支持暂停备份和恢复任务,过一段时间后开始断点续传,Job Start,Job Finish,Job Suspended,Job Resumed,Page 50,管理维护,- 所有操作集中的视图 - 客户化的白板 - 各种设备&服务的菜单,管理 & 监视,