1、网络存储基础教育,备份和恢复原理,备份需要考虑的问题 网络备份架构详解 高级备份恢复技术 定制合理的备份系统 使用备份软件进行数据 备份 如何进行数据恢复,教学内容,备份需要考虑的问题,面临的问题和挑战,在业务功能丧失对业务实体产生严重影响之前，最长可接受时间 业务可以容忍的持续停机时间,恢复时间目标 Recovery Time Objective (RTO),面临的问题和挑战,为了恢复处理交易而必须恢复数据的时间点 业务可以容忍的数据损失量,恢复点目标 Recovery Point Objective (RPO),您准备花多少时间恢复系统？,每次备份您最长给我多少时间？,恢复时您能让我丢多少
2、数据？,您备份的数据量有多大？,您希望各种数据保留多长时间？,您的系统环境？主机/存储/带宽/应用,您打算花多少钱？,成功部署备份系统需要考虑的问题,您备份数据的类型是什么？,影响备份系统的因素,目标数据 目标数据的容量 备份时间 恢复时间 设备类型 备份计划 (全备份,差异备份,增量备份) 备份系统的结构的类型 在线备份(如果需要),网络备份架构详解,网络备份架构的组成,硬件组成备份服务器（Backup Server）：负责管理整个系统的备份过程。备份客户端（Backup Client）：需要备份的应用服务器（Application Server）。备份设备：可以是磁盘阵列（Disk Arr
3、ay）、磁带库（Tape Library）或虚拟磁带库（VTL）。,网络备份架构的组成,软件组成服务器端备份软件：安装在备份服务器中，负责控制、监控、制定所有的备份任务。客户端备份软件：安装在需要备份的应用服务器中，负责与备份服务器通讯，并将备份数据送出。数据库代理软件：安装在需要备份的数据库服务器中，负责数据备份的一致性与完整性。 带库驱动模块：安装在备份服务器中，允许备份数据写入备份设备中。,网络备份架构的组成,备份网络 一般为百兆或千兆以太网，备份服务器、备份客户端都需连接到备份网络，备份数据流及控制命令流都在该网络上传输,备份及恢复流程,备份流程在备份服务器中设置备份任务及策略。备份服
4、务器定时启动备份任务，通过以太网发送控制命令通知备份客户端开始备份。备份客户端接收备份命令，启动数据库代理软件保证数据库的一致性，并开始发送备份数据通过以太网传输到备份服务器端。备份服务器接收备份数据，并将备份数据写入备份设备中。,备份及恢复流程,恢复流程业务系统数据丢失，需要恢复数据的客户端停止业务应用。在备份服务器端启动恢复任务，管理员手工选择需要恢复的备份数据版本。 备份服务器在自身数据库中寻找需要恢复的数据版本，并在备份设备中定位查找。备份服务器通过以太网将数据传输给丢失数据的客户端，客户端接收待恢复的备份数据。数据恢复完毕，客户端启动相关业务应用系统。,网络备份的数据流走向,Appl
5、ication Server,LAN,RAID or JBOD,Tape Library,Backup Server,高级备份恢复技术,LAN Free备份流程,备份流程备份客户端需安装备份媒体介质服务器端软件。在备份服务器中设置备份任务及策略。备份服务器定时启动备份任务，通过以太网发送控制命令通知备份客户端开始备份。备份客户端接收备份命令，启动数据库代理软件保证数据库的一致性，并开始发送备份数据通过SAN网络直接写入到连接在自身的备份设备中。备份服务器接收客户端写入成功的信息，备份任务完成。,LAN Free备份数据流的走向,Local Area Network,Metadata,Backu
6、p Server,Backup Client,Server Less备份流程,备份流程需要SAN交换机或备份设备支持此功能。在备份服务器中设置备份任务及策略。备份服务器定时启动备份任务，通过以太网发送控制命令通知备份客户端开始备份。备份客户端接收备份命令，并传达备份命令给SAN交换机或备份设备开始备份，备份数据不通过备份客户端直接从磁盘阵列写入到连接在SAN网络的备份设备中。备份客户端得到完成信息，并将该信息通过以太网传送给备份服务器，备份任务完成。,Server Less数据流走向,Disk,Fibre Channel,Local Area Network,Storage Area Netw
7、ork,NAS的备份,NAS Server,Tape,Backup Server,业界对NDMP备份的支持,NetWorker Client A,NetWorker Client B,NetWorker SERVER,NAS,NetWorker Storage Node,Disk Array/ Tape Library,NDMP备份端可备份到任何Networker支持的备份介质上 NDMP备份端可使用并行流（Multiplexing），磁带克隆（ cloning），数据迁移（ staging）等备份技术 NDMP备份端的数据和非NDMP备份端数据可交叉复用 NDMP和非DMP的备份客户端可动态
8、共享磁带驱动器,快速备份和恢复 保护用户投资 简便的NDMP管理 降低客户备份复杂度,Unique to NetWorker!,在线Snapshot备份模式,在线snapshot文件级备份 FlashBackup 比普通文件备份效率更高 可以做文件系统的全备份或增量备份 可以轻松处理对数以亿计的小文件备份 可以将备份的文件系统中单独的文件或目录恢复到远程或本地的文件系统中。,合成备份,LAN,备份服务器,备份客户端,磁带库,Sun.,Sun.,Sun.,Sun.,Sun.,Sun.,Sun.,Sun.,第一周 全备份,Mon.,Mon.,Mon.,Mon.,Mon.,Mon.,Mon.,Mon
9、.,Mon.,Tue.,Wed.,Thu.,Fri.,Sat.,生成 全备份,不需要执行全备份操作，不需要干扰客户端 直接生成新的全备份数据,在首次全备份生成以后，合并式备份就可以避免重复执行全备份操作。 合并式备份可以基于磁带磁带的复制操作生成新的全备份数据。 仅限于文件系统,定制合理的备份系统,备份对应用系统的影响,备份对系统的影响 对应用的影响 CPU时间占用 内存占用、总线占用 对网络的影响 对网络带宽的影响 设备占用,CPU,内存,网络,应 用,备 份,应 用,备 份,应 用,备 份,备份策略的内容,全备份、增量备份、差分备份,备份类型,数据保留时间,一个月 一年,备份什么数据,文件
10、、操作系统、数据库 裸设备备份、备份软件日志,备份的目的地,磁盘、磁带 备份服务器,每天备份 每周备份,备份周期,备份时间范围（备份窗口）,备份对象类型,文件/文件夹备份,数据库备份,逻辑卷备份,操作系统备份,备份软件备份,文件备份,文件备份 指定需要备份的文件或者目录即可,数据库备份,多处存放,控制文件,归档日志,定期备份并删除,数据文件（物理分区）,全备份、增量备份,使用镜像或 复制方式备份,在线日志,程序文件,文件复制（快照）,每周1-2全备份 每天增量备份,定期复制,可使用镜像或复制,在两次全备份间 不超过7跳,同步/异步 镜像/复制,备份一次即可,操作系统备份,注册表信息,动态链接库
11、,用户配置文件,系统引导信息,应用软件,Windows系统,操作系统备份,Unix操作系统 系统配置文件 设备文件 系统启动信息 其它软件,etc,passwd,group,shadow,/,dev,device,special files,boot,var,kernel,& boot,files,usr,tmp,bin,lib,ls,tty,cat,who,sbin,mount,fdisk,home,dale,laura,dales,files,lauras,files,logs,spools,etc,备份系统备份,设备配置信息,介质管理信息,备份策略配置,备份数据版本信息,备份软件工作日志
12、,备份软件日志,镜像磁盘备份,专门磁带备份,网络备份,备份的目的地,备份数据保留的时间,时间,数据的价值,不同保留时间的数据，不存放在同一盘磁带中,备份计划,周期性备份 每n日、每n周、每n月 一般作正常的数据备份 如：每周一次全备份、每天一次增量备份 系统启动时 备份系统状态信息，以便在机器出现故障时随时恢复 系统登陆时 备份用户配置信息 系统空闲时 备份对CPU占用比较大的数据,备份报告的内容,多处存放,服务器配置,数据库/文件系统配置,定期备份并删除,系统连接结构,全备份、增量备份,使用镜像或 复制方式备份,备份系统详细配置,备份工作完成状况,文件复制（快照）,每周1-2全备份 每天增量
13、备份,定期复制,可使用镜像或复制,在两次全备份间 不超过7跳,同步/异步 镜像/复制,备份一次即可,备份报告的内容,系统连接结构,连接结构,操作系统类型,操作系统版本,网络设置,备份报告的内容,IP地址、主机名、网关,服务器配置,硬盘的分区状况、文件系统格式,安装的软件及版本,系统的硬件配置,CPU、主板、内存、磁盘、板卡,备份报告的内容,数据库/文件系统配置,数据库版本,数据库的配置,数据库名称,系统数据文件名称、大小、存放位置,日志文件名称、大小、存放位置,用户数据文件名称、大小、存放位置,控制文件存放位置,备份报告的内容,备份系统详细配置,备份系统的硬件配置,备份设备类型,磁带标号,备份
14、软件配置,备份管理服务器,介质服务器,媒体池配置,备份策略设置,备份软件的日志管理,备份报告的内容,备份工作完成状况,备份任务的完成情况,每个客户端的备份任务能否正常完成,备份数据的大小,备份设备的工作状况,剩余磁带的容量,已用磁带的使用时间、使用次数,磁带驱动器的工作状况,上次清洗驱动器的日期,存放起来的磁带的保存时间,备份报告,备份报告的管理 备份报告应有专人定时编写 备份报告应存放在安全位置 不会因为灾难的原因而丢失 可以让数据恢复人员在最短的时间内取得报告,备份数据的失效,备份的数据本身不可用,非静止数据库的备份,数据文件部分丢失,多次增量备份中的一个丢失,元数据缺失,数据库的控制文件
15、丢失,备份数据本身不可用,数据已损坏后备份,介质失效,丢失磁带上的全部数据,备份的验证,定期旋转磁带,文件恢复测试,数据库恢复测试,逻辑卷恢复测试,操作系统恢复测试,备份系统恢复测试,使用备份软件进行数据备份,备份软件的责任,异构平台的应用支持 制定数据保存周期策略 确保数据安全性要求 缩短海量数据备份、恢复时间 尽可能降低系统管理员的工作负担,异构支持,Novell,应用程序,操作系统,IBM,Sun,HP,IBM Informix,IBM,备份软件模块化管理,功能模块管理 功能模块用来实现更多的备份功能 针对不同应用有不同的功能模块来配合该应用的备份 备份软件的功能模块一般都配有licen
16、se限制 模块的安装一般分为两个部分 在服务器端或客户端安装模块软件 在服务器端输入模块license,备份软件的内部结构,备份软件一般都由下面各部分组成： 设备管理 媒体介质管理 备份策略管理 备份任务监控管理 日志系统管理 客户端恢复管理,管理用于备份的设备，包括磁带库、虚拟磁带库及磁盘设备 增加、删除或修改一个磁带库设备 要判断好机械手的类型，备份软件大都支持所有的机械手类型 增加磁带驱动器，并将其配置到已添加的机械手下 可以通过设备管理控制机械手对磁带驱动器进行操作 增加磁盘设备，不同的不同的备份软件配置方式不同,设备管理,管理备份所需的媒体介质磁带或虚拟磁带 可以通过备份软件的菜单工
17、具将搜索到放入磁带库中的。 也可以通过手工方式添加磁带，需要择好磁带类型，机械手类型，媒体编号等。 备份软件的介质管理还可以对磁带进行一 些管理操作，如清洗磁带、重新标识磁带等,媒体介质管理,定义备份客户端 定义备份源路径 定义备份目的路径 定义备份类型 定义备份版本保存时间 定义自动备份的具体计划,备份策略管理,备份任务监控管理,备份任务监控管理 用于监控已执行或正在执行的备份任务 对于正在备份的任务可以查看备份进度 对于已经备份完毕的任务可已查看其状态信息，备份时间、备份策略、备份的客户端、是否成功等 对于备份失败的任务，根据失败信息可以确认问题 可以暂停、开始、停止正在执行的备份任务,日
18、志系统管理,提供非常完整的任务、介质、错误的报告 显示在某一段时间内，备份的状态和错误信息 显示在某一段时间内详细的备份信息 列出Server在某一段时间内记录下来的错误信息 列出Server在某一段时间内记录的所有的日志 列出备份软件管理的介质信息 列出介质的内容 列出介质上的备份信息,客户端恢复管理,可以通过备份主服务器恢复所有客户端的备份，也可以在客户端恢复备份 可以通过选择备份版本进行恢复 可以选择将备份恢复到原始位置、不同位置或不同客户端 如果恢复位置存在原数据文件，可以设置不恢复、覆盖或恢复到临时位置,使用备份软件进行备份与恢复,使用备份软件进行数据备份的基本步骤： 配置存储介质
19、制定备份策略 对客户端进行必要的配置 手工执行备份策略进行测试 在备份任务管理器中查看备份状态,使用备份软件进行备份与恢复,使用备份软件进行数据恢复的基本步骤： 将存有备份数据的介质放入磁带库中 使用客户端恢复管理选择要恢复的备份数据版本 选择要恢复数据的位置 设置恢复选项 开始恢复备份数据，查看备份任务管理器的恢复状态,如何进行数据恢复,需要数据恢复的情况,所有系统全部损坏 只留有保存 在磁带中的数据,主机完全损坏,设备损坏 数据丢失,人为误操作,停电,数据恢复,重建数据系统硬件结构,恢复备份系统,恢复操作系统,恢复应用软件,恢复数据,系统结构恢复,数据系统硬件恢复 尽量选用与原系统一致的硬
20、件配置，如果不一致可能会在系统恢复时无法使用 参照备份报告，恢复系统的网络结构,备份系统恢复,安装操作系统,重新安装备份服务器,恢复备份软件日志,安装备份软件,使用备份下来的备份软件日志进行恢复,使用备份服务器重新导入所有备份数据,主机操作系统恢复,方法3,方法1,安装操作系统,方法2,安装备份软件客户端,恢复备份数据,制作恢复盘,使用恢复盘重新安装系统， 自动恢复所有数据,安装网络启动服务器,从网络或磁盘启动临时系统,恢复系统和全部数据,文件恢复,数据恢复的时刻,最后一次全备份或增量备份,恢复选项,恢复选项,恢复到原位置,恢复到其它位置,如果文件存在就覆盖,不覆盖已有文件,恢复到新位置,数据
21、库恢复,恢复前准备,恢复计划,丢失了哪些数据,数据可能恢复到的时刻,数据恢复的时间,可能遇到的问题,需要恢复到的时刻,恢复步骤,发生意外时的处理方法,恢复后的验证,数据恢复应注意的问题,影响恢复时间的因素： 系统重构的时间 是否具有快速恢复的功能 需要恢复的数据的大小 备份的类型 备份的介质 数据库恢复 数据恢复 日志恢复,数据库恢复分类,数据库完全恢复 数据库部分恢复 恢复数据文件 恢复表空间 时间点恢复 综合性恢复 表空间的时间点恢复 ,备份/恢复系统的规划,备份系统的规划 设计适合的备份系统结构 对应用网络的影响 考虑备份窗口是否与实际备份时间匹配 备份介质容量 定制合理的备份策略 保证备份的数据能够充分满足各种情况下数据恢复的需求 使可恢复数据尽量距灾难发生点间隔最小 能够充分满足数据保存时间的要求,备份/恢复系统的规划,恢复系统的规划 估计可容忍的故障恢复时间 估计实际数据恢复所需要的时间 定制恢复计划具有恢复能力的专门恢复人员 有关备份的一切相关资料 备份系统的结构图 备份的执行情况 备份数据与备份介质的详细关系,
