1、企业 数据管理方案林晓明目录 企业 IT环境分析 企业 数据管理方案 方案分析对比 案例介绍 方案总结 CommVault公司及产品介绍企业 IT环境分析企业 IT环境中的主要应用产品设计 /研发CAD 计算机辅助设计 (CAD-Computer Aided Design)CAM 计算机辅助制造（ CAM-Computer Aided Manufacturing)CAE 计算机辅助工程分析系统（ Computer Aided Engineering）CAPP 计算机辅助工艺过程设计（ Computer aided process planning）PDM 产品数据管理 （ Product Da
2、ta Management ）PLM 产品生命周期管理 (Product Lifecycle Management)企业管理ERP 企业资源计划（ Enterprise Resource Planning) CRM 客户关系管理 (Customer Relationship Management)SCM 供应链管理 (Supply Chain Management)协同办公OA 办公自动化 （ Office Automation）Email 电子邮件CAD/CAM/CAPP/CAE/PDM/PLM系统特点 企业创新的基础 这些应用系统中的数据是企业的重要资产。 数据量大 CAD系统产生大量设计
3、数据（ 2维 /3维） CAE系统产生大量工程计算、分析数据 要求长期保留并需要进行历史资料查找 共享 维修服务 数据存储的挑战： 数据库破坏导致 PDM/PLM瘫痪，影响正常设计工作。 设计过程中要保留多版本的设计文件，必须进行长期保留，导致设计文件增长过快，会占用大量存储，严重影响系统性能。 每年都需要高昂的费用来扩展在线存储。 历史和当前文件混杂在一起进行备份，导致备份窗口过长，影响生产，还占用大量的备份介质。台式机工作站文件服务器或 NAS系统数据库服务器CAD/CAM/CAPP/CAE/PDM/PLM系统数据管理最佳实践管理对象 生产数据存放策略 数据访问方式 数据保护策略最佳管理实
4、践今天今天 2年年 10年年 N年年DBFiles在线数据在线数据在线数据在线数据在线归档在线归档同步归档同步归档经常经常访问访问较少访问较少访问偶尔访问偶尔访问离线归档离线归档较少访问较少访问l 每周全备份，每天增量备份，保留 3个月l 每季度末全备份，保留 1年；每年末全备份 ,永久保留，磁带出库存放l 备份数据要进行异地保存，防止灾难l 每月全备份 , 每天增量备份 , 保留 12个月l 每年末全备份，保留 2年l 备份数据要进行异地保存，防止灾难l 数据保留期为 8年l 同步归档一个副本到在线磁带上l 数据保留期为 8年l 每 6个月进行磁带定期校验l 归档数据要进行异地保存，防止灾难
5、l 磁带出库保存，保留至第 N年l 每 6个月进行磁带定期校验在线访问在线访问通过存根透明访问通过存根透明访问内容检索找出磁带，入库后通过存根透明访问数据库服务器文件服务器或NASERP/CRM系统 企业管理的基础 尽量减少系统停顿时间 ERP系统停顿 ,意味着生产也要停顿 数据量大、结构复杂 数据增长很快，而且数据存放在数据库中，很难进行拆分。 保留时间长 数据存储的挑战 : ERP要记录生产过程中的数据，数据增长过快，使系统性能下降，影响生产效率 ERP的历史数据会占用大量存储，每年都需要高昂的费用来扩展在线存储 历史记录和当前记录混杂在一起进行备份，导致备份窗口过长，影响生产， 还占用大
6、量的备份介质 备份数据量过大，导致恢复时间很长，难以保证业务连续性ERP仓库管理采购管理出货管理生管物控业务管理开发管理基本资料会计总帐员工薪金人事管理应收应付生产管理系统管理ERP/CRM系统数据管理最佳实践管理对象 生产数据存放策略 数据访问方式 数据保护策略数据库服务器最佳管理实践今天今天 4年年 10年年 N年年DB在线数据在线数据应用归档应用归档同步归档同步归档经常经常访问访问较少访问较少访问偶尔访问偶尔访问离线归档离线归档较少访问较少访问l 每周全备份 , 每天增量备份 , 保留 3个月l 每季度末全备份 , 保留 1年，每年末全备份 , 保留 4年l 备份数据要进行异地保存，防止
7、灾难l 数据保留期为 6年l 同步归档一个副本到在线磁带上l 数据保留期为 6年l 每 6个月进行磁带定期校验l 归档数据要进行异地保存，防止灾难l 磁带出库保存，保留至第 N年l 每 6个月进行磁带定期校验在线访问应急启动后进行在线访问通过工具访问通过工具访问恢复后通过工具访问DB复制复制 应急应急访问访问 l 工作时间，每 2小时做一个快照保护，保留 7天l 保留 7天数据库在线日志归 档文件OA/邮件系统 企业运营的基础 尽量减少系统停顿时间 OA系统 /邮件系统停顿 ,影响企业运营 一旦停顿 ,CEO及员工马上知道 数据量大 会产生大量的文档和邮件数据 保留时间长 法规遵循 行业规定
8、,企业规定 邮件监控 数据存储的挑战： OA或邮件系统数据库破坏，会导致办公停顿，影响公司业务和信誉 办公数据和邮件数据增长过快，导致办公系统性能下降，影响办公效率 历史数据会占用大量在线存储，每年都需要高昂的费用来扩展在线存储 历史数据和当前数据混杂在一起备份，导致备份窗口过长， 影响办公， 还占用大量的备份介质 备份数据量过大， 导致恢复时间很长，难以保证业务连续性MailboxOAMessagingOA/邮件系统数据管理最佳实践管理对象 生产数据存放策略 数据访问方式 数据保护策略最佳管理实践今天今天 1年年 5年年 N年年DB文件邮 件在线数据在线数据在线数据在线数据在线归档在线归档同
9、步归档同步归档经常经常访问访问较少访问较少访问偶尔访问偶尔访问离线归档离线归档较少访问较少访问l 每月全备份 , 每天增量备份 , 保留 12个月l 备份数据要进行异地保存，防止灾难l 数据保留期为 4年l 同步归档一个副本到在线磁带上l 数据保留期为 4年l 每 6个月进行磁带定期校验l 归档数据要进行异地保存，防止灾难l 磁带出库保存，保留至第 N年l 每 6个月进行磁带定期校验在线访问在线访问通过存根透明访问通过存根透明访问内容检索找出磁带，入库后通过存根透明访问DB复制复制 应急启动后进行在线访问l 每周全备份 , 每天增量备份 , 保留 3个月l 每季度末全备份 , 保留 1年；每年
10、末全备份 , 永久保留 , 磁带出库存放l 备份数据要进行异地保存，防止灾难OA数据库服务器OA文件服务器或 NAS或邮件l 工作时间，每 2小时做一个快照保护，保留 7天l 保留 7天数据库在线日志偶尔访问偶尔访问法规遵从法规遵从 对需要监管的邮箱依法进行监控和保护： l 进出邮件必须保留痕迹l 留痕后邮件内容不得修改，需保留至 N 年l 能方便进行检索内容检索企业数据管理方案企业数据管理需求总结 基本要求 推荐实施 最优方案应用系统 系统特点 管理对象 数据管理需求 数据管理总结数据保护长期保存快速恢复容灾备份检索数据法规遵从CAD/CAMCAPP/CAEPDM/PLM 含 数据库和大量
11、文档 文档 数量巨大 ,常采用 NAS 数据 需长期保留 工作站 文件服务器 数据库 ERP/CRM 海量数据库 RTO要求较高 数据 要长期保留 数据库 文件服务器 OA系统 含有 数据库和文档 RTO要求较高 有些 重要文件分散在台式机上台式机 数据库 文件服务器 邮件系统 数据 增长过快 RTO要求较高 有些 企业有法规遵从要求邮件服务器 其他系统 财务 、 SCM等应用 基本 都是基于数据库的应用 数据库 分公司管理 需要 更多管理人员，管理 困 备份 设备不能共享，没容灾 分公司计算机 数据库全方位管理分公司集中管理文档全方位管理邮件全方位管理灾难备份企业应用一体化数据管理数据库全方
12、位管理CAD/CAE ERP 邮 件OA备份 /恢复 复制 /快照 归档 搜索 资源管理一体化数据管理平台Cloud云存储文档全方位管理邮件全方位管理 灾难备份分公司分公司集中管理总公司数据中心PDM/PLMFilesFiles内容索引生产数据复制 &快照备份 &归档 灾难备份共享文件系统快速恢复保护搜索Files备用 &测试快速恢复恢复数据归档老数据灾难备份常规备份共享文件全方位管理l 能对 CAD、 CAM、 CAPP、 CAE、 PDM、 PLM、 OA等文件服务器进行全方位的文档管理。l 大大提高生产系统性能，并节省在线和备份存储。l 极大提高文档安全。l 有效解决了文件长期保管的难题
13、l 并能给文档建立内容索引，方便检索。l 能更方便进行异机恢复及恢复演练。数据分析MailboxMailbox内容索引生产数据复制 &快照备份 &归档 灾难备份ExchangeLotus等快速恢复保护搜索Mailbox备用 &测试快速恢复恢复数据归档老数据灾难备份常规备份日志 邮 箱归档设备法规归档邮件系统全方位管理l 对邮件系统进行全方位管理： 分秒复制邮箱数据库 小时级副本快照 每天离线备份 按策略归档历史邮件 对指定的邮箱进行法规遵从归档 能对邮件建立内容索引，方便检索l 有效解决了困扰邮件系统管理难题： RPO/RTO、数据安全、空间管理、法规遵从。数据分析DBDB生产数据复制 &快照
14、备份 &归档 灾难备份SQL、 Oracle数据库系统快速恢复保护DB备用 &测试快速恢复恢复备份数据归档历史记 灾难备份常规备份DB归 档内容索引搜索 DB归档数据DB归档数据库全方位管理l 能对 PDM、 ERP、 OA系统中的各种数据库服务器进行全方位管理。l 数据库实时复制能提高RPO/RTO。l 定时快照可防止逻辑错误并确保数据库一致性。l 每天对数据库进行备份，能实现长时间保留多个数据副本。l 能更方便进行异机恢复及恢复演练。数据分析关键数据库应急 系统拓扑架构生产主机应急主机LAN/WAN定时做小时级别快照保护实时复制 . 归档日志 归档日志生产数据库 应急数据库 日常备份数据库
15、初始化时传送初始化时恢复，创建应急库前滚日志l 利用日志复制能对ERP、 OA等关键数据库创建应急解决方案。l 当生产数据库宕机时，能迅速启动应急库，保证业务连续性。l 能有效防止逻辑错误。l 能方便进行容灾演练。DB DB信息搜索与发现管理流程ExchangeDominoOAERPCRMCADCAECAPP工作站台式机管理数据“ 去重 ”存储层归档 /备份(Move/Copy)WEB 搜索接口在线内容索引(Exchange & CIFS)离线内容索引(任何备份 /归档数据）数据分类& 标注eDiscovery 公司 查询用户搜索搜索标注自动标注 数据挖掘异地灾难备份的可选策略LAN/WANL
16、AN/WANLAN/WAN磁带出库管理副本数据复制“ 去重 ” 数据复制连续 /定时数据复制 磁带搬运备份、归档数据 将备份、归档磁带搬运到异地保存。 最传统、有效的方式，管理和恢复比较麻烦，但适合大容量数据传送。 需要磁带出库管理功能。 网络传送备份、归档数据 把备份、归档数据副本通过网络传送到异地的存储设备上。 操作及管理很方便，但对带宽要求较高。 需要数据副本复制功能。 “ 去重 ”+ 网络传送备份、归档数据 把备份、归档数据副本进行 “ 去重 ” 处理后，通过网络传输到异地。 操作及管理方便，对带宽要求较低。 需要复制 “ 除重 ” 数据功能。 连续复制 /定时复制生产数据 把生产系统
17、的变化数据直接复制异地。 采用永久增量方式，对带宽要求较低，但需要占用生产系统的资源。 需要连续数据复制 /定时数据复制功能。分公司数据管理面临的挑战 每个分公司都需要配备备份专业人员 能不能找到那么多个专业人才？管理员培训也是问题。 总公司数据中心无法知道每个分公司数据备份情况 每天打电话 /写邮件给分公司备份管理人员？ 每个分公司需要单独实现备份介质的异地保存 99%没有做异地保存 无法实现整个公司的资源共享 数据交换、设备共享、管理共享 带宽有限 无法传输大量数据独立 备份 独立 备份 独立 备份CommVault集中统一管理方案 所有数据中心共享一套备份系统 带来的好处： 整个系统只需
18、要配备 1-2个备份专业人员 能通过网络进行远程操作 能随时知道每个分公司数据备份 /恢复情况 实时状态、历史数据、发展趋势 轻松实现备份介质的异地保存 总部 数据中心作为分公司的备份中心 充分实现数据中心间资源共享 数据交换；设备共享；管理共享CS总公司数据中心iDa iDa iDa iDaiDa iDa iDa iDaiDa iDa iDa iDaiDa iDa iDa iDaiDa iDa iDa iDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa MAiDa MAiDa分公司分公司数据集中保护实现方法去重台式机 文件服务器 应用服务器连续复制定时复制 定时复制 连续复制
19、WAN定时复制 本地备份WAN去重定时复制 小型分公司 数据分中心去重 SAN集中备份数据中心 统一保管集中监控管理Simpana 软件的体系架构 企业数据管理的统一平台数据库全方位管理CAD/CAE ERP 邮 件OA备份 /恢复 复制 /快照 归档 搜索 资源管理一体化数据管理平台Cloud云存储文档全方位管理邮件全方位管理 灾难备份分公司分公司集中管理总公司数据中心PDM/PLM方案分析对比应用场景 某企业 PLM系统，平均每年产生 500GB文档数据。 数据需要保存 20年，共有 10TB数据。 现在有 3种数据管理方案： 数据全部存放在在线存储，用传统备份软件进行保护。 采用分层存储
20、，用归档和备份软件 分离方式 进行管理 ,2年内的数据存放于在线存储， 3到 20年数据存放在归档磁盘，用备份软件备份归档数据。 采用分层存储，用 SIMPANA一体化软件进行管理， 2年内的数据存放于在线存储， 3到 6年内数据存放在归档磁盘， 6到 20年数据存放在归档磁带。 下面我们来分析三种方案所需要的资源（存储 +备份窗口），假设备份速率为： 200GB/小时。传统备份保护文档策略- 会消耗大量的存储介质和备份窗口 ！周备份 周备份 周备份月备份 月备份 月备份 年备份 年备份 年备份4 x 10T12 x10T 20 x 10T +文档文档1 x 10T今天今天 2年年 20年年在
21、线磁盘近线磁盘备份磁带10TB40TB320TB在线磁盘存放20年 10TB数据近线磁盘存放周备份数据备份磁带存放归档和月 /年备份数据应用场景 ：文档系统共有 10TB数据，数据要求保留20年，采用 D2D2T备份策略来保护文档。全备份窗口约 50小时。在线数据保护归档 和备份分离的保护策略- 会消耗大量的存储介质 ！归档 周备份 周备份 周备份月备份 月备份 月备份 年备份 年备份 年备份全备份 全备份4 x 1T12 x 1T2 x 9T2 0x 1T 文档Object文档归档文档文档1 x 1T1 x 9T今天今天 2年年 20年年在线磁盘近线磁盘备份磁带1TB13TB32TB在线磁盘
22、存放2年 1TB数据近线磁盘存放归档和周备份数据备份磁带存放归档和月 /年备份数据应用场景 ：文档系统共 10TB，数据要求保留 20年，采用归档和备份分离方案进行管理， 2年内的文档存放在在线磁盘上， 2到 20年的数据归档存放在近线磁盘上。全备份窗口约 5 + 45小时。归档数据保护x 10T 在线数据保护CommVault一体化管理 策略- 无缝把归档和备份结合在一起 ,节省介质和时间！归档近线磁盘存放归档和周备份数据在线磁盘存放2年 1TB数据周备份 周备份 周备份月备份 月备份 月备份 年备份 年备份 年备份备份磁带存放归档和月 /年备份数据4 x 1T12 x 1T 2 0x 1T
23、 文档归档文档文档1 x 1T1 x 2T归档应用场景 ：文档系统共 10TB，数据要求保留 20年，采用 CommVault一体化方案进行管理， 2年内的文档存放在在线磁盘上， 2到 6年数据归档放在磁盘上， 2到 20年的数据同步归档存放在磁带上。全备份窗口约 5小时。归档数据保护由同步归档实现今天今天 2年年 20年年在线磁盘近线磁盘备份磁带1TB6TB32TB6年年1 x 10T归档2 x 9T在线数据保护同步归档分层存储三种管理策略占用资源分析对比 CV方案与传统备份方案相比： 在线存储只需 10%，近线存储只需 15%，磁带只需 10%，备份窗口只需 10% CV方案与其他归档 +
24、备份分离方案相比： 近线存储只需 46%，备份窗口只需 10% 当磁盘归档数据破坏后， CV能直接从磁带中回调数据，而其他归档方案需要 50多小时从磁带中恢复归档数据，才能进行回调。比较分析 传统备份方案 其他归档 +备份方案 CV一体化管理方案在线磁盘 10TB 1TB 1TB近线磁盘 40TB 13TB 6TB备份磁带 320TB 32TB 32TB全备份窗口 50H 5H + 45H 5H文件年龄存储年龄保留期 =4年 (第 3年到第 6年 )同步归档LTO 磁带库l 初始归档可根据量大小，适当运行多个作业 l 通常的归档作业仅对满足年龄的增量项目进行归档客户端：数据分类 ，收集归档数据存储策略客户端CommVault同步归档原理磁盘库文件服务器NAS邮件服务器保留期 =18年 (第 3年到第 20年)
