1、中国 联通 MDC微模块和 贵 安云数据基地实践 中国联合网络通信集团公司 联通云 数据 有限公司 2016年 3月 第一部分 联通构建新一代云数据中心优势 新一代云 数据中心主要特征 向云演进 高密度 模块化 SDN 智慧设计 绿色节能 增值 产品 服务体系 数据应用 日志分析类 性能监控类 数据备份类 行为分析类 网络与信息安全 流量清洗类 综合防护类 数据安全 类 应用安全类 安全管理类 监控与性能优化 网络监控类 流量经营类 网络加速类 负载均衡类 系统维护服务 代维类服务 域名类服务 邮箱类服务 报告类服务 四大类: 网络与信息安全、数据应用、监控与性能优化、系统维护服务 综合防护
2、防火墙 IPS IDS 漏洞扫描 性能监控 主机监控 数据库监控 存储监控 中间件监控 网络监控 流量流向分析 网络性能监控 网络优化 代维服务 代维、代管 设备巡检调优 集中监控代理 KVM服务 构建 IDC安全服务体系 S12500 Internet MPLS Backbone 扩展 IDC区域 集中运营平台 控制网络 存储网络 视频业务区 系统区 业务伙伴区 网络连接区 业务接入区 后端管理区 维护管理区 IPTV system Parlay Gateway CP server 基本业务平台 增值业务平台 VIPDC平台 VPN业务平台 AV NMS VPN接入 远程接入 存储区域 客户
3、工作区 系统监控区 计费 DCN接口 网管 DCN接口 容灾接口 认证接口 S12500 域间隔离技术:认证、基于角色的访问控制、 ACL、 VLAN、 MPLS、 VSAN. 域间保护技术: FW、 IDS/IPS、 Anti-Virus、 URL Filter、 SSL、 IPSec. 双路市电接入,机房供电密度平均 超过6KW/R, 在中国数据中心领域名列前茅 符合美国 TIA-942-Tier3+标准, 符合中国国家 A类标准 绿色建筑理念,新建数据中心符合国际节能建筑标准 中国联通新一代 数据中心 电力 可靠 可持续性 建设优势 -国际高 标准设计 以客户需求为导向,以国家发展云计算
4、等高科技信息产业为依托,以地方政府在土地、电价、税收、交通等政策支持为契机,加大投资力度、整合优质资源,规划全国基地数据中心的布局建设 设计标准化 功能模块化 运营集约化 建设规范化 基础 设施资源以面向云能力提供为核心,具备高利用率、智能化、绿色节能特征,为数据信息存储提供安全可靠的保障 采用国际领先的规划、设计理念,以高标准、高起点、多层级的建设模式,创建集约化 、多元化、专业化、模块化的 大型数据中心 机房优势 -模块化机房布局 采用微模块整机柜的交付模式 ,可根据客户定制化需求实现灵活的扩展 ; 采用下送风、 上回风方案优化机房气流 ;机房 机柜采用“面对面、背靠背”摆放方式,两侧安装
5、封闭门,封闭整个冷却区域 ; 密封地板,确保冷、热气流完全隔离,把冷风直接送入机柜 ;精确 送风,送风口采用格栅设计,动态调节每个机柜的送风量 ; 铺设专用保温隔热地板,提高冷风效率 . 供配电优势 -高可靠电力保障 可靠双路供电:双 路 10KV市电引入 、 24台 10KV高压油机并机运行 变电站 A 变电站 B 负载 B路 15分钟 后备电池 双母线系统 2N变压器配置 自启动并机 储油 8小时 负载 A路 15分钟 后备电池 变频 UPS 艾默生变频 UPS 原装进口柴油发电机,支持满载运行 8小时,同时与临近的中石油签署供油协议 制冷暖通优势 -高效制冷系统 高效冷水机组: 机房楼设
6、有 2个冷冻站,采用水冷 +末端双冷源空调系统 +自由冷却 系统; 水冷机组采用国际知名品牌, 机房末端 空调配置 纯进口的 EC风机; 整体 PUE值控制在 1.5以下; 高效冷水机组 空调末端 冷却塔 网络优势 -高速光互联 高速互联: 基地间建立 IDC高速互联平面 直连骨干: 多出口优化,直连 169骨干网核心,高网络层次 呼和浩特 I D C I D C I D C I D CDC 互联平面I D CDC 互联 PE DC 互联 PE DC 互联 PE DC 互联 PE DC 互联 PE智能控制: 在基地内及基地间部署 SDN智能调度网络 廊坊 贵安 联通 China169 骨干网
7、基地 直连 China169骨干核心网 ,推动基地区域辐射周边省及热点城市,最大程度最优覆盖用户 群 依托 联通骨干传输系统, 建立基地间高速大带宽互联平面。采用成本较低的二层组网为客户 提供 IDC互联带宽,做到流向 可控 实现 IDC内及 IDC间的用户 流量按需调度 。 通过 SDN控制器集中选路,优化选择出口流量,提升链路资源利用率 ,实现 SLA服务品质要求 节能 优化制冷方式 利用自然冷源 高效空调设备 优化气流组织 EC风机、高效冷水机组、变频技术 节能优势 -绿色领先技术 第二部分 中国联通仓储式(微模块)技术 微模块,新一代数据中心的基石 智能管理系统 综合管理系统 智能 控
8、制器 Busway Busway DC1 DC2 DC3 DC控制器 微模块 微模块 :以机柜为载体,包含供 配电 模块 、 制冷模块 、 网络、布线、消防 (可选 )等 硬件 单元和智能管理单元 ,具有标准化管路、电路、管理接口的 智能化 、预制化、 一体化产品 IT设备 智能防护 智能配电 智能制冷 仓储式微模块介绍 安全可靠 模块整体结构达到 IP44防护等级,具有保温、防尘、防水、 防冲击设计。 微模块同时密闭冷热通道,行级空调制冷,实现冷热气流与机房环境隔离; 满足 Tier 等级,并能平滑升级到 Tier 。 每个模块是独立消防分区。 绿色节能 仓储微模块采用同时密闭冷热通道的创新
9、设计,缩短制冷路径和 减少冷量损耗,从而提升了制冷效率。 结合自然冷却技术, PUE可低至 1.35。 1200 A A W B 600 500 H 仓储式模块外形尺寸 模块尺寸( mm) 宽度 W4200 高度 H3600 机柜尺寸( mm) 深度 A1200 高度 B2500 底座 :600mm 顶部防护罩 :500mm 快速部署:工厂预制,现场拼装,缩短安装周期 50% 架构:硬件组合、部件拼装 调试简单、一人多能 HVDC 电池组 配电柜 PDU 密封通道 本地管理 一人多能: 微模块运维 =电气 +暖通 +结构 +管理系统综合运维 行级空调 机柜 漏水检测绳 电气 暖通 管理系统 结
10、构 微模块承载规模: 1108台机柜 仓储式微模块设计 仓储式微模块适应环境温度: 10 35 ;同时密封冷热通道结构,模块 整体采用保温、防水、防尘、 防冲击设计 仓储式微模块集成的组件除行级制冷模块部件外,还包括:顶部防护罩组件,密封热通道组件,底座组件; 标准配置:通道消防、通道照明等 通道 消防 通道级 消防 无管网气体灭火系统 独立的火灾报警控制系统,可与模块外的消防报警系统分别管理 通道级照明采用 LED灯,每两个 600mm 宽的机柜使用一个 LED灯, 在通道的 两侧顶部安 装 人来灯亮,人走等灭,实现智能照明 通道 照明 底座组件支撑模块,宽度分800mm、 600mm、 3
11、00mm三种规格,单个承重 1500kG 底座组件构成模块完整六面体的底面,同时配置接水装置,避免冷冻水、冷凝水溢流。 底座 组件 在模块顶部,对模块起防尘、防水、密封、保温作用 顶部设置大窗口透明视窗,提高微模块通道内日光利用率 顶部 防护罩 热通道组件 模块化设计同时密封冷热通道结构,冷热空气 循环完全在模块内完成; 热通道组件对模块具有防尘、防水、密封、保温作用,避免模块内空气冷量损失和空气污染 集中式微模块( 5KW 10套、 8KW 6套) IT微模块,长 8.4m,宽 4.2米 ; IT微模块的功率密度为 5kW/柜 ; 机柜部署 21台 ; 配电为 Tier 3级配置,一路 UP
12、S,一路市电 ; 冷冻水行级空调(制冷量 30KW) 6台, 为 N+2配置; IT机柜 消防柜 密闭热通道 8.4m 4.2m消防柜 /管控柜 精密配电柜 冷冻水 行级空调 带加湿器 行级空调 IT机柜 消防柜 密闭热通道 8.4m 4.2m 消防柜 /管控柜 精密配电柜 冷冻水 行级空调 带加湿器 行级空调 IT微模块,长 8.4m,宽 4.2米 ; IT微模块的功率密度为 8kW/柜 ; 机柜部署 20台 ; 配电为 Tier 3级配置,一路 UPS,一路市电 ; 冷冻水行级 空调(制冷量 30KW) 8台, 为 N+2配置 ; 分布式微模块( 5KW 30套、 8KW 14套) IT机
13、柜 电池 柜 带加湿器 行级空调 消防柜 密闭热通道 8.4m 4.2m 消防柜 /管控柜 精密配电柜 冷冻水 行级空调 UPS IT机柜 电池柜 带加湿器 行级空调 消防柜 密闭热通道 8.4m 4.2m消防柜 /管控柜 精密配电柜 冷冻水 行级空调 UPS IT微模块,长 8.4m,宽 4.2米 ; IT微模块的功率密度为 5kW/柜 ; 机柜部署 18台 ; 配电为 Tier 3级配置,一路 UPS,一路市电 ; 冷冻水行级 空调(制冷量 30KW) 6台, 为 N+2配置 ; 160KVA UPS和 15分钟后备电池。 IT微模块,长 8.4m,宽 4.2米 ; IT微模块的功率密度为
14、 8kW/柜 ; 机柜部署 17台 ; 配电为 Tier 3级配置,一路 UPS,一路市电 ; 冷冻水行级 空调(制冷量 30KW) 6台,为 N+2配置 ; 200KVA UPS和 15分钟后备电池。 配电系统 10kV市电 1# 发电机组 10kV市电 2# 10kV配电 变压器 A 低压总配电 变压器 B 母线 A 母线 B 10kV市电 1# 发电机组 10kV市电 2# 10kV配电 变压器 A 低压总配电 UPS输入 A路 UPS UPS输出 PDU-A IT机柜 变压器 B B路 PDU-B 密集母线 分布式电源 & 集中式电源 空调管路 管路 系 统 供回水 方 案 微模块设计
15、 有独立的 冷冻水管路系统,为微模块行级空调提供 与主管路接口功能。 主要特点: 微模块管 路系统双环路设计(如下图),可接入主管路双路 冷 冻 水 供回 水 。支持 单段管路和空调的在线维护 ; 支持微模块外接 环路供回水( Tier ) 设 计方 案; 管路系统不占用微模块机柜位,平面利用率高; 冷凝水排水管 加湿水管 冷冻水供水环路 冷冻水回水管环路 截止阀门 微模块供回水环路设计示意图 空调供回水软管 加湿空调 冷冻水供水主管 冷冻水回水主管 行级空调 截止阀门 微模块底座 A 路回水管 A 路供水管 B 路回水管 B路供水管 管理系统 微模块管理系统实现对动力系统 、 环境系统 、
16、安防系统的集中监控和统一管理 , 采用柔性拓展的物理架构和模块化设计的思路 , 既能对单个 微模块 基础设施进行管理 , 也能对 分布在不同区域的微模块群 基础设施进行集中统一管理 。 模块 2 模块 n TCP/IP 模块 1 微模块群管理系统架构 单个微模块管理系统架构 消防系统 独立的 通道级 消防系统,每个 微模块作为独立消防 分区。 可实现自动 /手动控制和门禁消防联动。 灭火系统可以选择 FM200或 IG541气体灭火系统,也可以选用高压细水雾灭火系统。 可以选配 VESDA极早期探测报警。 灭火 联动 排烟 门禁与消防联动 读卡器 消防控制柜 排烟管路对外接口 尺寸 320mm
17、*250mm 消防控制柜 管控柜 模块侧面设置有排烟柜和排烟口,灭火后启动风机排出灭火气体。 毛细管采样(热通道) 探测 对高标准机房,设置极早期烟雾探测,可实现火灾的早期预警,降低火灾损失。 FM200无网管 FM200是国内最常用的灭火系统 第三部分 中国联通贵安云数据中心简介 贵安数据中心建设规划 01 06 02 03 04 05 征地面积 建筑面积 办公区域 机房配置 建造认证 项目配置 已 征地 面积 约 188亩。 每层均配有 VIP操作间 IDC机房楼共 4层,建 筑面积约 15830平方米; 数据厂房建筑面积约 7350平方米。 国内创新的 数据中心建设 方案 本项目 按照
18、TIA-942-Tier3+标准, 部分满足 T4 总建设规模:用地面积 600亩,数据中心总机架数 32000架。 贵安数据中心建设 规模 中 国 联 通 ( 贵安 ) 云计算 基 地 位 于 贵 州 省 贵 安新 区 电 子 信 息 产 业 园 内 ,规 划 总 建 设 规 模 : 用 地面积约 600亩 , 建筑总规 模 约 为 20万 平 米 , 包括 机 房 楼 、 动 力 楼 、 数据厂房 、 运维楼 、 库房 、变 电 站 等 共 计 19栋 单 体建筑 , 项目总投资约 50亿 。 贵 安 新 区 位 于 全 国 “ 两横三纵 ” 城 市 化 战 略 格局 包 昆 通 道 纵
19、轴 南 部 ,三 小 时 通 达 贵 州 周 边 省会 , 六 小 时 抵 达 出 海 港口 ; 东 西 两 侧 分 别 有 龙洞 堡 国 际 机 场 和 黄 果 树支 线 机 场 , 使 贵 安 新 区成 为 连 接 东 南 亚 、 南亚和 长 三 角 、 京 津 冀 之 间的重要航空枢纽 。 贵安数据 中心基础设施介绍 独立 两路 一类市电引入 110KV专用变电站,两台变压器 1+1主备运行 2N高低压配电系统,双路市电自动切换 油机 N+1备用供电 双路 UPS采用 2N方式冗余 ,后备电池可 满载 支撑 30分钟 所有机柜提供 双路 UPS供电 数据厂房微模块采用 工艺性空调 管理室、东环监控室等房间采用 舒适性空调 机房采用 水冷 式集中空调系统,供回水温度 10 /15 冷水机组采用 N+1冗余配置 机房内空调末端采用 N+1冗余配置 贵安数据 中心网络能力介绍(一期) 贵安基地出口组织直连广州骨干路由器 C核心,低时延高质量 部署 2间物理核心机房,一期分别在每间核心机房新增 1台高端路由器及 1台核心交换机,共新增 2台高端路由器及 2台核心交换机,全部采用百 G链路互联,高性能高冗余度 至 2017年基地出口将扩容至1000G出口高性能骨干带宽 互联网 +云生态圈