重庆银行双活核心建设实践.doc

1、1重庆银行“双活”核心建设实践同城双活秒级切换22018 年 9 月 23 号 ， 凝 聚 着 重 庆 银 行 人 心 血 的 新 一 代 核 心 业 务 系 统 与 应 用 级 双 活 数 据 中 心 成 功上 线 。 本 次 应 用 级 双 活 数 据 中 心 与 新 一 代 核 心 业 务 系 统 的 顺 利 上 线 ， 实 现 了 重 庆 银 行 数 据 中 心 架构 与 业 务 系 统 的 整 体 重 构 ， 带 来 了 重 庆 银 行 业 务 与 技 术 的 全 面 转 型 ， 开 启 了 重 庆 银 行 科 技 赋 能 业务 发 展 的 新 篇 章 。 在 新 一 代 核 心 系

2、 统 的 建 设 部 署 过 程 中 ， 使 用 多 层 业 务 调 度 框 架 （ DLLB） 构架 应 用 双 活 体 系 ， 实 现 核 心 系 统 双 活 部 署 运 行 ， 并 成 功 实 现 秒 级 应 用 灾 备 切 换 。启 用 “新 核 心 ”打 造 金 融 科 技 新 优 势重 庆 银 行 老 核 心 系 统 于 2004 年 建 设 上 线 ， 对 业 务 经 营 和 发 展 产 生 了 强 有 力 的 支 撑 作 用 。 近 年 来 ，国 内 外 金 融 环 境 复 杂 多 变 ， 金 融 监 管 要 求 日 趋 严 格 ， 客 户 需 求 日 益 多 样 化 ， 跨

3、界 及 同 业 竞 争 加 剧 ，金 融 科 技 迅 猛 发 展 ， 互 联 网 金 融 浪 潮 兴 起 ， 商 业 银 行 间 的 竞 争 已 趋 白 热 化 。 老 核 心 系 统 逐 渐 显 现出 客 户 支 持 能 力 不 足 、 业 务 处 理 效 率 偏 低 、 产 品 创 新 速 度 较 慢 以 及 跨 渠 道 服 务 能 力 较 弱 等 问 题 ，亟 待 更 新 升 级 以 适 应 外 部 形 势 变 化 的 要 求 。正 是 在 这 样 的 大 背 景 下 ， 2017 年 6 月 2 日 ， 重 庆 银 行 启 动 了 新 一 代 核 心 系 统 建 设 项 目 ， 行 领

4、导 亲 自 挂 帅 管 理 ， 科 技 部 和 运 营 管 理 部 双 牵 头 实 施 ， 总 行 各 业 务 部 门 、 各 分 支 机 构 积 极 参 与 配 合 。这 是 重 庆 银 行 领 导 层 为 加 大 改 革 创 新 力 度 而 采 取 的 重 大 战 略 决 断 ， 是 一 项 涵 盖 业 务 转 型 、 技 术 转型 和 实 施 转 型 在 内 、 事 关 重 庆 银 行 全 局 的 企 业 级 系 统 工 程 。重 庆 银 行 新 一 代 核 心 系 统 涉 及 行 内 50 多 个 渠 道 及 业 务 系 统 、 20 多 个 管 理 类 系 统 的 配 合 改 造 ，

5、在 吸 收 了 老 核 心 系 统 优 点 的 基 础 上 ， 兼 顾 了 监 管 、 市 场 、 业 务 的 诉 求 ， 功 能 更 全 面 、 技 术 更 先 进 、理 念 更 领 先 、 可 扩 展 性 好 。 重 点 突 出 了 “以 客 户 为 中 心 、 以 市 场 为 导 向 ”的 战 略 理 念 ， 实 现 了3更 加 优 质 智 能 的 客 户 服 务 、 更 加 全 面 精 准 的 业 务 数 据 、 更 加 灵 活 快 速 的 产 品 创 新 、 更 加 便 捷 高 效的 业 务 办 理 效 率 和 多 维 科 学 的 安 全 保 护 体 系 。核 心 业 务 系 统 高

6、 可 用 建 设 目 标核 心 业 务 系 统 一 直 是 银 行 IT 系 统 中 保 障 业 务 连 续 性 要 求 的 重 要 系 统 ， 监 管 提 到 的 “商 业 银 行应 根 据 自 身 业 务 的 性 质 、 规 模 和 复 杂 度 制 订 适 当 的 业 务 连 续 性 规 划 。 以 确 保 在 出 现 无 法 预 见 的 中断 时 ， 系 统 仍 能 持 续 运 行 并 提 供 服 务 ， 并 通 过 采 取 相 应 技 术 措 施 降 低 业 务 中 断 的 可 能 性 和 影 响 ”， 也 是 对 核 心 业 务 系 统 的 安 全 稳 定 高 可 用 架 构 的 监

7、 管 要 求 。正 是 基 于 业 务 连 续 性 以 及 资 源 利 用 率 考 虑 ， 重 庆 银 行 在 新 一 代 核 心 业 务 系 统 建 设 中 选 择 以 “同城 应 用 级 双 活 ”模 式 为 目 标 。 应 用 级 双 活 （ Active-Active） 就 是 在 正 常 情 况 下 ， 应 用 两 个 数 据中 心 都 是 活 动 在 线 并 提 供 服 务 的 ， 是 相 对 于 传 统 应 用 主 备 模 式 （ Active-Standby） 的 一 种 利 用率 、 可 用 性 更 高 的 建 设 形 式 。应 用 级 双 活 模 式 ， 既 两 个 数 据

8、 中 心 所 部 署 的 核 心 业 务 系 统 是 对 等 、 不 分 主 从 、 并 同 时 提 供 对 外 服务 的 ： 在 一 个 数 据 中 心 发 生 故 障 或 灾 难 的 情 况 下 ， 同 城 数 据 中 心 仍 然 可 以 正 常 运 行 并 对 关 键 业 务或 全 部 业 务 实 现 接 管 ， 达 到 互 为 备 份 的 效 果 。 正 常 模 式 下 两 个 数 据 中 心 的 核 心 业 务 系 统 之 间 协同 工 作 ， 并 行 对 外 提 供 服 务 ， 实 现 了 对 IT 资 源 的 充 分 利 用 ， 避 免 某 个 备 份 中 心 处 于 闲 置 状

9、 态 ，造 成 资 源 与 投 资 浪 费 。 因 此 应 用 级 双 活 数 据 中 心 的 服 务 能 力 往 往 双 倍 甚 至 数 倍 于 主 备 数 据 中 心 模式 。核 心 系 统 的 同 城 双 活 建 设 部 署4在 核 心 业 务 系 统 “应 用 级 双 活 ”部 署 阶 段 ， 重 庆 银 行 综 合 考 虑 了 本 行 数 据 中 心 机 房 基 础 环 境 、 网络 、 系 统 的 特 点 以 及 第 一 批 次 中 51 套 业 务 系 统 的 相 关 特 性 ， 综 合 新 一 代 核 心 业 务 系 统 建 设 目 标和 项 目 要 求 ， 最 终 在 跨 数

10、 据 中 心 “OSPF 动 态 路 由 +RHI 健 康 路 由 注 入 ”基 础 上 ， 设 计 了 独 特的 DLLB（ 多 层 业 务 调 度 ） 框 架 ， 并 率 先 在 国 内 城 商 行 范 围 内 使 用 了 纯 IP 访 问 、 动 态 分 配 负 载方 式 的 应 用 级 双 活 建 设 部 署 方 案 。 DLLB 多 层 业 务 调 度 框 架 如 下 图 所 示 。图 DLLB 多 层 业 务 调 度 框 架DLLB 多 层 业 务 调 度 框 架 ， 就 是 在 同 城 两 个 数 据 中 心 的 核 心 网 络 层 部 署 专 用 的 全 局 调 度 负 载 均

11、 衡设 备 来 专 门 处 理 跨 数 据 中 心 的 交 易 数 据 调 度 ； 在 每 个 数 据 中 心 内 的 各 业 务 生 产 区 域 ， 同 样 部 署 了区 域 负 载 均 衡 设 备 ， 用 于 对 集 群 应 用 服 务 的 负 载 均 衡 交 付 服 务 。5全 局 调 度 负 载 均 衡 设 备 和 区 域 负 载 均 衡 设 备 通 过 完 善 的 健 康 检 查 机 制 与 负 载 分 配 机 制 协 调 工 作 ：当 部 分 应 用 节 点 发 生 异 常 时 ， 区 域 负 载 均 衡 设 备 能 够 自 动 隔 离 故 障 节 点 ， 保 障 区 域 内 业

12、务 系 统 运行 的 高 可 用 性 和 稳 定 性 ； 全 局 负 载 均 衡 设 备 将 两 个 数 据 中 心 结 合 为 一 个 有 机 整 体 ， 实 现 双 中 心 同时 承 载 业 务 ， 并 作 为 另 一 个 数 据 中 心 的 灾 备 支 持 。通 过 DLLB 多 层 业 务 调 度 框 架 ， 实 现 了 每 个 服 务 器 节 点 安 全 独 立 运 行 ， 互 不 影 响 ， 同 时 实 现 节 点的 热 插 拔 功 能 ， 方 便 系 统 维 护 调 整 。 当 某 个 数 据 中 心 出 现 整 体 故 障 时 ， 只 需 秒 级 即 可 由 同 城 数 据中

13、心 完 成 整 体 业 务 接 管 ； 这 种 多 层 业 务 调 度 框 架 分 别 从 跨 中 心 的 全 局 应 用 高 可 用 层 面 和 数 据 中 心内 部 的 本 地 应 用 高 可 用 层 面 ， 为 新 一 代 核 心 业 务 系 统 的 应 用 双 活 创 造 了 实 施 条 件 。综 合 来 看 ， 重 庆 银 行 新 一 代 核 心 业 务 系 统 的 DLLB 多 层 业 务 调 度 框 架 具 有 如 下 优 点 ： 同 城 双 数据 中 心 采 用 三 层 网 络 互 联 ， 区 域 隔 离 ， 保 障 了 每 个 数 据 中 心 及 其 功 能 区 域 的 隔

14、离 ， 具 有 良 好 的 安全 特 性 ； 借 助 于 “OSPF 动 态 路 由 +RHI 健 康 路 由 注 入 ”技 术 ， 实 现 了 跨 中 心 负 载 均 衡 设 备 同 步协 调 的 高 可 用 运 行 ， 技 术 框 架 稳 定 可 靠 ； 基 于 纯 IP 负 载 分 配 方 案 ， 能 够 有 效 减 少 核 心 业 务 系 统开 发 阶 段 的 相 关 改 造 工 作 量 、 优 化 项 目 实 施 进 度 ， 降 低 核 心 业 务 系 统 开 发 难 度 ； 基 于 纯 IP 流量 分 配 引 导 方 案 ， 相 较 于 基 于 域 名 的 流 量 分 配 引 导

15、方 式 ， 在 故 障 切 换 过 程 中 更 加 迅 速 ， 可 以 将 应急 切 换 周 期 从 分 钟 级 下 降 至 秒 级 。2018 年 8 月 17 日 投 产 演 练 阶 段 ， 重 庆 银 行 新 一 代 核 心 业 务 系 统 完 成 生 产 双 活 部 署 。 8 月 17日 至 9 月 12 日 ， 对 新 一 代 核 心 双 活 运 行 模 式 和 应 急 切 换 方 案 进 行 了 最 终 测 试 。 9 月 23 日 16时 16 分 ， 新 一 代 核 心 业 务 系 统 在 双 中 心 同 时 上 线 ， 同 时 提 供 交 易 服 务 。6结 语 ： 核 心

16、 同 城 双 活 的 效 果新 一 代 核 心 业 务 系 统 上 线 后 ， 通 过 收 集 负 载 均 衡 设 备 的 运 行 日 志 进 行 分 析 发 现 ， 在 现 有 分 配 参 数下 ， 主 数 据 中 心 承 载 了 51%55%的 核 心 交 易 ， 同 城 双 活 数 据 中 心 承 载 了 49%45%的 核 心 业务 交 易 ， 实 现 了 核 心 业 务 应 用 同 时 提 供 服 务 的 “双 活 ”效 果 ， 并 提 升 了 资 源 利 用 效 率 。新 一 代 核 心 业 务 系 统 上 线 投 产 后 ， 重 庆 银 行 在 正 常 生 产 运 行 状 态 下

17、 组 织 了 模 拟 交 易 异 常 的 应 急 切换 演 练 ； 当 一 个 数 据 中 心 的 核 心 系 统 部 分 交 易 运 行 缓 慢 时 ， 为 避 免 出 现 业 务 中 断 ， 保 障 业 务 持 续运 行 ， 按 照 预 案 组 织 紧 急 切 换 ， 迅 速 将 核 心 交 易 业 务 全 部 引 导 至 另 一 个 数 据 中 心 。 整 个 过 程 中 切换 指 令 下 发 时 间 小 于 30 秒 ， 渠 道 类 业 务 切 换 时 间 小 于 10 秒 ， 柜 面 业 务 切 换 时 间 小 于 1 分 钟 ，所 有 业 务 交 易 均 无 明 显 中 断 ， 实 现 了 用 户 无 感 知 的 应 急 切 换 操 作 ， 达 到 了 核 心 “双 活 ”的 设 计目 标 。