大数据平台规划方案 大数据云平台规划设计方案

大数据云平台规划设计方案V3.0

XXX大数据云平台

建 设 方 案

1

大数据云平台规划设计方案V3.0

目录

第一章 现状与需求分析 ............................................................................................ 16

1.1 总体现状分析 ........................................................................................................ 16

1.1.1 信息化现状 .................................................................................................. 16

1.1.1.1 基础设施建设 .................................................................................................... 16 1.1.1.2 应用系统建设 .................................................................................................... 18 1.1.1.3 数据资源建设 .................................................................................................... 22 1.1.1.4 安全体系建设 .................................................................................................... 23

1.1.2 关键问题分析 ............................................................................................... 24

1.2 业务需求理解 ........................................................................................................ 26

1.2.1 开放的XXX云数据平台 ................................................................................ 26 1.2.2 数据采集与拓展 ........................................................................................... 27 1.2.3 创新应用开发 ............................................................................................... 28

1.3 基础平台建设需求 ................................................................................................. 29

第二章 总体架构设计 ................................................................................................... 32

2.1 总体架构 ............................................................................................................... 32 2.2 数据架构视图 ........................................................................................................ 33 2.3 创新的业务模式 .................................................................................................... 33

第三章 基础资源平台设计 ............................................................................................ 34

3.1 网络设计 ............................................................................................................... 34

3.1.1 系统现状 ...................................................................................................... 34

2

大数据云平台规划设计方案V3.0

3.1.1.1 网络结构现状 .................................................................................................... 34 3.1.1.2 系统资源现状 .................................................................................................... 34 3.1.1.3 网络带宽现状 .................................................................................................... 36 3.1.1.4 路由协议现状 .................................................................................................... 36

3.1.2 需求分析 ...................................................................................................... 36

3.1.2.1 网络结构需求 .................................................................................................... 36 3.1.2.2 网络分区需求 .................................................................................................... 37 3.1.2.3 网络带宽需求 .................................................................................................... 37 3.1.2.4 网络高性能需求 ................................................................................................. 39 3.1.2.5 网络负载均衡需求 ............................................................................................. 40

3.1.3 数据中心网络系统设计 ................................................................................ 40

3.1.3.1 系统设计原则 .................................................................................................... 40 3.1.3.2 网络结构规划 .................................................................................................... 42 3.1.3.2.1 网络层次规划 ........................................................................................... 42 3.1.3.2.2 网络分区规划 ........................................................................................... 44 3.1.3.3 网络总体结构设计 ............................................................................................. 47 3.1.3.4 数据中心核心层设计 .......................................................................................... 48 3.1.3.5 数据中心接入层设计 .......................................................................................... 53 3.1.3.6 lP地址规划 ....................................................................................................... 57 3.1.3.7 数据中心路由设计 ............................................................................................. 59 3.1.3.7.1 路由协议选择 ........................................................................................... 59 3.1.3.7.2 数据中心内部路由设计 ............................................................................. 60

3

大数据云平台规划设计方案V3.0

3.1.3.7.3 数据中心与外部网络路由设计 .................................................................. 61 3.1.3.8 负载均衡系统设计 ............................................................................................. 62 3.1.3.8.1 全局负载均衡系统设计 ............................................................................. 62 3.1.3.8.2 应用负载均衡系统设计 ............................................................................. 64 3.1.3.9 可靠性设计 ........................................................................................................ 64 3.1.3.9.1 网络总体结构可靠性设计 ......................................................................... 65 3.1.3.9.2 数据中心设备冗余设计 ............................................................................. 66 3.1.3.9.3 链路冗余设计 ........................................................................................... 67 3.1.3.10 带外管理网络设计 ........................................................................................... 69 3.1.3.10.1 带外管理简介 ......................................................................................... 69 3.1.3.10.2 带外管理的必要性 .................................................................................. 70 3.1.3.10.3 数据中心带外管理网络设计 .................................................................... 70 3.1.3.11 NTP（网络时间同步）系统设计 ........................................................................ 70 3.1.3.11.1 NTP概述 ................................................................................................. 71 3.1.3.11.2 NTP的工作原理 ....................................................................................... 71 3.1.3.11.3 NTP系统设计 .......................................................................................... 72

3.1.4 同城DWDM系统设计 ...................................................................................... 73

3.1.4.1 传输网的需求 .................................................................................................... 73 3.1.4.2 传输技术的选择 ................................................................................................. 74 3.1.4.3 同城数据中心DWDM传输网络设计 ...................................................................... 75 3.1.4.4 可靠性设计 ........................................................................................................ 77

3.2 XXX云大数据平台基础设施建设需求分析 ............................................................. 77

4

大数据云平台规划设计方案V3.0

3.2.1 建设需求分析 ............................................................................................... 77

3.2.1.1 系统现状 ........................................................................................................... 77 3.2.1.1.1 关键业务系统 ........................................................................................... 77 3.2.1.1.2 数据系统 .................................................................................................. 78 3.2.1.1.3 备份系统 .................................................................................................. 78 3.2.1.2 容灾建设考虑因素 ............................................................................................. 79

3.2.2 XXX云大数据平台基础设施建设技术方案建议 ............................................. 82

3.2.2.1 总体架构平台概述 ............................................................................................. 82 3.2.2.2 XXX云计算平台设计 .......................................................................................... 83 3.2.2.2.1 XXX云平台基础架构 ................................................................................. 83 3.2.2.2.2 XXX云计算管理平台 ................................................................................. 84 3.2.2.2.3 XXX云计算安全 ........................................................................................ 89 3.2.2.3 计算资源池建设方案建议 .................................................................................. 90 3.2.2.3.1 主机资源池建设 ........................................................................................ 91 3.2.2.3.2 虚拟化资源池建设 .................................................................................... 92 3.2.2.3.3 数据库平台建设 ........................................................................................ 94 3.2.2.3.4 资源管理平台 ........................................................................................... 95 3.2.2.4 存储资源池建设方案建议 .................................................................................. 95 3.2.2.4.1 存储资源池建设原则 ................................................................................ 95 3.2.2.4.2 存储数据类型 ........................................................................................... 96 3.2.2.4.3 数据存储模式 ........................................................................................... 99 3.2.2.4.4 存储资源池建设方案 ................................................................................ 99

5