云平台建设方案简介

2024年3月28日发(作者：保安条例)

云平台建设方案简介

2015年11月

目 录

1. 云平台总体设计

1.1 总体设计方案

1.1.1 设计原则

1.1.2 支撑平台技术架构设计

1.1.3 支撑平台网络拓扑设计

1.1.4 通过云操作系统实现云计算中心运营管理

1.1.5 层次清晰的云计算中心部署架构设计

1.2 项目技术路线

1.2.1 X86系统架构

1.2.2 资源池化

1.2.3 弹性扩展

1.2.4 智能化云管理

1.2.5 充分考虑利旧

1.3 云项目建设成功案例

1.3.1 中国银联离线交易数据处理云平台

1.3.2 新疆公安云

1.3.3 国家中医药数据中心云平台

云平台总体设计

总体设计方案

设计原则

 先进性

云中心的建设采用业界主流的云计算理念，广泛采用虚拟化、分布式存储、分布式

计算等先进技术与应用模式，并与银行具体业务相结合，确保先进技术与模式应用的有

效与适用。

 可扩展性

云中心的计算、存储、网络等基础资源需要根据业务应用工作负荷的需求进行伸缩。

在系统进行容量扩展时，只需增加相应数量的硬件设备，并在其上部署、配置相应的资

源调度管理软件和业务应用软件，即可实现系统扩展。

 成熟性

云中心建设，要考虑采用成熟各种技术手段，实现各种功能，保证云计算中心的良

好运行，满足业务需要。

 开放性与兼容性

云平台采用开放性架构体系，能够兼容业界通用的设备及主流的操作系统、虚拟化

软件、应用程序，从而使得云平台大大降低开发、运营、维护等成本。

 可靠性

云平台需提供可靠的计算、存储、网络等资源。系统需要在硬件、网络、软件等方

面考虑适当冗余，避免单点故障，保证云平台的可靠运行。

 安全性

云平台根据业务需求与多个网络分别连接，必须防范网络入侵攻击、病毒感染；同

时，云平台资源共享给不同的系统使用，必须保证它们之间不会发生数据泄漏。因此，

云平台应该在各个层面进行完善的安全防护，确保信息的安全和私密性。

 多业务性

云平台在最初的规划设计中，充分考虑了需要支撑多用户、多业务的特征，保证基

础资源在不同的应用和用户间根据需求自动动态调度的同时，使得不同的业务能够彼此

隔离，保证多种业务的同时良好运行。

 自主可控

云平台建设在产品选型中，优先选择自主可控的软硬件产品，一方面保证整个云计

算中心的安全，另一方面也能够促进本地信息化产业链的发展。

支撑平台技术架构设计

图 支撑平台技术架构

支撑平台总体技术架构设计如上，整个架构从下往上包括云计算基础设施层、云计

算平台资源层、云计算业务数据层、云计算管理层和云计算服务层。其中：

 云计算基础设施层：主要包括云计算中心的物理机房环境；

 云计算平台资源层：在云计算中心安全的物理环境基础上，采用虚拟化、分布

式存储等云计算技术，实现服务器、网络、存储的虚拟化，构建计算资源池、

存储资源池和网络资源池，实现基础设施即服务。

 云计算业务数据层：主要为实现业务数据的安全存储，同时针对云平台的各个

虚拟机镜像数据和模板数据进行共享存储，支持虚拟机的动态迁移和数据的迁

移；实现部门间数据共享与交换；实现业务应用接入。

 云计算管理层：通过自主可控的云计算操作系统，实现云计算中心的服务管理

及业务管理的协调统一，提高运维及运营的效率。

 云计算服务层：是云计算中心与最终用于交互的接口和平台，通过该平台能够

实现云计算中心统一对外提供服务，为客户人员提供整体的云应用和服务。支

撑平台通过统一的云服务平台对外提供服务。

支撑平台网络拓扑设计

图 云计算中心拓扑架构图

支撑平台建设基于以物理分区为基本单元的设计理念，整个云计算中心可分为：核

心交换区、管理区、DMZ区、业务应用区以及云存储区。其中：

核心交换区：负责核心网络交换；

管理区：对云计算平台进行整体管理，单独建设一套管理网络；

DMZ区：考虑云计算中心整体安全性，设置专门的DMZ区，承载各业务部门的业

务应用系统的WEB发布，同时支撑云计算中心互联网的接入，该区可采用全虚拟机进

行支撑或者采用虚拟机和物理服务器共同支撑；

业务应用区包括两部分：数据库逻辑分区和应用系统逻辑分区。其中：数据库逻辑

分区用高端八路物理机支撑；应用系统逻辑分区采用虚拟化和物理服务器支撑，根据具

体的业务应用特点决定支撑平台选用虚拟机还是物理服务器。

数据库分区：主要建设支撑各应用系统的结构化数据数据库，考虑到数据库数据量

的庞大和系统对数据的访问I/O吞吐，该区建议采用高端物理机进行支撑；

业务应用逻辑分区：主要根据业务部门的不同业务需求及业务部门对平台安全级别

要求的不同，采用虚拟机和物理服务器共同支撑。

未来，随着云计算中心业务量的增加和复杂度的增加，可以按照相同的架构进行节

点的扩展，达到整个云计算平台的可扩展性和很好的伸缩性。

通过云操作系统实现云计算中心运营管理

图 云计算中心逻辑架构图

整个云计算中心设计采用业务区域的理念。业务区域（即以服务器集群为核心的物

理资源区域，不同的业务区域设备配置可以不同）是系统的基本硬件组成单元，整个系

统共包括若干个业务区域。系统规模的扩大可以通过增加业务区域方式，使得整个系统

具有很好的可扩展性。业务区域的业务网络交换机通过万兆方式上联到核心交换区，通

过核心交换区与其他业务区域和域外系统互联。

在每个业务区域内，通过云资源管理平台的云计算运营中心节点实现在X86业务节

点上部署Hypervisor，并形成一个或多个独立的逻辑资源池，提供给应用使用；通过云

计算虚拟化管理中心在逻辑资源池内可实现资源的共享和动态分配。

每个业务区域包括：云计算虚拟化管理中心节点、业务节点、业务网络、管理网络、

心跳网络、本地镜像存储；业务区域根据各自的业务需要访问FC存储或并行存储等业

务数据存储区域。

云计算平台配置多台云计算服务门户节点，为最终用户的系统管理员提供自助门户

服务。

采用以上设计理念，使得整个系统具有超高的可扩展性，可使整个系统扩展到上千

台物理服务器规模。

层次清晰的云计算中心部署架构设计

图 云计算中心部署架构图

依据云计算中心建设的总体需求，勾画整个项目的部署架构，指导项目整体建设。

云计算中心部署主要包括几个层面：计算资源池的构建、业务数据的分区规划、共

享存储的设计等。从整个部署架构来看：

计算资源池的构建主要采用高端多核心X86服务器作为服务器基础支撑，通过虚拟

化技术实现底层物理资源的虚拟化，通过云资源管理平台进行虚拟机的创建、动态分配、

迁移及管理，形成统一的计算资源池。

考虑到云计算的安全性、可靠性及重要性，在本方案中数据库分区采用物理机支撑，

以够保证整个数据库的稳定、高I/O吞吐和访问，主要通过高端X86高性能服务器通过

集群技术进行部署，支撑相关业务数据的存储和管理。

共享存储设计的存储数据主要包括重要业务数据和虚拟机镜像数据，其中：重要业

务数据主要通过Oracle/DB2/SQL Server/MySQL等数据库进行数据管理，结构化数据存储

利用高端私有云存储设备来支撑，在未来需要对存储容量进行扩展时可方便的横向纵向

扩展；虚拟机镜像数据主要存放在共享存储部分，通过共享存储设备来支撑虚拟机镜像

数据的存放，共享存储建议使用并行存储系统来支撑。

项目技术路线

本项目建设云计算中心的基本技术路线主要包括： X86系统架构、资源池化、弹性

扩展、智能化云管理以及充分考虑利旧。

X86系统架构

基于X86平台的服务器使用Intel Xeon或者AMD Opteron作为处理器，也就是通常

所说的PC服务器。近年来，Intel Xeon和AMD Opteron的性能获得巨大的提高，大量的

先进技术和工艺先后被Intel/AMD引人其处理器的设计和制造中，比如，64位计算、直

连结构、内嵌内存控制器、多核（目前，Intel Xeon最多可以做到10核；AMD Opteron

可以做到16核）、硬件辅助虚拟化技术（Intel VT、AMD-V）、32nm等等。在国际权威

测试机构TPC组织发布的结果中，采用X86架构服务器价格/性能比最佳。

X86服务器主要优势表现在界面友好，系统安装、网络装置、客户机设置简易，设

置、管理系统直观、方便，系统扩展灵活等优点，对构建大型应用集群具有较好的优势。

同时，基于X86架构的服务器因为其开放的架构，开放的生态系统，使其具有较低的运

维成本，这也是传统小型机等封闭系统所不能比拟的。此外，从可靠性的角度，在云计

算环境下，通常大量采用虚拟化、分布式、并行计算等模式，有力的保证了计算系统的

可靠性。

同时，基于X86架构的服务器因为其开放的架构，开放的生态系统，使其具有较低

的运维成本，这也是传统小型机等封闭系统所不能比拟的。此外，从可靠性的角度，在

云计算环境下，通常大量采用虚拟化、分布式、并行计算等模式，有力的保证了计算系

统的可靠性。国内外几大互联网巨头，Google、Amazon、百度、阿里巴巴等，无不大量

采用X86架构的设备，支撑海量的互联网检索和访问。X86架构的服务器已经成为构建

云计算中心虚拟化平台的最佳选择。

X86服务器相对于小型机的优势如下表所示：

表 X86服务器与RISC架构小型机的区别

特性

软件层 操作系统

小型机 X86服务器

Unix为Unix、Linux、windows全部

主 支持

很多

32位、64位全部支持

较低

是

支持应用的数量

操作数大小

可管理性 管理成本

较少

64位

很高

是否支持易购买的否

零部件

故障排除难度 高 低

很多 是否有国产厂商提很少

供

可靠性 是否能够提供冗余 是

高

很高

低

很少

是

高

较低

高

绝大多数

性能价格性能

比和可扩

价格

展性

可扩展性

top500中的数量

总之，X86服务器相对于RISC架构的小型机其优势如下：

 性能价格比高

X86服务器目前已经成为高性能计算机的发展方向，世界上top500排行榜的高性能

计算机系统绝大多数是由性价比更好的X86服务器组成的集群系统，小型机系统则很少。

 可扩展性好

X86服务器可以通过原有预留的扩展接口进行无缝的扩展，且相关扩展接口都是业

界通用的，非专用接口，这是小型机系统所无法做到的。

X86服务器组成的集群系统扩展成本更低，可以实现按需扩展。

 可管理性好

X86服务器复杂度小于小型机，通常管理一个X86服务器组成的集群系统要比管理

一个小型机系统要简单得多，这也同时意味着培养一个小型机的管理人才将耗费大量的

费用和支出。

 维护与升级更容易

X86服务器都是采用了标准的硬件设备，那就意味着这些设备可以轻松地拿到，在

关键时候客户即使没有硬件厂商的提供也可以自行配置出临时的解决办法，使用通用的

X86架构服务器不会轻易受制于服务器制造商；然而，小型机的每个配件都是专用的，

那就意味着用户在一些关键的业务上需要等待小型机厂商的服务响应时间，受制于小型

机设备制造商，将自己的工作带向了被动。

 对应用系统的更多的支持

小型机系统只能支持相对较少的操作系统和64位软件，而X86服务器可以支持大

部分主流操作系统并且可以支持同时存在多种操作系统，也支持32位和64位的软件系

统，在X86服务器上可运行的软件是小型机系统的成百上千倍。

资源池化

资源池化就是将计算资源、存储资源、网络资源通过虚拟化技术，将构成相应资源

的众多物理设备组合成一个整体，形成相应的计算资源池、存储资源池、网络资源池，

提供给上层应用软件。

资源虚拟化是对上层应用屏蔽底层设备或架构的资源封装手段，是实现云计算资源

池化的重要技术基础。

虚拟化技术由来已久，所谓虚拟化是相对于物理实体而言的，即将真实存在的物理

实体，通过切分或（和）聚合的封装手段形成新的表现形态。

聚合封装是将多个物理实体通过技术手段封装为单一虚拟映像/实例，可用于完成

某个业务。例如SMP、计算集群（Cluster）、负载均衡集群（Load Balance）、RAID技

术、虚拟存储、端口汇聚（port trunk）、交换机堆叠（stack）等。

切分封装是将单个物理实体通过技术手段封装为多个虚拟映像/实例，可用于执行

不同业务。例如主机虚拟化、存储分区、虚拟局域网（VLAN）等。其中：

 SMP、计算集群、负载均衡、主机虚拟化等属于计算虚拟化的范畴；

 存储分区、RAID技术、虚拟存储等属于存储虚拟化的范畴；

 虚拟局域网（VLAN）、交换机堆叠、端口汇聚等则属于网络虚拟化的范畴。

对于虚拟化技术也可以组合使用，以灵活地满足各种应用环境。例如：

 存储分区可以是对单个磁盘，也可以是针对RAID磁盘组；

 虚拟化主机通过负载均衡又可以实现应用单一映像。

虚拟化技术的一个重要结果是降低IT架构中部件之间的依赖关系，以计算虚拟化为

例，集群、主机虚拟化等计算虚拟化技术实现了应用软件与物理基础设施解耦合，这个

过程类似与从C/S架构到B/S架构，继而发展为多层体系结构的发展，都是由于原有的

体系发展出现瓶颈或问题而出现的。

C/S架构到B/S架构是通过应用计算与客户端的解耦合，在客户端与数据库之间增

加了web rver这样的中间层，减少了客户端和数据库的处理压力。

图 C/S架构到B/S架构转化图

B/S结构到多层体系结构是通过数据处理与web rver的解耦，在web rver之间

增加application rver，减少了web rver的处理压力。

图 B/S结构到多层体系结构转化图

C/S结构到B/S多层体系结构的发展，优化了应用处理的过程，提高了应用系统的

处理能力，而且也解决了应用系统的扩展能力，使大规模应用处理成为可能。

云计算平台的计算虚拟化技术形式众多，所要解决的问题也各不相同。例如：

 集群技术使得应用处理获得了更大的处理能力；

 主机虚拟化技术则是提高服务器处理能力的利用率。

图 集群技术及主机虚拟技术优势图

但是从最终的效果而言都是分离了应用软件与物理基础设施，解除或弱化了它们之

间的耦合，从而也就削弱了各自的技术发展所受到的相互限制，拓展了技术发展的空间

和灵活性。

图 传统数据中心向云计算中心迁移示意图

弹性扩展

云计算中心要实现所提供服务的质量，动态的资源调度是必不可少的。

现有数据中心的IT基础架构采用固态配置，灵活性很差，当业务发展超出预期时，

无法及时根据业务需求调整资源供给，难以满足业务快速增长的需求。而且系统资源扩

展需要一定的周期，在此过程中，业务系统将处于高危运行状态，造成服务质量下降。

而为了应用峰值而扩展的资源在正常情况下，将处于低负荷状态，造成资源浪费。

而云计算中心要避免这样的情况出现，就必须要实现动态的资源调度，实现业务系

统资源配备的按需调整，结合管理系统的资源监控，根据业务负载等情况，调整业务资

源配给，保障业务系统的资源供给，满足其运行需要，也就保障了业务的服务质量。

云计算中心弱化了应用软件与底层物理资源依赖关系，使得物理资源能够更加灵活

地向优化系统性能、提高可靠性、提高易用性、提高运维效率等方面发展，使得动态资

源调度成为可能，从而为上层的应用软件提供更好的服务质量。而提高底层的计算、存

储、网络等物理资源的耦合性，对于解决上述问题具有关键作用。

首先通过对计算资源、存储资源、网络资源进行优化配给，提高资源能力的耦合性，

则可以更好地提高云计算平台的整体性能。

然后智能化地根据用户需要封装、分配资源，形成虚拟应用平台，用户在简单地部

署自己的应用或数据后，应用系统即可投入使用。

利用整合了计算、存储、网络等方面资源的运维专家系统，只需基于虚拟应用平台

对物理资源的使用分析，即可动态地对其所用物理资源进行优化调整，以提高用户应用

的运行效率和服务质量。

在云计算中心，运维人员无需过分关心上层应用的情况，只需基于虚拟应用平台对

物理资源的使用分析，进行资源优化调整，保证云计算中心的稳定高效即可。

图 云计算中心弹性扩展示例图

智能化云管理

云计算中心具有IaaS、PaaS、SaaS等众多的服务模型，提供计算服务、存储服务、

乃至整合各种资源的综合性服务，其资源的构成更加复杂、规模更加庞大。为了提高易

用性和可维护性，各种资源构成之间的关系复杂。为了保证云计算中心的服务质量，对

于众多用户资源配给的调整也要求更精准的、更及时。

这些要求已经不是依靠运维人员的能力所能满足的，需要采用更加智能化的自适应

运维管理。

云计算中心运维管理要适应云服务对资源管理所提出的新需求：

 紧耦合的资源管理

云计算中心采用资源综合管理，即将系统中的计算、存储、网络等资源视为整体系

统，实施统一管理，这有利于优化整体性能、精确定位问题、是实现动态资源调度的重

要因素。

 多维度的资源管理

云计算中心的资源具有多种视图，例如物理资源视图、虚拟资源视图、虚拟组织视

图，因此，云管理也应该是多维的。

充分考虑利旧

项目建设应充分考虑利旧，建设新系统并将业务系统迁移至新系统之后，先前采购

的设备应继续利用，避免浪费已有投资。主要包括以下几个方面：

 服务器设备：经过性能和稳定性衡量之后，可以用来做对性能要求较低的前置

机或者在云计算分区中添加一个利旧服务器组成的云区域，承担重要性稍差的

业务系统；

 存储设备：可以用来做容灾，以充实存储空间；

 网络设备：经过性能和稳定性衡量之后，可以用来和新购网络设备一起组成云

计算中心的网络体系。

云项目建设成功案例

中国银联国家示范云计算平台—‘联云’

新疆公安云

国家中医药数据中心云平台