传统数据中心如何实现向云的平滑升级


传统数据中心如何实现向云的平滑升级

1.引言

众所周知,云计算是近年来发展最快的互联网技术,被称为第四次IT革命。据权威机构预测,到2016年,2/3的IT应用服务将建立在云架构上 [1]。作为云计算核心的基础承载设施,数据中心在网络中所扮演的角色也愈加重要。目前,新一代的云数据中心正逐渐取代传统数据中心,并成为互联网业务和流量的主要源头。在中国,工信部电信研究院发布的《2014年云计算白皮书》[2]显示我国公共云服务市场仍处于低总量,高增长的产业初期阶段。2013 年我国公共云服务市场规模已达47.6 亿人民币,增速36%,远高于全球平均水平。

云计算市场旺盛需求,带动了IDC产业的高速增长。对于通信运营商而言,IDC业务正逐渐成为其业务收入增长的新的重要源动力。2005-2012年间,中国IDC市场规模增长了6倍,且预计未来5年仍将保持25.5%的年均增长率[3]。

20150326-datacenter cloud1

图1 2011-2016年中国数据中心市场总体预测

为把握这一机遇,中国电信和中国联通先后成立了专门运营云计算业务的云公司。中国移动也在多个省市开展云计算相关业务的试验。可以预见,云计算业务将成为运营商未来业务增长、竞争的主要热点之一。

2.现有数据中心组网现状及问题

目前,国内主要运营商在全国已建有数百个数据中心,年收入达上百亿元。但这些数据中心大多从数据机房演变而来,主要提供机架出租和主机托管等附加值较低的业务。与业界领先者相比,运营商IDC存在以下问题:

2.1 组网技术落后,扩展性受限。

虚拟机的大规模使用是云数据中心区别于传统数据中心的一个最主要特点。由于虚拟机迁移要求,迁移前后的网络要属于同一个二层网络。因此,新一代的数据中心组网技术如Trill、SPB等都专注于构建数据中心内部的大二层网络。而运营商现有数据中心的网络拓扑如下图所示:

20150326-datacenter cloud2

图2 传统数据中心网络拓扑

其中,运营商只负责提供接入层以上的设备。租户需要通过自备的网络设备汇接其所有服务器,然后再通过配置静态路由将流量导入接入层交换机。在路由协议配置上,接入交换机为二三层网络分界线,接入层以上的设备运行三层网络协议,包括ospf和BGP。在这种方式下,二层被限制在网络边缘。整个数据中心分割成相互独立的多个烟囱式的业务网络,极大的限制了虚拟机迁移的范围和用户网络的扩展性。同时由于各业务网络彼此隔离、无法复用,降低了网络资源(如:接入带宽和端口资源等)的利用效率。

2.2 运营模式粗放,业务开通速度慢。

业界领先的亚马逊、阿里巴巴等互联网公司已为客户提供PaaS,SaaS等云服务,对用户技术要求低,且业务开通仅需几分钟。而运营商数据中心机房目前还多以提供机房、机架出租等低附加值业务服务为主。用户开通新业务需要通过提交申请、网络划分、逐台设备配置等繁琐的步骤,平均业务开通时间通常在几周甚至几个月左右。

2.3 高端资源不足,低端资源无法整合。

作为互联网行业的基础服务体系,数据中心站点正在向大规模、集群化方向发展。谷歌、微软、腾讯等互联网公司新建的数据中心站点都已拥有上万台物理服务器。国内调研数据显示,2012年被调查IDC服务商机房拥有服务器数量在5000台以上所占比例与2011年没有多大变化;被调查IDC服务商机房拥有服务器数量在1000-3000台的所占比例下降到23%,说明这两年行业进行重组整合,较小的IDC服务商已经被重组或者淘汰[4]。

20150326-datacenter cloud3

图3 2012年中国IDC公司的机房服务器数量

而运营商现有的IDC机房中,五星级、四星级机房仅占20%左右。这无疑难以满足用户对资源需求的增长趋势,不适于未来IDC业务的长期发展。同时,由于设备和组网技术的限制,无法将多个数据中心资源整合在同一个二层网络中形成一个逻辑资源池。这样,当面对网络资源需求较大的用户时,一方面各机房都无力单独满足用户的使用规模需求;另一方面,大量资源被闲置、浪费的矛盾现象。

2.4 IDC资源利用率不均,分布不合理。

由于不同种类的业务对网络时延的要求不同,各用户对IDC机房地理位置的敏感度也存在差异。如提供页面访问业务的用户,对机房位置的要求不太敏感;而金融和政府用户则多要求部署在一、二线城市;中小用户则要求就近部署在本地。

目前,运营商在一线城市机房的机架利用率和出口带宽利用率也基本饱和。而三、四线城市机房的机架和带宽利用率尚有可利用空间。但由于不支持虚拟化功能和统一的管理调度平台,使得无法通过业务调度的方式,实现对现有网络资源的整合。

2.5 缺乏多数据中心协作机制,难以发挥固网资源优势。

目前运营商不同等级数据中心间缺乏协同工作机制与热点流量推送机制;与Google,Facebook等公司的数据中心互联模式相比,用户体验上还有差距。

此外,随着云计算、移动互联网和服务器虚拟化的大规模使用,对数据中心网络提出了更高的要求:

(1)无阻塞网络,并具备近似无限的高扩展性。

(2)能够感知虚拟机,并支持虚机在单数据中心内部和多数据中心之间的漂移,并保证相关网络策略随之迁移。

(3)支持多业务、多租户。能在同一物理网络上,根据业务需求自由构建业务网络并保证网络安全性。

(4)网络统一运维,高度自动化、智能化管理。

以上这些需求是现有的数据中心网络难以实现的。

为满足上述需求,业界主流厂家推出了一系列新的技术解决方案,如Trill、SPB、VEPA等。但这些技术都需要新的网络硬件,即各级交换机设备。显然,对于已建有数百数据中心的运营商而言,这一成本十分高昂,且是否值得也有待考验。

此时,SDN和NFV技术的适时出现,为利用现有网络设备,整合数据中心网络资源,实现云化升级,提供一条解决思路。

3.SDN&NFV技术

SDN(Software Defined Network)即软件定义网络,它起源于美国斯坦福大学,是继云计算之后,业界最关注的网络新技术[5]。2012年,谷歌在其数据中心网络上的成功应用SDN,标志着SDN进入到商用化阶段。同时也使得数据中心成为业界公认的SDN技术应用的首选场景。

控制转发分离、逻辑集中控制、开放可编程是SDN区别于传统网络的主要特征。正是这些特征使得SDN能够良好的满足数据中心网络的使用需求。SDN 的控制转发分离,为实现集中管理创造了条件。而管理集中化正是提高网络管理和业务部署的自动化程度的必要前提。开放可编程接口则为将业务需求转化为网络需求提供了途径。

目前,SDN有三种实现方案,即基于openflow协议的解决方案、基于overlay技术的解决方案和混合型解决方案。其中基于overlay 技术的解决方案是目前主流的发展趋势。这种方案通过使用vxlan或nvgre等协议,在报文进入接入层设备前将二层报文封装在三层报文中进行传输,最后在接收侧解封装还原二层报文。这样就是实现了在三层网络之上建立一张逻辑二层网络的目的。该方案对承载网要求低,IP可达即可,不需要改变现有网络架构和协议,具有良好的适用性。

NFV(Network FunctionVirtualization)即网络功能虚拟化[6]。该技术源自于电信运营商,其的最终目标是以软件方式虚拟化IT资源,让虚拟化部署能够提供重要的网络功能,而不再需求专业的物理设备。这些虚拟设备在网络中将像物理设备那样工作,且无需特定设备即可实现多种专业功能。此外,由于 NFV可以采用虚拟机的方式提供,再结合SDN的流量控制功能,可以轻易实现功能网元的按需弹性部署及service chain功能。

SDN的集中管理控制与NFV的快速弹性部署相结合,构成了一条网络硬件的通用性和软件的开放性越来越高的发展道路。

4.云化演进方案

利用SDN技术和NFV技术,我们可以通过软件方式实现对现有数据中心的云化升级,具体可分为以下几个阶段进行:

第一阶段,对服务器实施虚拟化改造,并使用支持vxlan的开源OVS虚拟交换机构造大二层网络。

20150326-datacenter cloud4

图4 传统数据中心在服务器虚拟化改造后的效果

已有大量实践证明,通过使用虚拟化技术可以将服务器的资源利用率提高30%以上。同时,由于将原来需要多台服务器承载的业务集中到一台服务器上的多台虚拟机处理,大幅降低了所需服务器的数量。这样也节省了网络接口资源,使业务网络实现“瘦”化,提高数据中心的整体承载能力。

同时由于使用了vxlan技术,使得不同的IDC站点只要IP可达,就可以在逻辑上构成大二层overlay网络,从而实现整合多个数据中心网络资源的目的,提高了资源利用率。且由于使用的是开源软件,升级成本十分低廉。

第二阶段,利用NFV技术提供防火墙、负载均衡、私有云等业务。

在传统数据中心的组网方式下,为提供防火墙和负载均衡等增值业务,有两种方式。一种是用户自备相关硬件,串接或旁观在其与接入交换机相连的网络设备上。另一种则需要将相应的硬件旁挂在核心路由两侧,供所有业务共用。前一种方式,由于用户网络规模有限,容易导致资源浪费。后一种方式,难以针对具体各业务私网提供定制服务。

NFV技术出现后,通过在虚拟机上安装防火墙、虚拟路由器等功能镜像,实现了针对各业务网络的资源弹性部署。在降低组网成本的同时,提高了服务种类、处理精度。

第三阶段,增加controller,并通过controller与OVS和NFV管理平台的对接实现对ovs和NFV设备的统一控制,提高业务的按需自动化弹性部署能力。

通过增加controller,并将其与OVS、NFV管理平台实现对接。引入SDN集中控制功能,实现service chain的自动化部署,可以大大提高业务开通的自动化程度和速度。这里为了降低成本可以使用开源的controller,如opendaylight的产品——Hydrogen。

第四阶段,当网络规模和流量足够大时,通过将现有接入交换机更换为支持vxlan封装的交换机,提高业务处理能力。

由于OVS仍属于软件范畴,相对硬件存在性能瓶颈。在改造初期,由于运营商现有数据中心的网络规模大多较小,对性能的要求也相对较低,OVS还能满足使用需求。但随着互联数据中心站点数量的增加,对OVS的性能要求(如流表数量)也直线上升,其性能问题就可能成为业务发展的瓶颈。此时,原有的接入交换机已基本接近使用年限。可借助更换新型接入交换机的时机,将OVS对数据包的部分处理功能,如vxlan封装,转移到硬件的接入交换机侧。从而降低OVS的性能压力,满足业务的使用需求。

通过以上几个步骤,实现了在尽可能利旧现有网络设备的情况下,用最小的代价完成传统数据中心向云数据中心的升级。

结论

本文在分析数据中心发展趋势和运营商数据中心现状及问题的基础上,结合SDN和NFV技术特点,提出了一种传统数据中心向云数据中心的过渡方案。该方案为集团整合现有数据中心资源,发展云相关业务提供技术参考。


本文作者:佚名

来源:51CTO

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/455497.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

UGUI滚动列表ScrollView使用注意点

ScrollView的Viewport不能引用其子节点Grid,不然会导致ScrollView滚到头时还能继续滚动,无法回滚 转载于:https://www.cnblogs.com/lovesharing/p/6963062.html

Java笔记02-OOP

面向对象编程 万物皆对象 面向对象指以属性和行为的观点去分析现实生活中的事物 面向对象编程指先以面向对象的思想进行分析,然后使用面向对象的编程语言进行表达的过程 面向对象编程是软件产业化发展的需求 理解面向对象的思想精髓才行 面想对象的三大特性 封装 继承 …

上位机与基恩士plc以太网通讯_2020湛江AB罗克韦尔PLC主机回收二手或全新

2020湛江AB罗克韦尔PLC主机回收二手或全新专业回收基恩士光电传感器回收,基恩士安全光栅回收,基恩士对射开关回收,基恩士工控配件回收,基恩士视觉相机回收,发那科伺服驱动电机回收,发那科控制系统回收&…

经常使用的 WEB server

对于刚開始学习的人来说,或许自己能够写出一些简单的演示样例DEMO,但却纠结于不知道应该怎样才干訪问自己的页面,这里进行了一些简单的WEBserver总结。便于新朋友配置使用 静态HTML页面 对于静态HTML页面不须要webserver,直接右键…

多媒体视频知识入门贴zt(一)

一 基础篇 1.1 图形、图像和视频图形(graphic):和图像与视频不同,有一种说法是图形就是自然界的客观世界不存在的图案。对于计算机中的图形研究,有专门的计算机图形学,主要的 研究对象是点、线、面等抽象事…

Java笔记03-Constructor Override

Java笔记03-Constructor & Override 构造方法基本概念 构造方法是类中的一种特殊方法 它是在类创建对象(实例化)的时候自动调用的方法 这个和python中的__init__初始化魔术方法类似 可以在创建对象的时候进行参数的传递 默认送您的构造 一个类编译过后都需要有一个构…

生物信息学概论_大学专业详解系列83——生物信息学(理学学士)

生物信息学(理学学士)毕业生应具备的知识和能力(1)掌握扎实的数学、物理、化学基础理论和基本知识;(2)掌握生物学专业基础知识和信息处理的专门知识;(3)掌握普通生物学、细胞生物学、遗传学、分子生物学、生物数据库管理系统、生物信息学、基因组学、蛋白…

R语言时间序列数据应用xts

zoo是时间序列的基础库,是面向通用的设计。 xts 是对时间序列库(zoo) 的一种扩展实现。xts 类型继承了zoo 类型,丰富了时间序列数据处理的函数。 一、xts对象的结构和定义 1、xts对象是一个具有时间索引的观测值矩阵,结构如下: xts matrix …

Java笔记04-核心类库

Java笔记04-核心类库 Object类 1.1 常用的包 java.lang包 -该包是Java语言中的核心包,该包中的内容由Java虚拟机自动导入 如:String类,System类等java.util包- 该包是Java语言中的工具包,里面包含了大量的工具类和集合类等java.io包 是输入输出包,包括读写各种设备java.net…

Butterknife全方位解析

概述 Butterknife是供职于Square公司的JakeWharton大神开发的开源库,使用这个库,在AS中搭配Android ButterKnife Zelezny插件,可以大大提高开发的效率,从此摆脱繁琐的findViewById(int id),也不用自己手动bind(int id)…

Linux下编译FFMpeg

环境:RedHat AS4  1。首先获取ffmpeg  通过svn下载:  从 http://subversion.tigris.org下载SVN客户端程序。   先装subversion,确保已经安装了apr和apr-util,在apache.org网站能下到  wget http://subversion.tigris.or…

论文笔记 Aggregated Residual Transformations for Deep Neural Networks

这篇文章构建了一个基本“Block”,并在此“Block”基础上引入了一个新的维度“cardinality”(字母“C”在图、表中表示这一维度)。深度网络的另外两个维度分别为depth(层数)、width(width指一个层的channel的数目)。 首…

matlab 归一化_机器学习中如何用Fscore进行特征选择(附Matlab代码)

作者:kervin编辑:阿吉 目前,机器学习在脑科学领域的应用可谓广泛而深入,不论你是做EEG/ERP研究,还是做MRI研究,都会看到机器学习的身影。机器学习最简单或者最常用的一个应用方向是分类,…

Java笔记05-Collection、泛型、迭代器

Java笔记05-Collection、泛型、迭代器 【Collection、泛型】 主要内容 Collection集合迭代器增强for泛型 第一章 Collection集合 1.1 集合概述 在前面基础班我们已经学习过并使用过集合ArrayList ,那么集合到底是什么呢? 集合:集合是java中提供的一种容器&a…

IOS安装CocoaPods完整流程

作为一个底层系统大菜鸟,又搞过几年ios来说,安装一个CocoaPods是一件蛋痛的事~ 说懂又懂,说不懂又不懂. 由于安装过程比較复杂,步骤较多,而网上教程又比較零散,并且有一些是扯蛋的,所以本篇文章主要从头到位依据自身安装经历记录每一条终端指令,至于里面的原理和一些概念性的东…

重装TCP/IP

在Windows XP的网络组件列表里,Internet 协议 (TCP/IP)的"卸载"按钮是灰色不可选状态。这是因为传输控制协议/Internet 协议 (TCP/IP) 堆栈是 Microsoft XP/ 2003 的核心组件(TCP/IP协议是Windows XP的默认协议),不能删除。所以Windows XP不允许卸载TCP/I…

linux 修改时区_教你在Centos8中更改时区

对于许多与系统相关的任务和进程,使用正确的时区是必不可少的。例如,cron守护进程使用系统的时区执行cron作业,日志文件中的时间戳基于同一系统的时区。环 境CentOS 8检查现在的时区timedatectl是一个命令行实用程序,允许您查看和…

UVA12511 - Virus(DP+最长公共上升子序列)

题目链接: https://vjudge.net/problem/UVA-12511 题目大意: 给定两个序列,求出两个序列的最长公共上升子序列(严格上升)。 解题过程: 比赛的时候没有做出来,非常咸鱼的一场比赛,当时…

Java笔记06-Map集合

Map集合 学习目标 能够说出Map集合特点使用Map集合添加方法保存数据使用”键找值”的方式遍历Map集合使用”键值对”的方式遍历Map集合能够使用HashMap存储自定义键值对的数据能够使用HashMap编写斗地主洗牌发牌案例 Map集合概述 啥也不用说,Map集合就相当于python中的字典…

理解什么是前后端分离

HTML、CSS、JS。 AJAX或Fetch。 学习一个前端的框架, React或者Vue或者Angularjs2都可以。 学会一个前端的路由框架, 如React-Router或者Vue-Router。 在学会3的基础上你肯定已经搭建好前端的开发环境了,所有和后端的交互走AJAX或者Fetch…