阿里云李克:阿里云边缘云计算的技术和实践

简介: 李克:边缘计算的核心目标是推动人、事、物的快速决策。 在4月7日下午举办的边缘计算论坛上,阿里云资深技术专家李克为我们带来了《阿里云边缘云计算的技术和实践》为题的精彩演讲。

备受关注的2021全球分布式云大会·北京站于4月7日隆重召开,分布式云是2021年全球十大重要战略科技趋势之一,利用分布式架构技术创新,连接边缘节点、私有云和公有云的闲置资源组成分布式混合云发展潜力无限。在4月7日下午举办的边缘计算论坛上,阿里云资深技术专家李克为我们带来了《阿里云边缘云计算的技术和实践》为题的精彩演讲!

image.png

01 边缘计算的核心目标是人、事、物的快速决策

什么是边缘计算?边缘计算是相对传统集中通用计算而言,将工作负载部署在边缘的一种计算方式。采用分散式运算架构,在尽可能靠近物、数据源或用户的地方进行应用计算与数据存储,仅将必要的结果送到云中心。同时,边缘计算也是中心云和设备之间的缓冲,是中心云的延伸,与中心云互补。目前边缘计算落地推动力分别是延迟/确定性、数据/带宽、有限的自治权、隐私/安全性。

李克总结道:边缘计算的核心目标是推动人、事、物的快速决策。

Gartner按照位置不同划分3种计算场景,分别是Near Edge、Far Edge、Cloud,对应着终端计算、IDC计算和中心云计算。其中Near Edge是标准服务器或设备,在距离端侧最近的地方,例如在工厂和园区,可以为任何Arm,X86设备;而Far Edge是标准的IDC节点,而Cloud是公共云或专有云服务,特征为资源集中、中心化管理。

在IDC资源定义下,边缘计算的结构又可以分为Heavy Edge与Light Edge。其中Heavy Edge通常是集中的大规模节点,提供通用的计算存储能力,如CDN、自建IDC比较常见;而Light Edge是特殊功能的低功耗计算平台,通常适用于工业控制,基本的数据处理、传输等物联网场景。

02 2022年边缘云计算将成为数字业务刚需

5G发展带来大数据、大连接、低时延应用场景,需要边缘云计算提供基础的计算能力,催生边缘云需求快速增长。边缘云分布式的网络架构,可实现离线、就近计算,满足特定行业对实时性、可靠性与安全性等的严格要求。边缘云起到了承上启下的作用,除了场景上的需求,另一个需要考虑的是成本,中心机房一般都是超大规模,几千上万台机器,对应的建设投入和运营成本都非常高,而且一般都是BGP带宽,使用成本比较高,而边缘云节点,机器配置不用太高,节点规模也较小,一般几十台左右,网络也是单线接入,在成本上具备较大的优势。

比如在一个城市大脑项目中,通过将应用部署下沉到边缘,能够节省大量的BGP带宽开销,另外边缘上也能够卸载大量的数据,当数据收敛到5%之后,总成本可以节约一半以上。而成本一直都是客户选择云计算的一个核心要素。
李克表示,在市场需求不断上升与自身技术不断突破双重推动下,在2022年,边缘云将成为所有数字业务的基础设施。

image.png

传统的公共云肯定会一直存在,提供超强的计算和存储能力,距离客户较远,而边缘云有遍布全国的几千个小型节点,能够离客户较近。边缘云是中心云的拓展,和中心云一起来提供面向应用场景,以及面向产业互联网的下一代云计算解决方案。

在未来,中心式公共云的大数据中心节点数量少、单点规模大、离终端距离近远;而分布式边缘云节点数量多、单点规模小、离终端距离近。分布式边缘云可以更好的面对低延时场景、大宽带场景、大连接等场景,并可以更好地面向产业互联网。

03 阿里云边缘云产品ENS

在介绍了整个边缘计算的架构与未来发展之后,李克提到了边缘技术面临的挑战。

资源的管理 一方面资源形态较多,比如有CPU机器、GPU机器,也有面向ANDROID应用的ARM阵列,机型的不统一和节点网络环境不统一,使得节点建设和交付会面临较大的挑战,另外节点的数量规模也会比较大,随着MEC节点的引入,节点规模会发展到百万量级,对资源的管理带来较大的挑战。

资源的使用 资源使用也需要更好的技术方案,云中心的标准虚拟化方案在小型节点上需要进行改造和适配,边缘上的计算、存储、网络的切片能力,以及中心的云产品和中间件能力下沉都需要大量技术投入,能够将所有边缘异构节点形成统一资源管理。

云边一体的管控技术 中心和边缘、边缘之间的管控需要统一,对客户提供位置无感的服务,在边缘节点上需要做好边缘的自治能力,资源可以快速扩缩容,以及实例的冷热迁移能力。

协同网络的挑战 所有的边缘节点之间,以及边缘和中心之间需要一个统一的底层网络,能够提供稳定可靠、质量成本最优的的传输体验。

总体上讲,需要在边缘云上提供统一的资源建设纳管和统一的调度和生产能力,以及位置无感的服务和网络传输。

image.png

在面对以上提到的四大挑战上,李克为我们带来了阿里云边缘云产品ENS。

李克首先介绍了阿里云边缘云发展的情况,第一个阶段是锤炼期,在2017开始打造,依托于CDN的资源开始进行边缘计算节点的改造;第二个阶段是提供IAAS的基础服务,18年实现了覆盖100公里的边缘节点布局,19年进一步扩大了节点规模,有了超过300个ENS节点,未来会进行更多节点的管理;第三个阶段对具体业务和场景的支持,比如智慧城市项目,智能家居等;现在已经步入了第四个阶段,在IAAS的基础上,打造一些通用的PAAS能力,来进行更好的业务场景支持,比如云原生平台、视图计算平台、全球交互通信网络等。

李克表示阿里云边缘云整体上发展策略是资源一步步下沉到离端最近的地方,另外对上层提供的能力越来越贴近业务场景,如今阿里云边缘云产品ENS已拥有众多产品能力:

  • 在计算上,支持三种基础计算形态,虚机容器和安全容器,终端的数字孪生计算。
  • 在存储上,支持块存储、文件存储,对象存储等多种形态,将原有CDN的缓存能力变为通用的KV能力。
  • 在网络上,实现了节点内的多种网络形态,跨节点的网络加速和交换能力,以及边缘的负载均衡产品。
  • 在安全上,提供了四七层的防攻击能力,针对内容和主机的安全能力等,600G的DDoS攻击。
  • 在管控上,能够高效的进行节点的自动化建设,以及容器虚机的高效生产,和镜像发布的管控。

image.png

在架构上,李克进一步介绍道:阿里云边缘云计算产品ENS从基础设施开始,一层层进行封装,底层的服务器、交换机能够形成统一的池化资源。在IaaS层通过边缘飞天操作系统,抽象出来计算、存储网络的资源形态;在PaaS层提供了存储平台、计算平台、容器平台、视图计算平台和应用管理平台;最上层的SaaS场景交给客户进行封装实现,完成垂直化业务和创新场景的落地。

04 边缘业务场景实践

李克表示阿里云做边缘云有3个优势:第一个是资源优势、第二个是技术优势、第三个是自有业务的优势。

李克为我们举例道:阿里云有一个飞天操作系统用来管理中心的云计算体系,我们基于边缘打造了一个飞天边缘操作系统,主要是希望边缘上能够承载中心云的算力下沉,以及端上的算力上移,让计算在发生在最低成本和最佳体验的节点上。比如数据分析,就可以在边缘上进行预处理,而不需要全量的数据回传到中心云处理,这就实现了算力的下沉。

终端算力上移场景代表性的场景就是云游戏、云应用等,终端不需要配置较好的芯片,运算和渲染发生在边缘节点上,终端只需要进行流式显示即可,从而完成了算力的上移。

接下来看一下内部的场景,我们先拿分布式日志平台来举例子:
在边缘上不管是提供CDN服务,还是视频服务,都会有大量的访问日志和操作日志,这些日志需要给业务决策提供输入,涉及到大量的计算和存储开销,其挑战也是非常大的。

首先在规模上,大量的分布式集群,每天产生超过10PB的数据,这些数据都需要能够可靠的进行收集和处理。其次在成本上,对应的计算、存储、网络开销每年高达几亿,而且业务还在持续快速增长在效率上,有大量的定制分析需求,需要快速发布,原始数据检索也需要快速支持,最后在稳定性上,因为很多数据涉及到调度和计费场景,其可用性也需要保障。

目前的做法是设计了一套分布式的日志处理平台,能够在边缘上做大量的计算和存储,分析任务通过算子的方式在节点上进行编排,只有不到千分之一的分析结果需要上传中心。

大量的计算检索都在边缘上产生,一方面提高了效率,另一方面在成本上有非常显著的降低,利用边缘的空闲资源,分而治之的把全网数据进行边缘处理,每年节约成本超过1个亿。

接下里第二个内部场景是边缘的云原生,边缘之所以云原生,是为了解决资源的使用效率,以及应用的发布效率,能够提供云原生的环境,面向未来打造边缘的技术基座。

李克认为云原生核心是改变业务使用资源的模式,开发效率的提升。传统的资源使用是基于物理机,所有的运维体系都是基于设备和操作系统,即使有了虚拟化技术,也只是在资源形态上发生了一些改变,对于发布和运维,以及开发模式没有本质的提升。

云原生要做的就是实现高效的资源管理,能够进行租户隔离和资源的弹性生产,对外提供标准化的服务和接口,提供应用注册、发现和编排的能力,未来的应用只有基于了微服务,不必关系资源的弹性和运维才是真正的云原生技术。
目前云原生平台典型的技术有容器、微服务和服务网格,边缘云原生在技术上分为三层,底层是基础的容器技术,不管是使用原始的DOCKER,还是基于K8S,需要在不同的节点和机器上提供统一的容器生产接口,并且还需要进行相关的容器存储和网络支持,在中心,无法使用单一的K8S集群管理这么大规模的服务器和POD,因此需要分层的容器化平台,调度和控制指令能够快速下达到每一个小的集群。

在容器台之上,提供了MESH的应用管理能力,可以进行灵活的发布和灰度,以及完善的数据和监控体系,整个云原生平台,对业务来讲,可以提供不同类型的计算资源,如容器、K8S、以及位置无关的SERVERLESS服务。

目前边缘云计算已经实现了全面的云化,内部业务如CDN和视频等已经基于容器进行大规模部署,资源实现了统一的池化,所有的边缘节点都可以进行标准的POD生产,能够分钟级别提供超过10w的计算资源,目前在压测场景已经大规模在使用。

接下来讲2个外部的场景:

第一个是云应用,典型例子是云游戏,云游戏的历史也比较悠久,一直无法大规模复制,而5g和边缘计算出现恰好弥补了资源覆盖和网络传输问题,因此云游戏能够更好的发展。通过云游戏平台,根据客户位置和应用特性,可以选择一个最合适边缘节点,生产出来一个虚拟设备,客户直接连接边缘节点,操作指令直接发送到边缘计算节点的虚拟终端上,节点处理后再将数据通过流式的方法下发给客户。

云游戏这种模式,对于云厂商来说,能够实现比较好的资源复用,只有活跃的玩家才会有虚拟终端;对于游戏厂商来说,游戏的种类和更新可以更敏捷,具备更强的竞争力;对于客户来说,终端芯片要求较低,能够体验更多游戏。
基于边缘云的游戏解决方案,对玩家和厂商都有较好的收益,目前云游戏已经在边缘实现规模化支持,同时支持端游和手游的方案。

李克讲述的第二个案例是在视频领域。边缘云也能很好的满足场景需求,政府、行业、商业等多类场景均有视频需求,视频流众多,直接上云高成本、质量服务保障,自建机房投入高、运维难度大。阿里云边缘云可以提供同城同区就近视频汇聚能力,让视频更好的收流、存储;实现低成本、高质量的智能分析、智能计算。

05 展望未来:标准化+开放的生态建设

image.png

最后,李克表示在未来边缘云发展要注重两个关键词:标准化和开放生态的建设。越来越多的生态应用依赖于 “云-边-端” 协同,边缘云在这个协同中扮演的正是上下衔接的关键角色;需要大家在标准和开放上持续坚持,完善边缘云的生态。

一方面整合各种各样的边缘节点,从骨干网到城域网,再到基站和厂区,都可以有边缘的虚拟节点,建设出来一个无处不在的边缘覆盖;另一方面基于自研的边缘操作系统,提供分布式的融合计算网络,实现资源的统一纳管、统一调度、统一生产,对外提供统一的开放API。

李克最后总结,不管技术如何发展,场景永远是第一位的, 4G催生了视频行业,5G下各类新型场景正在成为现实,在低延迟、大连接、大流量下,一切皆有可能,当更有价值的应用出现时,边缘云一定要提前做好准备。

原文链接

本文为阿里云原创内容,未经允许不得转载。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/513852.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

数学在左,人生在右

在人们印象中,数学作为一门基础学科,由简单的数字和符号组成或简单或复杂的算式,融入我们的生活、学习、工作的方方面面,是理性、严谨的。 然而笔者在 2021 阿里巴巴全球数学竞赛颁奖典礼上看到数学的另一面:在数学的…

函数计算助力语雀构建稳定且安全的业务架构

简介: 语雀是一个专业的云端知识库,用于团队的文档协作。现在已是阿里员工进行文档编写和知识沉淀的标配,并于 2018 年开始对外提供服务。 客户介绍 语雀是一个专业的云端知识库,用于团队的文档协作。现在已是阿里员工进行文档编…

android menu自定义,Android提高之自定义Menu(TabMenu)实现方法

一般使用过UCWEB-Android版的人都应该对其特殊的menu有一定的印象,把menu做成Tab-Menu(支持分页的Menu),可以容纳比Android传统的menu更丰富的内容(Android的menu超过6项则缩略在[更多]里),本文参考网上的例子的基础上对例子进行简化以及封装…

一行指令造成 60 亿美元蒸发,更让 Facebook 遭遇史诗级故障!

作者 | 马超 责编 | 张红月出品 | CSDN弱小从来不是生存的障碍,傲慢才是。10月4日 FaceBook 发生了一次史诗级中断事故,故障期间 FaceBook 所有旗下APP全面对外服务中断,而且故障的时间长达7个小时之久。根据 Facebook 最新的声明来看&…

一不小心,它成为了 GitHub Alibaba Group 下 Star 最多的开源项目

简介: 随着微服务的流行,应用更加轻量和高效,但是带来的困境是线上问题排查越来越复杂困难。传统的 Java 排查问题,需要重启应用再进行调试,但是重启应用之后现场会丢失,问题难以复现。 来源 | 阿里巴巴云…

因云而生 全新视角看阿里云服务器硬件方升架构

简介: 方升架构作为新一代云服务器架构的典范,是阿里云云原生基础设施的最佳实践之一。阿里云结合云计算丰富业务场景需求,推出一系列自研服务器产品、部件及解决方案,包括高性能计算全栈解决方案、高性能存储和大容量存储解决方案…

华为鸿蒙电脑操作系统测试版,华为鸿蒙测试版下载 华为鸿蒙测试版电脑版下载...

软件介绍《华为鸿蒙测试版电脑版》是华为的鸿蒙os系统,能兼容全部安卓应用的所有Web应用。若安卓应用重新编译,在华为OS操作系统上,华为OS将打通手机、电脑、平板、电视、汽车、智能穿戴。游戏启动1、关于安卓模拟器,在下载的游戏…

项目版本管理的最佳实践:云效飞流Flow篇

简介: 飞流Flow的最佳实践(使用阿里云云效)为了更好地使用飞流Flow,接下来将结合阿里云云效来讲解飞流Flow的最佳实践 目录 一、分支规约 二、版本号规约 2.1 主版本号(首位版本号) 2.2 次版本号&#xff…

低碳数据中心,因何而来?一文读懂如何利用超融合降碳

作者 | 让科技向善的 来源 | SmartX“Global warming isn’t a prediction. It is happening.” 全球变暖并非预言,是正在发生的现实。联合国政府间气候变化专门委员会在今年 8 月发布的报告宣称,人类即将突破 1.5 摄氏度这一关键的气温上升极限。为…

Duang,您的钉钉应用已上线!云开发5分钟快速打造钉钉会议室预定系统

简介: 5分钟可以干什么?喝一杯咖啡,回一封邮件,还是开发上线一个钉钉应用。云开发平台联合钉钉开发平台推出0门槛打造你的第一个钉钉应用的活动,完成相应任务后,即可领取精美奖品。春暖花开,领个…

倒计时3天!携手开发者,一起精准打造数智未来!

把故事写进代码,用代码改变世界重塑或者改变这个世界的并不是超人而是开发者他们用技术自我成就因情怀练就工匠精神2021年,移动云开启了首届API应用创新开发大赛,以“创新云转型,智慧云服务”为主题,旨在激发开发者创新…

自建Kubernetes集群如何使用弹性容器实例ECI

简介: 虚拟节点(Virtual Node)实现了Kubernetes与弹性容器实例ECI的无缝连接,让Kubernetes集群轻松获得极大的弹性能力,而不必受限于集群的节点计算容量。您可以灵活动态的按需创建ECI Pod,免去集群容量规划…

一文读懂容器存储接口 CSI

简介: 在《一文读懂 K8s 持久化存储流程》一文我们重点介绍了 K8s 内部的存储流程,以及 PV、PVC、StorageClass、Kubelet 等之间的调用关系。接下来本文将将重点放在 CSI(Container Storage Interface)容器存储接口上,…

SpringBoot Admin2.0 集成 Java 诊断神器 Arthas 实践

简介: 项目最初使用 Arthas 主要有两个目的: 1. 通过 arthas 解决实现测试环境、性能测试环境以及生产环境性能问题分析工具的问题。 2. 通过使用 jad、mc、redefine 功能组合实现生产环境部分节点代码热更新的能力。 作者 | sparrow 来源 | 阿里巴巴云原…

python在办公上的应用_python自动化办公:玩转word之样式秘笈

上节对python如何定制word的页眉页脚做了详细介绍,当然,要作出一篇精彩的word文档,样式公布可没,本章继续介绍python如何玩转word的样式。 使用样式python如何玩转word的样式 此页面使用前一页中开发的概念而不作介绍。如果术语不…

Gartner发布2021年隐私技术成熟度曲线,数字伦理登上顶点

编辑 | 宋慧 供稿 | Gartner 随着人们日益意识到其个人信息的价值并对透明度的缺乏和持续的滥用感到失望,数字伦理登上了Gartner 2021年隐私技术成熟度曲线的顶点。 Gartner将数字伦理定义为人、企业机构和物之间开展电子交互所遵循的价值和伦理道德原则体系。随着…

微服务+异步工作流+ Serverless,Netflix 决定弃用稳定运行 7 年的旧平台

简介: 2021 年,Netflix 会将大部分的工作负载从 Reloaded 转移到 Cosmos 平台。Cosmos 是一个计算平台,它将微服务的最佳特性与异步工作流以及 Serverless 结合在一起。 作者 | Frank San Miguel 策划 | 田晓旭 2021 年,Netflix …

实时 OLAP, 从 0 到 1

简介: BTC.com 团队在实时 OLAP 方面的技术演进过程及生产优化实践。 作者|高正炎 本文主要介绍 BTC.com 团队在实时 OLAP 方面的技术演进过程及生产优化实践,内容如下: 业务背景机遇挑战架构演进架构优化未来展望一、业务背景 …

Gartner发布2021年数字商务技术成熟度曲线,重点关注四项技术

应用领导人应密切关注可视化配置、数字钱包、客户身份和访问管理以及虚拟客户助理这四项将在未来两年对数字商务产生重大影响的技术。 编辑 | 宋慧 供稿 | Gartner 根据Gartner 2021年数字商务技术成熟度曲线(Hype Cycle for Digital Commerce)&#x…

鸿蒙手机系统还没有开发,华为鸿蒙手机太难了!引发开发者大吐槽:为何没有自己独特风格?-互联网/电商-文章-小虾米...

【华为鸿蒙手机太难了!引发开发者大吐槽:为何没有自己独特风格?】互联网/电商-文章-小虾米2020-12-27 11:32:02 小虾米帐号:军事科技(tabc) 关注我 举报 来源:qq新闻 浏览量(129)【12月28日讯】导语&#xff0c…