从这些云原生企业身上,我看到了数字化创新者该有的样子

简介:未来的数字世界是什么样子?手握云原生地图的企业,又将如何颠覆数字化?带着这些疑问,我们采访了教育、金融、新零售、互娱、传媒等领域的多位大咖,他们是数字创新的引领者,也是用云原生技术创造业务价值的践行者。接下来,就让我们一起听听通过“云原生”,他们发生了哪些改变?

01

2020 年,

中国市场开启了云原生大规模落地的元年。

从那时起,云原生广泛走入非互联网企业视野。

云原生架构在这两年逐渐成为应用部署的主流方式。

企业数字化转型若要深入发展,实现规模数字化,

具备弹性、分布式和持续演进的现代化应用形态,

是企业实现数字创新的重要途径和手段。 

未来的数字世界是什么样子?

手握云原生地图的企业,又将如何颠覆数字化?

带着这些疑问,我们采访了

教育、金融、新零售、互娱、传媒等领域的多位大咖,

他们是数字创新的引领者,

也是用云原生技术创造业务价值的践行者。

接下来,就让我们一起听听

通过“云原生”,他们发生了哪些改变?

作业帮

降本增效是公司对基础架构的一大要求。在应用侧要提升单位算力承载量,通俗来讲就是 QPS。但我们面临的一个挑战就是作业帮技术栈太多元了,如何整体提升 QPS?再看资源侧,存储、网络这些资源要么是刚需,要么就是很难控制成本,资源侧降本的重点还是计算资源,而对于计算资源我们需要提升单位成本的算力。

“在我看来,在降本增效的过程当中要格外注意一点,降本不能降质,降低成本时,稳定性、效率、安全不能打折扣。我们选择和阿里云一起,选择开源的力量再结合一定的自研解决相关问题。在应用层面,我们提升了主流技术栈的运行性能,对于使用最多的检索服务进行架构重构,以此来提升性能和运维效率。

在计算和存储分离中,我们引入 Fluid 做一个关键的纽带。Fluid 是一款基于 K8s 的数据编排系统,用于解决云原生过程中遇到的访问数据过程复杂、访问数据慢等一系列问题,JindoRuntime用于实现缓存的加速,当我们使用Fliud和JindoRuntime完成整个检索系统的重构之后,获得的收益也比较明显。作业帮的数据更新周期从之前小时级别缩短到三分钟以内,运维整个机器交付从之前天级别缩短到了小时级别,程序性能提升 30%,带来了万核级别资源的缩减。

未来,作业帮会将更多在线服务迁到 ECI 之上来实现真正的削峰,并且更具性价比的 IaaS 资源,这也是我们一直尝试和探索的方向。”

网易云音乐

网易云音乐最初的音视频技术大多都应用在曲库的数据处理上,云音乐曲库团队与音视频算法团队一起共建了网易云音乐音视频算法处理平台,落地了 60 多种音视频算法,尤其是在近一年来,服务化的算法占到了一半,这些算法向云音乐 100+ 的业务场景提供了服务能力。但更复杂的算法、更多的业务场景,对网易云音乐的服务化效率、运维部署和弹性能力都提出了更高的要求,在我们上云之前,在内部已经用到了 1000 台以上不同规格的云主机及物理机。

"我们在一周内快速试用了函数计算 FC,然而一个完整的、高可靠的架构,需要考虑更多的因素。因此我们的改造重点是把算力任务通过函数计算 FC 弹出去,系统在整体的对外输入输出上仍保持不变。

在引入函数计算的第一阶段,特征提取类的算法得到了10 倍速的提升;稀疏类的算法在成本上得到了极大的节约。除此之外,通过函数计算的镜像缓存加速能力,优化了节点的启动速度,让所有的服务拉起可以在秒级完成。这些工作,降低了算法运维处理中的运维成本,让我们能够更聚焦在算法及业务自身。

未来希望通过 Serverless 技术进一步解放我们在运维上的人力投入,并将从存储上进行尝试,让更多场景的音视频算法可以实现。"

安利

互联网的冲击下,安利除了需要适应互联网场景下的敏捷、快速、低成本试错的核心需求,还需要适应互联网场景下的高并发、秒杀、大促等场景。

“云原生中间件为安利构建基于互联网业务中台架构的新电商平台,充分发挥云原生产品的技术优势,支撑 10000 笔/秒的订单峰值。云原生中间件重构了安利社交商业IT基础,打造了安利全球数字化的标杆。”

分众传媒

传统服务器无法满足分众传媒业务高速增长带来的新需求,耗时太长、资源利用率低、运维复杂,对人员技能要求高。

耗时太长:以前的人工上刊无法及时知道上刊是否正确或者错误,需要花费很多时间去核对和修改;

资源利用率低:上刊集中在周六和周日,因此所有资源基本在周六周日使用,大部分时间段不需要使用服务器资源,这就导致资源利用率低;

运维复杂、人员技能要求高:由于业务的复杂度对相关业务人员的技能要求也高,需要招聘更高级的人员来支持对应的运维工作。

“对于我们来说,上云有两个选择。第一个是用 K8s 自己搭建一套容器集群,第二个是用函数计算 FC。如果用 K8s 请求云主机,我们需要自己搭建 K8s,通过对外的 API 来提供请求;而使用 Serverless 计算平台,我们不需要关心用了多少服务器或者多少人力,只需要关心每一次 API 请求是否正确到达,就可以确认每次是否有确切识别到图片,并把识别错误的东西发出来,通知到上刊人员。

阿里云函数计算 FC 支持一分钟内扩充到 7000+ 的实例。如果我们自己部署 K8s 会牵扯到很多人力和物力,因此我们最终选择了 FC。

自动弹性收缩:只需要设置每周六周日有两百万处理量,要在两天完成,其中高峰是早上 9 点-10 点或者下午 3 点-4 点,就可以实现资源的自动弹性收缩;

资源免运维:不需要请专业运维人员;

可提供大规模的识别能力:当我们请求每天上刊人员在早上六点、七点、八点上刊时,可以实时提供算力。

未来我们还会考虑将 Serverless 和 Kafka 结合,用在大数据的处理上,这样的效率会更高;在视频直播流实时推送到视频终端的部分,我们也在尝试使用 Serverless 来解决。”

南瓜电影

一场热映电影加速了南瓜电影对于技术升级的思考。某电影上映后新注册用户爆发,自然爆点,日新增注册用户极速突破 80 万。流量总入口,API,网关,撑不住,紧接着后端服务、数据库,全链路紧急扩容:业务快速恢复,但整个运维过程耗时 4 小时。

"当时有两个方案摆在我们面前,一是自建 K8s,虽然能很好解决高密部署的问题,但是 K8s 学习成本实在是太高了,搭个环境跑跑容易,但正儿八经上生产的话还是要组建好专业团队,短期内显然无法完成。二是Serverless应用引擎 SAE,当时觉得 SAE 不用改造,WAR/JAR包部署,自动弹性,不用买机器,不用运维机器且监控安全。

我们从知道 SAE,到跟阿里云的沟通,以及整个上线,一共是三天时间。到第五天,顺利完成部署上线。到第七天,把剩下30多个系统以同样的方式快速迁移到 SAE 上。

7 天完成了南瓜电影 Serverless 改造:在弹性上,会按照用户的最优化进行自动调整。其次是免运维,SAE 的运维速度比人工更加快捷。最后是发布更快,监控做得也更完善。使用 SAE 后,运维效率提升 70%,成本下降超过 40%,扩容效率提升 10 倍以上,这是给我们带来的直观改变”

02

云原生技术大大降低了数字化的门槛,

使得企业能够专注业务本身,

而无需花太多心力在 IaaS 和 PaaS 层面。

随着基础云服务已经进入成熟阶段,

各类上层应用以云原生为技术底座,

逐步构建起云上的 IT 服务生态闭环。

云原生的落地爆发绝非偶然,

而是企业数字化转型升级的必经之路,

并决定企业数字化转型的结果。

从技术升级到场景落地,

属于云原生的时代正在全面到来。

原文链接

本文为阿里云原创内容,未经允许不得转载。 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/510923.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

云采销:赋能企业商机转化及营销全流程数字化

简介:介绍云采销-企采商产品的在企业业务中的应用场景和产品功能。 云采销:为企业提供“采购协同工具市场资源数据增值服务”的综合性解决方案。 其中“企采商营销管理工作台”为企业提供了B2B营销全域管理系统,包括商机挖掘、线上推广、销…

Hadoop 王者 Cloudera 新转型,定位为混合数据公司

作者 | 宋慧 出品 | CSDN 云计算 随着 AI 等技术兴起,对于数据的应用分析受到了越来越多的重视,数据赛道热度也持续火热。大数据时代为企业提供 Hadoop 服务的 Cloudera,也推出了新一代数据平台 CDP,并逐渐替代以往的大数据平台 …

大数据在线离线一体化解决方案最佳实践

简介: 本文重点介绍大数据产品集通用解决方案,即大数据在线计算离线计算一体化解决方案,并通过真实案例模拟来说明此通用解决方案在具体项目中是如何落地的。 概述 本方案重点要落地的业务是中央网信办网络安全应急指挥中心相关业务&#x…

基于MaxCompute的大数据安全方案

简介:随着法律的完善,数据安全,信息安全,网络安全,升级成国家安全,所以数据安全不管对用户,还是对公司也都会变的越来越重要。做为大数据云数仓解决方案的领导者,阿里云MaxCompute在…

数据仓库的分层架构与演进

简介:分层架构很容易在各种书籍和文档中去理解,但是把建模方法和分层架构放在一起就会出现很多困惑了。接下来,我会从数据研发与建模的角度,演进一下分层架构的设计原因与层次的意义。 分层架构很容易在各种书籍和文档中去理解&a…

数据治理之参考数据与主数据管理

简介:最近凑巧参与了一次某行业的业务共创会议,期间讨论到了主数据系统,还有我们该如何参与主数据系统建设的话题。说实话,我一直以为我不会有机会参与到主数据与参考数据系统的话题中去,所以,又去把DAMA的…

如何在云端重塑内容生产?来看这场虚拟人主持的发布会

简介:「智能媒体生产」产品全新升级 3月30日,阿里云视频云在线上举行了一场由虚拟人助力主持的「智能媒体生产」产品升级发布会,活动围绕产品能力的展现、视频生产流程的革新、高效生产背后的技术先进性,阐释了企业如何在云端重塑…

阿里开源自研工业级稀疏模型高性能训练框架 PAI-HybridBackend

简介:近年来,随着稀疏模型对算力日益增长的需求, CPU集群必须不断扩大集群规模来满足训练的时效需求,这同时也带来了不断上升的资源成本以及实验的调试成本。为了解决这一问题,阿里云机器学习PAI平台开源了稀疏模型高性能同步训练…

Serverless 遇到 FinOps,云成本问题有解了!

Key Takeaways:1. 尽管 Serverless 的迅猛发展吸引了广泛深入的关注,Serverless 函数总成本的事先估计仍缺乏有效的理论指导。本文基于 FunctionGraph 在 Serverless 领域的 FinOps 探索和实践,提出业界首个 Serverless 函数总成本估计模型。…

Apsara Stack 技术百科 | 联结良性生态,筑千行百业的数字基石

简介:作为现今IT领域最重要的课题:基础设施云化,离不开与伙伴的携手合作,如何让云上解决方案能充分释放价值的同时形成一个相互依存的自循环生态系统,混合云君来跟你聊聊~ 生态系统这个词在维基百科上的定义是&#xf…

用户留存建模实践

简介:在流量分析型产品的用户分析模块中,留存、互访、新老客构成等数据都是有效衡量用户粘性与促活召回的关键性指标;但是,我们发现在很多流量运营的业务场景中,留存分析建模都显著存在着设计和计算上的诸多问题。本文…

ACK One 构建应用系统的两地三中心容灾方案

简介:本文侧重介绍了通过 ACK One 的多集群应用分发功能,可以帮助企业管理多集群环境,通过多集群主控示例提供的统一的应用下发入口,实现应用的多集群分发,差异化配置,工作流管理等分发策略。结合 GTM 全局…

英特尔On技术创新峰会:助力开发者解决当前和未来的挑战

第二届英特尔On技术创新峰会于2022年9月27日在美国加利福尼亚州圣何塞市开幕。在本届峰会上,英特尔向齐聚一堂的软硬件开发者们分享了在构建以开放、选择和信任为原则的生态系统方面的最新进展——从推动开放标准以使“芯片系统”(systems of chips&…

你不知道的 HTTPS 压测

简介:随着互联网安全规范的普及,使用 HTTPS 技术进行通信加密,实现网站和 APP 的可信访问,已经成为公认的安全标准。本文将介绍针对 HTTPS 协议做压力测试的关注点,以及使用 PTS 做 HTTPS 压测的技术优势和最佳实践。 …

数据湖—Delta Lake

简介:Delta Lake 是 DataBricks 公司开源的、用于构建湖仓架构的存储框架。能够支持 Spark,Flink,Hive,PrestoDB,Trino 等查询/计算引擎。作为一个开放格式的存储层,它在提供了批流一体的同时,为…

2022杭州云栖大会定档11月3日至5日:技术产品发布+超4万平科技展

9月28日消息,记者从云栖大会组委会获悉,2022杭州云栖大会将于11月3日至5日在杭州云栖小镇举办。今年云栖大会以“计算进化未来”为主题,在3天内设置两场主论坛,70多场数字技术、产业和生态分论坛,以及4万平米智能科技全…

阿里云RemoteShuffleService 新功能:AQE 和流控

简介:阿里云EMR 自2020年推出 Remote Shuffle Service(RSS)以来,帮助了诸多客户解决 Spark 作业的性能、稳定性问题,并使得存算分离架构得以实施。为了更方便大家使用和扩展,RSS 在2022年初开源(https://github.com/alibaba/Remot…

如何使用Delta Lake构建批流一体数据仓库

简介:Delta Lake是一个开源存储层,它为数据湖带来了可靠性。Delta Lake提供了ACID事务、可扩展的元数据处理,并统一了流式处理和批处理数据处理。Delta-Lake运行在现有数据湖之上,并且与Apache Spark API完全兼容。希望本篇能让大…

中国峰会|下一代云基础架构,赋能企业云上发展

点击上方入口立即【自由构建 探索无限】一起共赴年度科技盛宴!马上点击“阅读原文”了解更多亚马逊云科技中国峰会让我们共同见证亚马逊的一小步云计算的一大步扫码【立即报名】直通大咖云集的亚马逊云科技中国峰会!

Delta Lake基础介绍(商业版)

简介:介绍 Lakehouse 搜索引擎的设计思想,探讨其如何使用缓存,辅助数据结构,存储格式,动态文件剪枝,以及 vectorized execution 达到优越的处理性能。 作者:李洁杏,Databrick资深软…