估值百亿独角兽爱学习教育集团:通过云原生实践与时间赛跑

简介: iiMedia Research(艾媒咨询)数据显示,在线教育市场规模保持逐年增长的态势,2019年在线教育市场规模已突破4000亿元。在疫情的助推下,在线教育加速渗透,市场空间有望进一步打开,预计2020年中国在线教育市场规模将达到4538亿元。

13.jpg

作者:山猎

爱学习教育集团的前身为高思教育,成立于2009年,以中小学课外培训起家,曾经的定位是K12培训机构;2014年,爱学习教育集团发力B端市场,目前在2B领域获得了全国各地办学机构的广泛认可,由K12培训机构升级为K12教育供给平台。

2019年4月份,爱学习教育集团完成由华平投资领投的1.4亿美元D轮融资。2014年以前,作为一家“教育产品研发”企业,爱学习教育集团为3-18岁年龄层的孩子提供个性化的教育产品方案及所有与教育相关的服务,旗下拥有“思泉语文”、“高思数学”、“高思VIP一对一”、“中学理科”等互联网教育产品:“乐乐课堂”、“爱学习”、“爱上古诗”“爱尖子”、“爱提分”等多个全国著名的学习子品牌,这些产品目前已经被大量的中小学辅导机构及公立学校引进,普遍提升了孩子的学习体验和学习效果。

2014年,在不断发展进化当中,爱学习教育集团(当时还叫高思教育)毅然决然的转型2B领域。据了解,到2029年,爱学习教育集团希望服务全球1亿学生和500万老师,助力50万所学校,以引领行业的内容和科技给学生带来美好的学习体验。

在线教育市场竞争激烈,爱学习是如何脱颖而出?

丰富的互动场景提升用户体验,稳定性如何实现?

近些年,在线教育行业飞速发展,为整个社会的知识传播提供了前所未有的便利性。通过多种形式的在线教育平台,学员与教师即使相隔万里也可以开展教学活动,真正打破了时间和空间的限制。基于流媒体传输技术兴起的在线课堂,可以让师生拥有同处一个教室面对面授课听课的真实体验,受到了广大用户的欢迎。

流媒体传输技术是建设在线课堂类应用需要使用到的核心技术,但要打造一款真正优秀的在线课堂应用,仅仅依靠流媒体传输是不够的,只有融入丰富的课堂互动场景才能提升用户体验,让学员的学习效率倍增。这些互动场景包括提问、发言、跟读、点赞、教材导航、白板内容实时展示等,尽可能的提升这些互动场景的操作流畅度,是一款在线课堂类应用竞争力的体现,也是众多在线教育平台技术团队的共同追求。爱学习教育的研发团队,就通过不断迭代的技术手段,将在线课堂互动场景的用户体验提升到了极致。

线上用户量的飞速增长对爱学习研发团队来说是一个巨大挑战,借助于云计算弹性伸缩能力,视频直播可以直接使用云服务以满足高并发需求,但真正的难题是如何支撑互动场景的稳定运行。成熟的分布式微服务架构通过节点水平扩容可以轻松的应对HTTP请求量的突增,但标准的HTTP通讯只能解决由客户端到服务端的单向请求,如下图所示:

image.png

在线课堂互动场景涉及不同用户之间的互相通讯,以及服务器向客户端的主动消息推送,需要建立类似这样的通讯模型:

image.png

拿课堂发言的场景为例,一位学生提交发言的文字内容后,同一个课堂的其他用户都能够看到这位学生的发言。为了确保发言的内容不违规,最好的方式是服务端先对内容审核一下,过滤掉其中的敏感信息后,再推送给课堂的其他用户,类似这样的流程:

image.png

因此,在线课堂互动的本质是服务端和客户端之间的双向消息通讯,建立一个健壮、可扩展、高性能、高成本的双向消息通讯机制,这是实现线课堂互动场景的技术根基。标准的HTTP协议没有办法实现服务端主动向客户端推送消息的业务场景,因此传统的Web架构无法满足在线课堂互动需求。对于这个难题,业界也存在多种解决方案,最简单的方式是对HTTP进行少许改造,让客户端周期性对服务端进行询问,以拿回属于自己的消息,这就是基于HTTP的轮询(Polling)方案:

image.png

这个方案能一定程度上实现服务端主动向客户端推送消息,但性能极差,不但实时性满足不了要求,在没有消息的情况下还会产生大量空轮询。此外还有一种基于HTTP的长轮询(long polling)方案,是对普通轮询方案的改进,能解决空轮询问题,但优化程度非常有限,没有办法满足互动场景对于实时性的要求。

在基于HTTP协议的方案中,能原生实现服务端与客户端双向通讯的是WebSocket方案,通过建立WebSocket连接,服务端能实时地将消息推送给客户端,这也是一些基于网页的轻量级IM所普遍采用的方案。爱学习的研发团队也曾考虑过通过WebSocket方案实现课堂互动场景,但经过短暂的预研后,他们发现这个方案存在很大的局限性。在课堂互动场景中,有两个非常明显的特点:

(1)单个消息往往会同时发送给客户端。前面提到的发言场景就是一个很典型的例子,用户在课堂上的发言会被这个课堂的所有其他用户看到。

(2)在线的用户量大,高峰期数万个课堂同时开课。WebSocket方案需要让服务端和每一个客户端建立连接,如果需要推送同一笔消息给多个客户端,需要在服务端自行实现这个逻辑。

image.png

当用户量急剧上升的时候,这个架构对于服务端会造成巨大的压力,很难支持海量用户同时在线,因此爱学习的研发团队决定弃用WebSocket方案,尝试其他的方式来解决。

基于TCP或UDP自行实现应用层通讯协议也是爱学习进行过深入预研的方案,这种方式灵活度非常高,可以通过定制化的协议对消息的传输实现任意扩展,但要从头到尾设计一套应用层通讯协议,是一项极其复杂的工作,需要处理多个难题,如:

• 连接异常如何处理?
• 客户端断线如何重连?
• 消息在传输过程中丢失如何重发?
• 身份验证和权限管理如何实现?
• 如何保证服务端节点如何实现水平扩容?

这些都是开发要考虑的因素,爱学习的研发团队虽然有能力将这些细节都照顾周全,设计一套适合于自身业务场景的通讯协议,但需要投入的时间成本是非常大的,面临的风险也非常高。在业务快速发展的大背景下,研发团队需要和时间赛跑,重新寻找可以快速支撑海量用户同时在线的课堂互动方案。

通过不断技术预研所积累下来的经验,爱学习的研发团队得出了最终的结论:在技术架构上要能做到如下几点,才能满足他们在线课堂互动的需求:

(1)能支撑海量客户端同时在线;
(2)稳定,高可用;
(3)性能不满足要求时,服务端能水平扩展;
(4)通过一个中间模块进行消息分发,减少消息复制的成本;
(5)简单易用,可以快速上线。

这其中,能满足4和5的最佳方案基于MQTT协议来实现。MQTT是一个基于客户端-服务器的消息发布/订阅传输协议,为低带宽和不稳定的网络环境中的设备提供可靠的网络服务。MQTT协议具有设计思想开放、简单、轻量、易用的特点,能提供一对多的消息发布,从而解除应用程序之间的耦合,也提供了消息必达性的保障,是非常适合用于移动客户端消息推送的。
image.png

但MQTT毕竟只是一个协议,需要有成熟稳定的产品来支撑,才能用于大规模的商用场景。开源界提供的几套MQTT实现方案,都没有经过严谨的测试和商用考验,客户端数量达到1000个以后性能急剧下降,根本无法支持万级客户端同时在线。

围绕课堂互动场景,爱学习研发团队和阿里云技术专家进行了深入交流,通过数轮的评估测试后,终于决定使用阿里云微消息队列MQTT来搭建他们的在线课堂互动平台。相比开源方案,阿里云微消息队列MQTT在阿里巴巴内部经过了多年的验证和演进,能够支撑千万级设备在线连接,百万级消息并发,以及毫秒级消息推送。其采用分布式理念进行设计,无单点瓶颈,各组件之间均可以无限水平扩展,确保容量可弹性伸缩,并对用户透明。

image.png

在这个架构中,位于互联网上的客户端设备通过标准的MQTT协议接入阿里云微消息队列MQTT。MQTT协议的SDK几乎覆盖了所有主流的开发语言,而且能非常好的适应移动客户端网络不稳定的情况。位于云上的服务器集群通过RocketMQ协议接入消息队列RocketMQ,并通过RocketMQ与MQTT之间的协议转换实现服务端与客户端之间的双向互通。

为什么要引入一个新的组件消息队列RocketMQ,并让服务端的实例通过RocketMQ协议接入呢?有三个主要原因:

(1)相比客户端实例,服务端实例在规模上要小几个数量级,但单实例的消息吞吐量又比客户端要大几个数量级。在一个典型的在线课堂场景中,有数万甚至几十万级的客户端设备同时接入,而每个客户端每秒钟的消息收发量不会超过10条;服务端的情况就恰恰相反,100个实例的规模集群已经是非常大规模的集群了,而每个服务端实例1秒内可能要处理上万笔消息。服务端和客户端之间天然的区别这就决定了他们需要使用不同特性的通讯协议进行接入,以实现性能和效率的最大化。

(2)当服务端的处理能力存在不足时,消息需要在队列上进行暂存。而RocketMQ的引入为MQTT提供了消息的存储。

(3)服务端集群的多个实例之间隐含着对等和任务分摊的关系,通过RocketMQ的集群消费模式恰好就能够提供原生的负载均衡机制。

回到课堂发言的场景,发言内容提交以后,通过负载均机制,服务端集群中的某一个实例拿到发言内容,在审核完成后,只需要将消息投递给MQTT 云服务,就能分发给同一个课堂的其他用户了。这样对于服务端实例而言,只需要和MQTT云服务建立一个连接,就能同时为上万个用户提供服务。

image.png

业务高峰期,当服务端实例出现了性能瓶颈的时候,只需要增加服务端实例的数量,就能水平线性的提升。而MQTT云服务本身的性能提升则更加简单,只需要在规则上进行升配就可以实现,可以做到对应用完全无感知。

爱学习的研发团队基于这套架构,半个月的时间就搭建了一套完整的课堂互动系统。开发团队不需要在应用层关心弱网络环境、断线重连、异常处理、海量并发、系统高可用等复杂的技术问题,极大程度上降低了开发成本,提升了用户体验。

为了支持“天空之城”计划带来的用户量急剧上升,爱学习教育对这套系统进行了多次扩容,成功抗住了数次流量洪峰,确保了业务的稳定运行。(补充:为响应教育部“停课不停学”的呼吁,帮助更多本地K12机构及时转型线上,爱学习教育集团推出“天空之城”计划,开放优质内容和在线直播能力。已有9000多家机构选择通过爱学习在线平台进行线上授课,爱学习正在帮助越来越多的机构顺利转型,共筑“天空之城”。)

“天空之城”计划受全社会的高度认可的同时,爱学习的研发团队也对系统架构进行持续的迭代,并将MQTT技术用在更多的云端双向互通场景,以应付未来更多的挑战。正如爱学习教育集团联合创始人、集团总裁李川所言:“我们喜欢做价值更大的事儿,未来还有更美好的期待。”

 

 

原文链接
本文为阿里云原创内容,未经允许不得转载。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/515094.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

腾讯云~安装ActiveMQ

文章目录1. docker 构建2. 腾讯云防火墙策略3. 效果图1. docker 构建 docker pull webcenter/activemq mkdir /app/activemq/log -p docker run --nameactivemq \-itd \-p 8161:8161 \-p 61616:61616 \-e ACTIVEMQ_ADMIN_LOGINadmin \-e ACTIVEMQ_ADMIN_PASSWORD123456 \--res…

如何实现一个跨库连表SQL生成器?

简介: 用户只需在前端简单配置下指标,系统即可自动生成大宽表,让用户查询到他所需要的实时数据,数据源支持跨库并支持多种目标介质。这样的数据全局实时可视化如何实现?本文从需求分析开始,分享自动生成SQL…

plsql 设置字体+工具栏图标大小调整

文章目录1. 字体设置2. 工具图标大小1. 字体设置 字体(微软雅黑)大小(10号)就可以 各种字体调整 2. 工具图标大小

云原生时代老牌IDC巨头谋求转型,世纪互联成立新品牌“互联科技(NEOLINK)”

编辑 | 宋慧 出品 | CSDN云计算 头图 | 世纪互联全新子品牌战略发布会现场图 4月28日,世纪互联举行2021新品牌战略发布会,正式发布全新子品牌“互联科技”(NEOLINK)。此次世纪互联整合集团内新零售及第一线事业群、成立新基建IDC…

No binding operation info while invoking unknown method with params unknown 异常解决

浏览器中访问WebService,返回异常, 是由于访问地址缺少wsdl后缀

如何管理越来越多的 operator?OLM 给你答案

简介: OLM(Operator Lifecycle Manager) 作为 Operator Framework 的一部分,可以帮助用户进行 Operator 的自动安装,升级及其生命周期的管理。同时 OLM 自身也是以 Operator 的形式进行安装部署。本文我们将来了解一下 OLM 的基本架构和安装使…

兴趣标签体系告诉我,闲鱼的95后是这样的...

作者:闲鱼技术-兆晗 背景与挑战 — — "水果糖小椿 M39 暂挂" — — "列表科幻?" 不知大家能否读懂上面的对话,但在闲鱼,这样的对话每天都在发生。数据显示,闲鱼约30%的用户年龄不满25岁。了解这…

搭建Redis集群遇到的问题:Waiting for the cluster to join~~~

问题: 搭建Redis集群的过程中,执行到cluster create : … 的时候,发现程序发生阻塞,显示:Waiting for the cluster to join 的字样,然后就无休无尽的等待… 遇到这种情况大部分是因为集群总线的端口没有开…

英特尔助力完善AI人才培养,携手微软共促地球可持续发展

2021年4月22日,英特尔于第52个世界地球日期间举办了主题为“为企业寻良将,为人才筑舞台”的网络研讨会,旨在探讨高科技企业如何聚焦AI技术,赋能人才发展,为企业引荐人才,为人才提供机会,来共建美…

云原生除了K8S、微服务,还有...?

来源 | 无敌码农责编 | 寇雪芹头图 | 下载于视觉中国云原生(Cloud Native)是最近技术圈一个比较火的名词,相信大家或多或少都听说过。不过对于大多数普通研发朋友来说,"云原生"这个词多少可能还是有些陌生,以至于刚开始听到这个词时…

Service Mesh 在超大规模场景下的落地挑战

简介: 在实际落地方面,众多企业都在积极探索 Service Mesh 在大规模场景下的应用。 作者 | 至简,阿里云高级技术专家 随着微服务软件架构在互联网企业的广泛实践,新一代微服务软件架构技术悄然兴起, Service Mesh 便是…

一针一线皆关“云” 报喜鸟以匠心融合科技

简介: 为了持续增强品牌竞争力,更好地实现数据有效管理,在数据爆发式增长时能够弹性、及时扩容,作为行业领军者的报喜鸟决定融入云计算的大潮中,而将原有业务高效、平滑地迁移至云端就理所当然地成为整个环节中非常关键…

“一云多芯、三V一体” 麒麟信安云融合虚拟化方案助力信创轻松上云

“上云是常态,不上云是例外”。国际上IT架构已从“计算机网络”向“云端”演进,云计算技术的蓬勃发展为整个IT行业带来了巨大变革。据专家观点,到2023年,中国政府和大型企业上云率将超过60%,全栈自主可控云将成为政府和…

海量结构化数据解决方案-表格存储场景解读

简介: 数据是驱动业务创新的最核心的资产。不同类型的数据如非结构化数据(视频、图片等)、结构化数据(订单、轨迹),面向不同业务的使用要求需要选择适合的存储引擎,能够真正发挥数据的价值。针对…

​谁是信创担当 《2021中国信创生态市场研究报告》今日正式发布

1986年3月,我国启动国家高技术研究发展计划——863计划,我国坚持走信息技术应用自主创新之路,全面拉开序幕。 三十五年来,我国加强自主创新,并在民用实践中不断提升产品及技术可用性,实现从小范围推动到“…

戏说云栖,如果这些名人参加云栖大会。。。

导语:参加云栖大会是怎样一种体验?当人们在谈云栖大会时,到底在聊什么?如果这些名人参加云栖大会,他们是不是这样想? 看你脑洞清奇,是万中无一的创意奇才~你就是评论区最皮的仔! 上…

如果故障选择了你……

简介: 总以为混沌工程离你很远?但发生故障的那一刻不是由你来选择的,而是那一刻来选择你,你能做的就是为之做好准备。混沌工程在阿里内部已经应用多年,而ChaosBlade这个开源项目是阿里多年来通过注入故障来对抗故障的经…

存储基础:磁盘 IO 为什么总叫你对齐?

‍‍来源 | 奇伢云存储头图 | 下载于ICphoto存储 IO 重要的一个知识点划重点:存储 IO 要对齐。资深存储人员为啥总叫你注意 IO 对齐的?机械磁盘 IO 为什么要 512 对齐呢,SSD 盘为啥要 4K 对齐?不对齐又会如何?重要的知…

如何理解这6种常见设计模式?

简介: 设计模式能够帮助我们优化代码结构,让代码更优雅灵活。有哪些常见的设计模式?如何合理运用?本文分享作者对工厂模式、单例模式、装饰模式、策略模式、代理模式和观察者模式的理解,介绍每种模式的模式结构、优缺点…

构建在线教育弹性高可用视频处理架构实战

简介: 对于负责建设视频处理系统的技术团队而言,这样的业务场景就留给了他们一系列的挑战。 前言 近些年,在线教育行业飞速发展,为整个社会的知识传播提供了前所未有的便利性。通过多种形式的在线教育平台,学员与教师…