移动后端支持平台Parse将API由Ruby迁移到Go

Charity Majors是移动后端支持平台Parse的工程师。近日,他撰文介绍了他们将API从Ruby迁移到Go的过程。

\\

2011年,Parse借助Ruby on Rails快速推出了第一个版本。他们用Unicorn作为HTTP服务器,用Capistrano部署代码,用RVM管理环境,并用许多开源gems处理YAML解析、oAuth、JSON解析、MongoDB及MySQL等方面的工作。此外,他们还用Chef管理他们的基础设施。

\\

起初,平台运行良好。但随着代码库的增长,部署时间越来越长,Unicorn服务器无法很平稳地重启。到2012年底,他们有200个API服务器运行在m1.xlarge类型的实例上,每个实例24个Unicorn工作进程。该平台每秒需要为来自60000个移动应用的3000个请求提供服务。一次完整部署或回滚需要20分钟。另外,在通常的Ruby on Rails设置中,工作进程池大小固定,每个工作进程一次只能处理一个请求。随着API流量和应用数量的增加,“一个请求一个进程”的Rails模型开始无法满足平台的扩展需求,而增加数据库和工作进程也增加了故障点和性能退化的可能。

\\

于是,他们认为,他们需要迁移到一个完全不同于Rails的异步工作模型。他们对比了如下选项:

\\
  • EventMachine:绝大多数Ruby gems都不是异步的,而且许多不是线程安全的,所以经常很难找到一个库可以异步地处理一些常见任务。\\t
  • JRuby:JRuby从根本上说还是Ruby,同样缺少异步库支持。而对于Java,他们的后端或Ops团队不愿意部署和调优JVM。\\t
  • C++:他们现有的C++代码已经难以调试和维护。与其它现代编程语言相比,C++开发的效率不是很高。C++也缺少一些他们需要的库,比如HTTP请求处理。C++可以处理异步操作,但并不好用。\\t
  • C#:C#有最好的并发模型,并且支持Async和Await。但真正的问题在于,Linux对C#开发的支持不够好,缺少一些与常用开源工具互操作的库。如果选择C#,那么他们就需要对工具链做重大调整。\\t
  • Go:同C#一样,Go也在底层内置了异步操作。MongoDB Go驱动程序可能是现有最好的MongoDB驱动程序,而与MongoDB的复杂交互是Parse的核心所在。Goroutines比线程更轻量级。\

最终,他们选择了Go,用它重写了EventMachine推送后端、核心API服务器,实现了Rails中间件的处理功能,结果:Parse平台的可靠性提高了一个数量级;API不再因为数据库和后端服务的增加而日益变得脆弱;由于去掉了大量的gems和隐含假设,代码库变得更干净;Ops团队不用每周处理多次Ruby API故障了;预分配的API服务器池缩减了约90%;移除了孤立的Rails API服务器筒仓,简化了架构;完整集成测试的时间由25分钟缩减至2分钟;完整API服务器部署(包含滚动重启)的时间由30分钟缩减至3分钟;Go API服务器启动更平稳。

\\

虽然Parse成功地实现了迁移,但是许多网友都认为Majors给出的选择理由并不充分。网友pron指出,JVM易于监控、控制、调试和性能分析。在大多数情况下,JVM调优只需要设置GC方式、最大堆大小和新生代比率三个值。对此,Majors的答复是,“我们讨厌有关Java和JVM的一切”。网友headius则为Parse团队没有试用JRuby感到可惜,因为单个JRuby实例就可以处理成百上千的并发请求,而且不需要采用异步方式。他认为,JRuby团队不需要重写就可以解决Parse的问题。网友Zazi Bazuka则这样评论道:

\\
\

我讨厌这篇博文,攻击Ruby成了现在的一种趋势。但攻击总是来自不了解Ruby生态系统的人。为什么不使用Puma或其它多线程服务器?!为什么使用EventMachine?互联网上到处都是不应该使用它的文章,你们应该使用celluloid.io代替它。

\
\\

Majors的文章在Hacker News上也引发了激烈的讨论,其中许多网友同样对Parse的选择过程存在疑问。网友aikah就表示:

\\
\

当了解业务域和性能问题时,Go是一个不错的迁移目标。但是,我不推荐初学者用它构建安全的Web应用程序,因为……Go确实不适合用于传统Web站点的快速开发。让我吃惊的是,Parse用Rails编码,我原以为他们以Node.js为基础构建,因为Cloud Code用了JS。

\
\\

对此,lacker答复说:

\\
\

我们考虑过它。那时,一个很大的Node代码库看上去很难维护。不过,工具比那时好了。如果我们现在重新讨论,我认为,采用Node的理由会更令人信服,如果我们等到ES6成为标准后再讨论,理由还会更充分。

\
\\

感谢郭蕾对本文的审校。

\\

给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ,@丁晓昀),微信(微信号:InfoQChina)关注我们,并与我们的编辑和其他读者朋友交流(欢迎加入InfoQ读者交流群06e1fec4a87eca3142d54d09844c629f.png)。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/460092.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

linux 虚拟钢琴程序,基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)...

基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)2016-08-22 0 0 0 4.0分其他1积分下载如何获取积分?基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)提供稳定,丰富…

一个从源代码里提取中文字符串的java类

2019独角兽企业重金招聘Python工程师标准>>> 工作中需要优化代码里的中文警示语和异常信息,实在比较多,所以就写了个程序专门从代码里提取中文字符串。 java做的,比较简单,放上来备忘 package com.extractstr.app;impo…

oracle RAC切换归档

(转自leshami) RAC环境下的归档模式切换与单实例稍有不同,主要是共享存储所产生的差异。在这种情况下,我们可以将RAC数据库切换到非集群状态下,仅仅在一个实例上来实施归档模式切换即可完成RAC数据库的归档模式转换问…

linux启用ipmi服务,使用 ipmitool 实现 Linux 系统下对服务器的 ipmi 管理

简介: IPMI 是一种可扩展的标准,它定义了如何监控硬件和传感器、控制系统部件以及记录重大事件,随着 ipmi 技术在服务器中的应用,利用 ipmi 的众多优势就成为服务器管理特别是集群管理中不可缺少的部分。本文首先介绍了 ipmi 的一…

linux中bc用法英文,使用GNU bc在Linux Shell中进行数学运算

在 shell 中使用 bc 更好地做算数,它是一种用于高级计算的数学语言。大多数 POSIX 系统带有 GNU bc,这是一种任意精度的数字处理语言。它的语法类似于 C,但是它也支持交互式执行语句和处理来自标准输入(stdin)的数据。因此,它通常…

Linux C Socket编程原理及简单实例

部分转自:http://goodcandle.cnblogs.com/archive/2005/12/10/294652.aspx 1. 什么是TCP/IP、UDP? 2. Socket在哪里呢? 3. Socket是什么呢? 4. 有很多的框架,为什么还在从Socket开始? 5. Linux C…

蜉蝣极客

蜉蝣极客 百科名片 蜉蝣目(英文:mayfly,学名:Ephemeroptera)通称蜉蝣,具有古老而特殊的性状,是最原始的有翅昆虫。和蜻蜓目可同分为古翅次纲,他们的翅不能折叠。蜉蝣目昆虫体形细长…

解决Web部署 svg/woff/woff2字体 404错误

原文:解决Web部署 svg/woff/woff2字体 404错误问题:最近在IIS上部署web项目的时候,发现浏览器总是报找不到woff、woff2字体的错误。导致浏览器加载字体报404错误,白白消耗了100-200毫秒的加载时间。 原因:因为服务器IIS不认SVG&am…

压缩感知先进——关于稀疏矩阵

前《初识压缩感知Compressive Sensing》中我们已经讲过了压缩感知的作用和基本想法,涉及的领域,本文通过学习陶哲轩对compressive sensing(CS)的课程,对压缩感知做进一步理解。针对其原理做出解说。本文较为理论性&…

基于环信sdk的陌生人交友php服务器代码开源

2019独角兽企业重金招聘Python工程师标准>>> 这个是代码结构 服务器端需要两个服务器端软件的支持: 1:weed-fs golang写的海量小文件存储工具 2:memcache 流行的缓存服务器 服务器端主要配置是 conf.php 文件,配置数据…

Linux视频 pad,Wine 1.9.10 发布下载, 改善视频输出

Wine 1.9.10最近发布下载,改进了大量的新功能和错误修正。一个显著的更新是此版本改善视频输出,更兼容目录列表,修复一些C 运行时。Wine 1.9.10 Bug 修复Month calendar control uses 0sunday for firstDayOfWeektooltips not working proper…

EXCEL数据导入dataset

一、开工必备 1、micorosoft office2007 2、VS2010、Oracle 11 二、界面 三、内部代码 (1)获取数据库连接,定义全局变量 private static string connString System.Configuration.ConfigurationSettings.AppSettings[ "connStr" ]; D…

JDBC连接MySQL数据库及演示样例

JDBC是Sun公司制定的一个能够用Java语言连接数据库的技术。 一、JDBC基础知识 JDBC(Java Data Base Connectivity,java数据库连接)是一种用于执行SQL语句的Java API,能够为多种关系数据库提供统一訪问,它由一组用Java语言…

Single Image Haze Removal(图像去雾)-CVPR’09 Best Paper

公式推导 paper闪光点 找到了一个很简洁的假设。 paper不足 代码跑起来很慢。据说2010年的ECCV那篇是改进的。

EasyUI学习总结(二)——easyloader分析与使用

使用脚本库总要加载一大堆的样式表和脚本文件,在easyui 中,除了可以使用通常的方式加载之外,还提供了使用 easyloader 加载的方式。这个组件主要是为了按需加载组件而诞生。什么情况下使用它呢? 你觉得一次性导入 easyui 的核心 m…

c语言switch scanf语句,C语言中scanf函数与switch语句

----------------switch----------------1)使用格式switch(表达式){case 常量表达式1: 语句1;case 常量表达式2: 语句2; ...case 常量表达式n: 语句n;default: 语句n1;}判断月份代码实现int main(int argc, const char * argv[]) {//定义变量int month;//提示用户输入一个月份p…

JadClipse eclipse反编译插件

A.下载JadClipse,http://jadclipse.sourceforge.net/wiki/index.php/Main_Page#Download,注意选择与eclipse版本一致的版本,我用的是Eclipse3.4,所以选择下载版本net.sf.jadclipse_3.3.0.jar B.下载Jad,http://www.…

Sublime 资源汇总

2019独角兽企业重金招聘Python工程师标准>>> 《sublime text2使用经验》:里面插件的推介和使用、截图。《Sublime Text 2 入门及技巧》:技巧,可惜是4年前的东西了。《Sublime Text 2安装插件方法详解》:介绍了使用 GoA…

c汇编语言程序框架培训,[010][x86汇编语言]学习用户程序的编写(c08.asm)

源程序来源加载程序c08_mbr.asm用户源程序:增加注释;;文件名:c08-2.asm;文件说明:用户程序;创建日期:13:08 2018/5/23;----------------------------------------------------------------------SECTION header vstart0 ;定义用户…

文件共享服务器搭建

详细需求描述1、网络拓扑图如下:2、利用虚拟机实现网络拓扑,要求如下(1)虚拟机环境使用hostonly(2)服务器要求:安装Widnwos Server 2008 R2操作系统内存要求:750MB安装五块物理SCSI磁…