移动后端支持平台Parse将API由Ruby迁移到Go

Charity Majors是移动后端支持平台Parse的工程师。近日,他撰文介绍了他们将API从Ruby迁移到Go的过程。

\\

2011年,Parse借助Ruby on Rails快速推出了第一个版本。他们用Unicorn作为HTTP服务器,用Capistrano部署代码,用RVM管理环境,并用许多开源gems处理YAML解析、oAuth、JSON解析、MongoDB及MySQL等方面的工作。此外,他们还用Chef管理他们的基础设施。

\\

起初,平台运行良好。但随着代码库的增长,部署时间越来越长,Unicorn服务器无法很平稳地重启。到2012年底,他们有200个API服务器运行在m1.xlarge类型的实例上,每个实例24个Unicorn工作进程。该平台每秒需要为来自60000个移动应用的3000个请求提供服务。一次完整部署或回滚需要20分钟。另外,在通常的Ruby on Rails设置中,工作进程池大小固定,每个工作进程一次只能处理一个请求。随着API流量和应用数量的增加,“一个请求一个进程”的Rails模型开始无法满足平台的扩展需求,而增加数据库和工作进程也增加了故障点和性能退化的可能。

\\

于是,他们认为,他们需要迁移到一个完全不同于Rails的异步工作模型。他们对比了如下选项:

\\
  • EventMachine:绝大多数Ruby gems都不是异步的,而且许多不是线程安全的,所以经常很难找到一个库可以异步地处理一些常见任务。\\t
  • JRuby:JRuby从根本上说还是Ruby,同样缺少异步库支持。而对于Java,他们的后端或Ops团队不愿意部署和调优JVM。\\t
  • C++:他们现有的C++代码已经难以调试和维护。与其它现代编程语言相比,C++开发的效率不是很高。C++也缺少一些他们需要的库,比如HTTP请求处理。C++可以处理异步操作,但并不好用。\\t
  • C#:C#有最好的并发模型,并且支持Async和Await。但真正的问题在于,Linux对C#开发的支持不够好,缺少一些与常用开源工具互操作的库。如果选择C#,那么他们就需要对工具链做重大调整。\\t
  • Go:同C#一样,Go也在底层内置了异步操作。MongoDB Go驱动程序可能是现有最好的MongoDB驱动程序,而与MongoDB的复杂交互是Parse的核心所在。Goroutines比线程更轻量级。\

最终,他们选择了Go,用它重写了EventMachine推送后端、核心API服务器,实现了Rails中间件的处理功能,结果:Parse平台的可靠性提高了一个数量级;API不再因为数据库和后端服务的增加而日益变得脆弱;由于去掉了大量的gems和隐含假设,代码库变得更干净;Ops团队不用每周处理多次Ruby API故障了;预分配的API服务器池缩减了约90%;移除了孤立的Rails API服务器筒仓,简化了架构;完整集成测试的时间由25分钟缩减至2分钟;完整API服务器部署(包含滚动重启)的时间由30分钟缩减至3分钟;Go API服务器启动更平稳。

\\

虽然Parse成功地实现了迁移,但是许多网友都认为Majors给出的选择理由并不充分。网友pron指出,JVM易于监控、控制、调试和性能分析。在大多数情况下,JVM调优只需要设置GC方式、最大堆大小和新生代比率三个值。对此,Majors的答复是,“我们讨厌有关Java和JVM的一切”。网友headius则为Parse团队没有试用JRuby感到可惜,因为单个JRuby实例就可以处理成百上千的并发请求,而且不需要采用异步方式。他认为,JRuby团队不需要重写就可以解决Parse的问题。网友Zazi Bazuka则这样评论道:

\\
\

我讨厌这篇博文,攻击Ruby成了现在的一种趋势。但攻击总是来自不了解Ruby生态系统的人。为什么不使用Puma或其它多线程服务器?!为什么使用EventMachine?互联网上到处都是不应该使用它的文章,你们应该使用celluloid.io代替它。

\
\\

Majors的文章在Hacker News上也引发了激烈的讨论,其中许多网友同样对Parse的选择过程存在疑问。网友aikah就表示:

\\
\

当了解业务域和性能问题时,Go是一个不错的迁移目标。但是,我不推荐初学者用它构建安全的Web应用程序,因为……Go确实不适合用于传统Web站点的快速开发。让我吃惊的是,Parse用Rails编码,我原以为他们以Node.js为基础构建,因为Cloud Code用了JS。

\
\\

对此,lacker答复说:

\\
\

我们考虑过它。那时,一个很大的Node代码库看上去很难维护。不过,工具比那时好了。如果我们现在重新讨论,我认为,采用Node的理由会更令人信服,如果我们等到ES6成为标准后再讨论,理由还会更充分。

\
\\

感谢郭蕾对本文的审校。

\\

给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ,@丁晓昀),微信(微信号:InfoQChina)关注我们,并与我们的编辑和其他读者朋友交流(欢迎加入InfoQ读者交流群06e1fec4a87eca3142d54d09844c629f.png)。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/460092.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

面向对象三大特征之继承(extends)——Java笔记(六)

继承:从一般到特殊的关系,是一种拓展关系,子类对象是父类的一种,也可称为”is a“的关系泛化:把子类里的共性抽取到父类里的来的过程特化:子类在父类的基础上上定义了自己特有的行为特征的过程格式&#xf…

linux 虚拟钢琴程序,基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)...

基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)2016-08-22 0 0 0 4.0分其他1积分下载如何获取积分?基于 Linux 与 VS1003 的 MIDI 电子节拍器的设计与实现,为乐器演奏(如钢琴、吉他)提供稳定,丰富…

一个从源代码里提取中文字符串的java类

2019独角兽企业重金招聘Python工程师标准>>> 工作中需要优化代码里的中文警示语和异常信息,实在比较多,所以就写了个程序专门从代码里提取中文字符串。 java做的,比较简单,放上来备忘 package com.extractstr.app;impo…

oracle RAC切换归档

(转自leshami) RAC环境下的归档模式切换与单实例稍有不同,主要是共享存储所产生的差异。在这种情况下,我们可以将RAC数据库切换到非集群状态下,仅仅在一个实例上来实施归档模式切换即可完成RAC数据库的归档模式转换问…

linux启用ipmi服务,使用 ipmitool 实现 Linux 系统下对服务器的 ipmi 管理

简介: IPMI 是一种可扩展的标准,它定义了如何监控硬件和传感器、控制系统部件以及记录重大事件,随着 ipmi 技术在服务器中的应用,利用 ipmi 的众多优势就成为服务器管理特别是集群管理中不可缺少的部分。本文首先介绍了 ipmi 的一…

eclipse 使用指南

eclipse使用指南 eclipse下载地址: 1、eclipse快捷键 2、将eclipse新建项目的默认编码GBK改为UTF-8 3、Java 编程下 Eclipse 如何设置单行代码显示的最大宽度 4、使用Eclipse创建模板并格式化代码5、Java compiler level does not match the version of the install…

sql 创建用户脚本

USE master go CREATE LOGIN jiazhuang --用户名 WITH PASSWORD sa, --密码 DEFAULT_DATABASE JiaZhuan, --数据库名 CHECK_EXPIRATION OFF, CHECK_POLICY OFF go EXEC sp_addsrvrolemember JiaZhuan, sysadmin --角色 go 要想成功访问 SQL Server 数据库中的数据…

linux中bc用法英文,使用GNU bc在Linux Shell中进行数学运算

在 shell 中使用 bc 更好地做算数,它是一种用于高级计算的数学语言。大多数 POSIX 系统带有 GNU bc,这是一种任意精度的数字处理语言。它的语法类似于 C,但是它也支持交互式执行语句和处理来自标准输入(stdin)的数据。因此,它通常…

Linux C Socket编程原理及简单实例

部分转自:http://goodcandle.cnblogs.com/archive/2005/12/10/294652.aspx 1. 什么是TCP/IP、UDP? 2. Socket在哪里呢? 3. Socket是什么呢? 4. 有很多的框架,为什么还在从Socket开始? 5. Linux C…

linux中timer的作用,linux - linux / timer.h setup_timer()到期功能不起作用? - 堆栈内存溢出...

因此,我的setup_timer()中的TimerExpire函数会引起巨大的恐慌(将在下面发布),而对TimerExpire()的常规函数​​调用实际上将输出我的输入。void TimerExpire(char* data){printk("Timer Data: %s\n", data);}setup_timer(&my_timer, Timer…

蜉蝣极客

蜉蝣极客 百科名片 蜉蝣目(英文:mayfly,学名:Ephemeroptera)通称蜉蝣,具有古老而特殊的性状,是最原始的有翅昆虫。和蜻蜓目可同分为古翅次纲,他们的翅不能折叠。蜉蝣目昆虫体形细长…

C#获取硬件信息

//硬件信息 public class GF_Hardware { /// <summary> /// cpu序列号 /// </summary> /// <returns></returns> public static string getID_CpuId() { string cpuInfo "";//cpu序列号 ManagementClass cimobject new ManagementClass(&q…

软件測试自学指南---从入门到精通

近来&#xff0c;软件測试行业发展迅速&#xff0c;企业越来越重视測试了。越来越多的人增加了測试大军中&#xff0c;非常多人也想通过自学来学习软件測试技术增加这个行业&#xff0c;可是如今软件測试的书籍越来越多&#xff0c;也良莠不齐&#xff0c;并且软件測试涉及的技…

解决Web部署 svg/woff/woff2字体 404错误

原文:解决Web部署 svg/woff/woff2字体 404错误问题&#xff1a;最近在IIS上部署web项目的时候&#xff0c;发现浏览器总是报找不到woff、woff2字体的错误。导致浏览器加载字体报404错误&#xff0c;白白消耗了100-200毫秒的加载时间。 原因&#xff1a;因为服务器IIS不认SVG&am…

linux学习交流群,求linux(ubuntu)学习交流群

匿名用户1级2015-05-14 回答ubuntu学习群&#xff1a;65563370该文章是小弟学习linux归纳出来的一些基础知识&#xff0c;也是做为自己的参考资料&#xff0c;希望各位渴望学习linux的朋友们共同学习。1、linux分区--在linux里面所有的设备、任何东西&#xff0c;在linux看来都…

Linux文件系统构成

/boot目录&#xff1a; 内核文件、系统自举程序文件保存位置,存放了系统当前的内核【一般128M即可】 如:引导文件grub的配置文件等 /etc目录&#xff1a; 系统常用的配置文件&#xff0c;所以备份系统时一定要备份此目录 如&#xff1a;系统管理员经常需要修改的文件&#xff0…

压缩感知先进——关于稀疏矩阵

前《初识压缩感知Compressive Sensing》中我们已经讲过了压缩感知的作用和基本想法&#xff0c;涉及的领域&#xff0c;本文通过学习陶哲轩对compressive sensing&#xff08;CS&#xff09;的课程&#xff0c;对压缩感知做进一步理解。针对其原理做出解说。本文较为理论性&…

红旗linux as4,可能是史上最完美的IC5141安装说明档(RHEL-AS4)

文档作者&#xff1a;Sideway联系方式&#xff1a;EMAIL:xtadwyahoo.com.cnQQ:19487607一、安装环境1、硬件需求(1)内存128M以上(2)硬盘空间10G以上(IC5141安装后约占3G)(3)能被RHEL AS4支持的显卡2、安装RHEL AS4(1)安装X Window(2)安装GNOME、KDE(3)安装所有的开发包工具(4)安…

转:upload.parseRequest为空

FileItemFactory factory new DiskFileItemFactory(); ServletFileUpload upload new ServletFileUpload(factory); upload.setHeaderEncoding("UTF-8"); List items upload.parseRequest(request); 上传是items一直是空list。导致原因是struts2把原始的…

基于环信sdk的陌生人交友php服务器代码开源

2019独角兽企业重金招聘Python工程师标准>>> 这个是代码结构 服务器端需要两个服务器端软件的支持&#xff1a; 1&#xff1a;weed-fs golang写的海量小文件存储工具 2&#xff1a;memcache 流行的缓存服务器 服务器端主要配置是 conf.php 文件&#xff0c;配置数据…