node截图服务可用性报告

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

前言

服务器端截图可以做什么?

个人观点:省去跟报表有关的EDM开发,直接从系统上截图,然后发图片给用户就搞定。剩下的自己脑补。

既然这么好,为毛不赶紧弄。需要用到的工具坑太多,没有尝试,不敢拿上去用。

环境准备

如果是window环境就更简单了,大家自行处理,这里不做介绍。

  1. centos6.5(5.x版本来落后了,不要用,会出问题的。其他高级版本,自己掂量着用,公司提供给我的测试机只有6.5版本)
  2. phantomjs 2.x (1.9.x版本的各种bug,测试的时候并发一起来,进程各种crash,所以大家别脑残用1.9.x的)
  3. nodejs  0.12以上版本(因为4.x版本的gcc要求比较高,我又不会装,所以没法测4.x版本的。注意,一定要编译安装,不然会出很多问题。)
  4. 安装windows字体(按网上的说明来,安装完成要重启机器。不安装会出现中文字体不显示的问题)

安装步骤

 我知道很多人比较懒,也有很多人,这也不懂,那也不懂。所以为了不让大家浪费时间,给大家安装环境步骤,由于系统是64位,因此下面的步骤都是按64位来。windows环境下的安装,自己看文档。

安装phantomjs 2.x

  1.  到http://phantomjs.org/download.html页面下载相应的版本,https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2
  2. 解压 tar -xvfz phantomjs-2.1.1-linux-x86_64.tar.bz2
  3. 创建软链,ln -s 相应phantomjs文件夹/phantomjs /usr/bin/phantomjs   ln -s 相应phantomjs文件夹/phantomjs /usr/local/bin/phantomjs
  4. 测试phantomjs命令能不能使用(如果不可以,大家自己看着办)

安装nodejs0.12.x

参考:http://www.laozuo.org/6421.html

  1. 到官网下载node-v0.12.9.tar.gz,特别注意,是源码,不是编译后的
  2. 解压node-v0.12.9.tar.gz
  3. 进入解压后的文件夹逐步执行两条命令1 ./configure  2 make && make install
  4. 验证node -v 看看版本号是不是跟我们安装的一样

安装windows下的字体

 这个直接参考http://www.tuicool.com/articles/VfiqqiA

启动服务

  1. 拷贝源码https://github.com/angrytoro/webshot
  2. 进到根目录后,执行cnpm install来安装相关的模块(因为npm在国内太慢了,经常慢到让你安装错误)
  3. 安装模块成功后,执行node index.js,端口是3000
  4. 在浏览器上浏览

界面介绍

 直接给图说明比较方便



截图效果

由于有200kb的图片上传限制,大家将就下,到百度云盘上看qq官网截图效果

http://pan.baidu.com/s/1qXquUkc

并发请求结果

ps(在另外一台服务器上用wrk测试)

介绍下截图服务机器的硬件配置:2核cpu,4g内存

由于我在程序中限定了开启3个phantomjs,每个phantomjs最多同时做5个页面的渲染和截图。因此我开启了15个线程,保持15个链接同时请求,持续1分钟的时间,效果如下图:


五组测试数据统计

 

序号 网址 持续时间(s) 并发链接 请求总数 成功 失败 崩溃
1 qq.com 60 15 47 47 0 0
2 qq.com 60 15 54 54 0 0
3 qq.com 60 15 45 45 0 0
4 qq.com 60 15 57 57 0 0
5 qq.com 60 15 49 49 0 0
平均
60 15 50.4 50.4 0 0

从中可以看出在截取qq.com的时候,大概平均每秒处理0.84个截图请求。

当然这是在有条件限制的情况下得出的数据,在测试的时候,查看了下cpu的峰值,大概是60%,也就是说这个还有提升的空间。而且我们是用qq.com做测试,如果是比较简单的页面,速度肯定还会提升。

不信请看,我请求http://alinode.aliyun.com/blog/23这个网址的测试


这里数据显示1分钟内总共处理了150个请求。平均每秒处理2.5个

稳定性

下图是跑了1小时的报告,蛮看看。


在一个小时之内连续的对qq.com首页做截图,总共是处理了562个请求,平均每秒0.16个,太忧伤了。大家有没有发现,其实出现了202个读错误,562个超时,平均网速才225.54kb,诶,这也太坑爹了。

不知道这是什么原因造成的,到底是网速慢了,还是qq官网首页服务器做了安全策略。面对如此惨淡的数据,自信心都没了。

其实在早些时候,有尝试跑一个晚上的并发,可惜好像是因为断网问题,导致测试没有完成。之后有进行了持续6个小时的并发测试,在跑到2个多小时的时候,出现了内存溢出,导致服务中断的情况。非常的忧伤,

我都不知道为毛内存溢出(当时跑去吃饭了),好歹也有3G多的内存可以用。在启动服务后,我有观测,内存从3G多,直接降到2G左右,不过一直在这个区间徘徊,不知道为毛会出现内存溢出。

有两种猜测:

  1. 由于是测试腾讯首页,不知道腾讯会不会出现防御,导致请求页面速度变慢,然后phantomjs一直在等待,各种尝试,导致内存溢出。一般情况下,我们在浏览某个页面的时候,也会出现很卡的情况,浏览器出现假死。
  2. 由于V8的内存限制机制,导致在同时渲染15个页面的时候出现内存溢出。

其实每次的并发测试都会出现超时的情况,这个问题不知道是什么原因造成的。

理论上要渲染一个页面,其实是得花不少时间的,加载页面就大概需要2~3秒的时间,加上渲染大概至少需要5秒左右的时间,有些垃圾网站更长,然后我们还要截图,加起来,这大概得花个6~8秒的时间吧。

总结

按照目前并发测试的结果来说是不适合用于生产环境的。如果要小范围的做生产测试,还需要解决下面几个问题

  1. 将某些计算扔给GPU,毕竟GPU在渲染方面还是比较好的。
  2. 提升v8引擎的内存限制
  3. 查找内存溢出的原因并且解决

后记

服务器端截图还是挺有意思的一件事情,如果稳定性提高了,相信可以用于很多地方。由于代码是写来做测试的,所以写得挺烂的,还有很多可以改进的地方。

如果大家觉得这个点子不错,可以继续开发下去,请到github上点个赞,并给点改进意见。

转载于:https://my.oschina.net/u/137634/blog/613484

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/398936.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

java反射快速入门(二)

上一遍博文 , 简单介绍java 反射的常用接口,本遍博文, 我会结合项目开发的实际例子讲解下 java反射的使用 现在有个需求, 要将一个对象转换成xml格式, 或者将一串xml转换一个对象, 这时我们循序渐进, 先从最简单的入手 一: 方案① 场景 : NBA球员信息描述…

C#QQ邮箱验证

注意: QQ邮箱的简单邮件传输协议(SMTP)使用了SSL加密,必须启用SSL加密、指定端口。 QQ邮箱POP3/SMTP服务默认是关闭的,需要开启服务(设置>账户>开启服务)。 QQ邮箱若有独立密码&#xff0…

浅谈ASP.NET框架

本篇文章更适合具有一定开发经验,一定功底,且对底层代码有所研究的朋友!!! 本篇文章稍微偏原理且底层,有一定难度和且比较晦涩,文章粒度稍微粗些,更细粒度的,会在后续的文…

C语言之冒泡排序

假设要对含有n个数的序列进行升序排列,冒泡排序算法步骤是: 1、从存放序列的数组中的第一个元素开始到最后一个元素,依次对相邻两数进行比较,若前者大后者小,则交换两数的位置; 2、第1趟结束后,…

linux sar 历史负载,查看负载、vmstat、top、sar以及nload命令

使用w查看系统负载1.w命令,查看系统负载:单位时间内使用cpu的活动的进程有多少个[rootweix01 ~]# w #load average 后面三个数字表示1分钟,5分钟,15分钟的负载值,最合适的是逻辑cpu数量与1分钟负载一致21:10:21 up 8 m…

linux系统编程:IO读写过程的原子性操作实验

所谓原子性操作指的是:内核保证某系统调用中的所有步骤(操作)作为独立操作而一次性加以执行,其间不会被其他进程或线程所中断。 举个通俗点的例子:你和女朋友OOXX的时候,突然来了个电话,势必会打…

Intent.createChooser文件选择

实现点击Button选择文件, 在TextView上显示Uri 1 <RelativeLayout xmlns:android"http://schemas.android.com/apk/res/android"2 xmlns:tools"http://schemas.android.com/tools"3 android:layout_width"match_parent"4 android…

Git 历险记

Git历险记&#xff08;一&#xff09; 作为分布式版本控制系统的重要代表——Git已经为越来越多的人所认识&#xff0c;它相对于我们熟悉的CVS、SVN甚至同时分布式控制系统的Mercurial&#xff0c;有哪些优势和不足呢。这次InfoQ中文站有幸邀请到《Git Community Book》的译者刘…

怎样用c语言定义高幂整数,位操作运算的奇技淫巧!(附源码)

位运算百度百科如下:程序中的所有数在计算机内存中都是以二进制的形式储存的。位运算就是直接对整数在内存中的二进制位进行操作位操作的优势位运算是一种底层的运算&#xff0c;往往比我们普通的运算要快上许多许多位运算是最高效而且占用内存最少的算法操作&#xff0c;执行效…

android系统耗电量大待机,安卓手机耗电快有什么解决办法吗 安卓手机待机耗电量大怎么办...

虽然手机发展速度越来越快&#xff0c;技术也越来越高了&#xff0c;电池容量相对之前的900毫安1000毫安&#xff0c;都上升到了2000毫安到5000毫安&#xff0c;但是感觉待机的时间和正常的使用时间&#xff0c;却没有之前那么长了&#xff0c;难道手机电池容量是假的&#xff…

js 中null,undefined区别

首先摘自阮一峰先生的文章&#xff1a; 大多数计算机语言&#xff0c;有且仅有一个表示"无"的值&#xff0c;比如&#xff0c;C语言的NULL&#xff0c;Java语言的null&#xff0c;Python语言的None&#xff0c;Ruby语言的nil。 有点奇怪的是&#xff0c;JavaScript语…

六款值得推荐的Android开源框架简介

六款值得推荐的Android开源框架简介 技术不再多&#xff0c;知道一些常用的、不错的就够了。下面就是最近整理的“性价比”比较高的Android开源框架&#xff0c;应该是相对实用的。 1、volley 项目地址 https://github.com/smanikandan14/Volley-demo JSON&#xff0c;图像等的…

数据库杂谈(一)——数据库基本概念

文章目录1 数据库基本概念1.1数据库和数据库管理系统1.2 数据库系统和文件系统1.3 数据模型1.4 数据库三级模式和两级独立性1.4.1 三级模式1.4.2 二级映像功能1.4.3 数据独立性1.5 数据库发展历史及分类1.6 数据库系统的组成和生命周期1.6.1 三个概念1.6.2 生命周期1.6.3 存储管…

【转】Java删除文件夹和文件

原文网址&#xff1a;http://kxjhlele.iteye.com/blog/323657 以前在javaeye看到过关于Java操作文件的一篇文章&#xff0c;写的很好&#xff0c;但找了半天也没找到&#xff0c;就把找到底几篇文章整理一下&#xff0c;做个总结&#xff0c;算是一个学习备份…… 1&#xff0c…

数据库杂谈(二)——数据模型

2 数据模型 摘要&#xff1a;数据模型&#xff08;Data Model&#xff09;是数据特征的抽象&#xff0c;它从抽象层次上描述了系统的静态特征、动态行为和约束条件&#xff0c;为数据库系统的信息表示与操作提供一个抽象的框架。数据模型所描述的内容有三部分&#xff0c;分别是…

android编译系统apk文件,VS2012中MonoForAndroid打包编译APK文件详细图文教程

本文用于介绍Visual Studio 2012中Xamarin Mono For Android 如何打包编译APK文件&#xff0c;从如何创建Android项目&#xff0c;到如何启动调试&#xff0c;都会逐个配图讲解。1 新建项目2 选择安卓3 选择安卓程序4 随便取名和设置存放路径5 确定1 创建完一个新的项目2 点击“…

判断程序是否已经运行

近段时间&#xff0c;需要写一个小功能&#xff0c;就是需要判断程序是否已经运行。某个程序安装后&#xff0c;也许被多个用户运行。那怎样判断当前用户已经运行了此程序了呢&#xff1f;下面是Insus.NET的做法&#xff0c;就是&#xff1a;《VB.NET WinForm获取运行程序用户名…

浅谈缓存技术在ASP.NET中的运用

本篇文章虽不谈架构&#xff0c;但是Cache又是架构中不可或缺的部分&#xff0c;因此&#xff0c;在讲解Cache的同时&#xff0c;将会提及到部分架构知识&#xff0c;关于架构部分&#xff0c;读者可以不用理解&#xff0c;或者直接跳过&#xff0c; 你只需关心Cache即可&#…

Git快速入门+复习笔记

对于学习编程的同志来说&#xff0c;学习Git是必不可少的一项技术&#xff0c;如果你是第一次观看我的文章&#xff0c;欢迎关注我的频道&#xff0c;我会分享更多有趣的知识。 文章目录1 目标2 概述2.1 开发中的实际场景2.2 版本控制器的方式2.3 工作流程图3 Git安装和常用命令…

Android浏览器速度测试,Android平台浏览器网页加载速度对比评测

参与测试的浏览器手机上网已经渐渐成为人们的一种习惯&#xff0c;无论在等公交时、乘地铁时、吃饭等餐时&#xff0c;很多朋友都习惯掏出手机简单浏览一下微博、人人、新闻网站等页面。移动网络的确为我们带来了莫大的便利&#xff0c;但网速和稳定性却是移动网络的硬伤。针对…