一次Redis client组件性能分析

        BeetleX也扩展了RedisClient驱动,写这些高并发应用的驱动性能测试分析是必不可少的。在最近一次测试中发现测试采样度不足,引起的一些问题;通过这一次的问题也警醒一下自己在以后设计上要考虑更多细节的特性需求。

发现问题

        在写组件的时候往往会拿同样的组件产品做一些简单的测试性能对象,最近也拿BeetleX.Redis组件和其他组件做了一下性能测试,经过两次测试环境的采样发现的结果差异还是很大的,如下是两个环境的测试结果:

4核环境

20核环境

从两个测试环境的结果来看StackExchange.Redis由原来并发数量最差,到后面领先了50%。

问题所在

        这问题分析很久,包括用Redis-cli来测发现该实例的Redis极限只能达到10RPS,但测试结果来看StackExchange.Redis已远超过Redis自身的交互吞吐量了。经过查看代码和相关文档才发现StackExchange.Redis的async默认即支持Redis的pipeline特性,并完美支持多线程环境操作。

        以代码上来看StackExchange.Redis为了让组件默认支持这特性让Redis吞吐量最大化,所以在设计上也变得非常复杂和更多异步切换处理;这样引起了代码处理量比较多性能有些损耗。所以在StackExchange.Redis在配置低的情况达不到Redis满负载时浪费比较多的CPU资源性能相对就变得差了。

        当StackExchange.Redis运行在资源比较多的服务器上时,高压下轻易压爆了Redis的交互IO量时那pipeline特性就可以在IO量不变的情况下更一步提高吞吐量。这是没有默认实现pipeline的组件所能比的。

总结

        在这里不得不佩服StackExchange.Redis设计者的思路,在Client资源充足的情况把Redis的吞吐最大化发挥到极致。当然这种设计也是针对性的,他是利用Redis的特性和大量的CPU来提高Redis的吞量能力。对于没有默认支持pipeline只能跑到Redis交互的上限,受Redis的限制对应Client所使用的CPU自然也就无法上去来提高吞吐。

        StackExchange.Redis在20线程下可以跑到30%的CPU,其他则只能跑到15%. StackExchange.Redis的这种设计缺点就是Client资源比较低的情况下性能就相对来说差一些。

        所以性能好坏还真的很难通过一些简单的采样就能得出个合理的结果,关注性能更多应该关注代码是否能更好地发挥相关资源的作用。很多时候测试方式都受制定者的主观因素影响。如果没有这次测试我还真自认为BeetleX.Redis设计很不错

StackExchange.Redis超时问题

        用过StackExchange.Redis的朋友相信一定碰到Timeout的问题...,其实这个和StackExchange.Redis设计有些关系,最直接的办法是加大线程池和超时时间配置。对于CPU硬件资源少的还是加大超时时间比较好。主要原因是pipeline方式下意味着同时多个指令处理,但当前会话awaiter receive线程就一个最后会触发多个响应,如果响应的消息后面有逻辑处理那自然会影响后面消息处理。

void IResultBox.ActivateContinuations()
{if ((Task.CreationOptions & TaskCreationOptions.RunContinuationsAsynchronously) == 0)ThreadPool.UnsafeQueueUserWorkItem(s_ActivateContinuations, this);elseActivateContinuationsImpl();
}

从最终代码来看,ActivateContinuationsImpl则由当前awaiter receive线程触发,串行得太多后面的消息处理不及时就会引起超时。

ConnectionMultiplexer会每秒探测还在队列中等待响应的命令,如果有超时直接就触发对应命令的timeout(由于全局性的pipeline处理非常复杂也有可能 是处理过程存在一些问题,可以尝试用同步指令,从测试结果来看同步指令没用pipeline).

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/302761.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

男生追女生的超强数学建模分析

全世界有3.14 % 的人已经关注了数据与算法之美问题分析男生追女生,对男生来说最重要的是学习、爱情两不误。因此我们引进男生的学业成绩函数Y(t)。首先,我们不考虑男生的追求攻势,则影响该函数的因素主要是两个人的关系程度。为了便于分析&am…

java设计模式face_java设计模式之-------原型模式

一、模式定义用原型实例指定要创建对象的种类,并通过拷贝这些原型创建新的对象。二、模式场景假设此处结合23中设计模式记忆篇作出假设,不关心逻辑是否合理。柳岩在跳舞的时候烧伤了脸,再也回不到原来的型状。他就克隆一张脸。类图如下&#…

乐观锁与悲观锁各自适用场景是什么?

机制乐观锁是一种思想,具体实现是,表中有一个版本字段,第一次读的时候,获取到这个字段。处理完业务逻辑开始更新的时候,需要再次查看该字段的值是否和第一次的一样。如果一样更新,反之拒绝。之所以叫乐观&a…

你被这些网络迷题难倒过吗?

全世界有3.14 % 的人已经关注了数据与算法之美消失的正方形这是数学游戏大师马丁加德纳在《从惊讶到思考》一书中提到过的例子。重新摆放分割的小块图形后,上面的正方形中少了一个小方格,它去了哪里?我们不妨实际操作一下,做两个全…

tplink-wr841n无线路由接入到局域网三层交换机方法

把tplink-wr841n无线路由接入到局域网三层交换机方法:1.设置无线路由wan口动态获取IP,获取上级三层交换机分配的IP。不与本地局域网一个网段。2.设无线路由的lan口IP为管理IP,与wan口在不同一网段。WAN口IP地址和LAN口IP地址不能处于同一子网&#xff0c…

php值比较大小,PHP_PHP浮点比较大小的方法,本文实例讲述了PHP浮点比较大 - phpStudy...

PHP浮点比较大小的方法本文实例讲述了PHP浮点比较大小的方法。分享给大家供大家参考,具体如下:/*** 浮点数一般是不能用来比较大小的,但是我们可以用一种变通的的方式* 用var_dump输出浮点是看不出效果的,可以用serialize查看* 1.round 2.浮点…

温故知新,.Net Core遇见Blazor(FluentUI),属于未来的SPA框架

什么是BlazorBlazor是一个使用.NET生成交互式客户端WebUI的框架:使用C#代替JavaScript来创建信息丰富的交互式UI。共享使用.NET编写的服务器端和客户端应用逻辑。将UI呈现为HTML和CSS,以支持众多浏览器,其中包括移动浏览器。与新式托管平台(如…

看来要先拒绝37%的女人,才能找到真爱

全世界有3.14 % 的人已经关注了数据与算法之美在每期《非诚勿扰》节目上,面对一位位男嘉宾,24位单身女生要做出不止一次“艰难的决定”:到底要不要继续亮灯?把灯灭掉意味着放弃了这一次机会,继续亮灯则有可能结束节目之…

Java程序员从笨鸟到菜鸟之(三十)javascript弹出框、事件、对象化编程

一:弹出框 JavaScript中有三种弹出框:警告(alert)、确认(confirm)以及提问(prompt)。 1.警告(alert) 在访问网站的时候,你遇到“咚”的一声,一个小窗口出现在你面前,上面写着一段警示性的文字,或是其它的提示信息。如…

php如何将页面嵌入在另一盒子里,如何将一个盒子在显示在浏览器的正中间_html/css_WEB-ITnose...

1、通过CSS来实现1)position: absolute; top:50%; left:50%; margin-left:-101px; margin-top:-101px;2) position:absolute; left:0; top:0; right:0; bottom:0; margin:auto;2、通过JS来实现说明 在普通文档流里,margin: auto; 的意思是设置元素的margin-top和mar…

.Net日志之nlog

1. 介绍NLog是适用于各种.NET平台&#xff08;包括.NET标准&#xff09;的灵活&#xff0c;免费的日志记录平台&#xff0c;支持数据库、文件、控制台。2. 输入到文件2.1 引用nuget包<PackageReference Include"NLog" Version"4.7.6" /><PackageR…

为了证明自己有多能喝,理工科的学生竟做出这种事

全世界有3.14 % 的人已经关注了数据与算法之美当酒鬼止不住地说“我没有醉”、“再来一杯”的时候&#xff0c;他基本上已经醉得不行了。此时&#xff0c;他会说出一堆毫无逻辑的话&#xff0c;让旁人听了不知所云。这就是最为常见的酒鬼形象了。直到某一天&#xff0c;死理性派…

65 + iPhone应用程序网站创意设计灵感(上篇)

这里是一个巨大的艺术创作的iPhone APP网站设计的灵感收集。这些网站设计&#xff0c;特殊的配色方案&#xff0c;详细的图标和高品质的图形使用&#xff0c;如此精彩。希望能给你带来灵感。 Analog App Courier App Thermo App Faces Ecoki Motionoto Barista Moneybook App L…

php程序员跟java一样吗,【后端开辟】php程序员能够转java吗?

php顺序员可以转java吗&#xff1f;可以。关于专业顺序员来讲&#xff0c;在差别的开辟场景下采纳差别的编程言语是比较罕见的事变&#xff0c;所以许多顺序员在事情一段时候以后都邑控制多种差别的编程言语&#xff0c;比方不少Web顺序员都邑同时控制Java、PHP、C#等编程言语。…

你管这叫线程安全?

来来来&#xff0c;面试八股文&#xff1f;今天我们从什么叫"线程安全"聊起&#xff1f;文末"边吃边聊"。今日份的干粮&#xff1a;1.什么叫线程安全&#xff1f;2.线程安全与变量的关系&#xff1f;•变量又与堆/栈/静态存储区有密切关系什么叫线程安全&a…

经济学家告诉你,胸越大的女生越会花钱!

全世界有3.14 % 的人已经关注了数据与算法之美大概两周前回加拿大的航班上&#xff0c;我在机舱尾部跟一位空姐聊了很久。当空姐小妹双眼向下一瞥&#xff0c;略微停顿之后问我“班组要在这里呆四天&#xff0c;不知道该干什么去”的时候&#xff0c;我认认真真的为自己叹了口气…

讲100个科学道理,不如做这些有趣的理科实验!

玩具和学习看似是两个对立的东西&#xff0c;孩子天性爱玩&#xff0c;家长却希望孩子能多学习。不一定非要啃课本才能汲取知识&#xff0c;有时候&#xff0c;在轻松有趣的游戏中也能学到课堂上学不到的知识。让学习变得有趣、高效——给孩子讲100个科学道理&#xff0c;不如带…

《权力》读书笔记

1 为什么权力只为某些人所拥有我们生活在一个充满等级制度的世界里&#xff0c;等级的存在就意味着竞争&#xff0c;而且越往上&#xff0c;职位就越少&#xff0c;竞争也就越激烈。只有了解权力的原则&#xff0c;并愿意运用它们的人&#xff0c;才可以参与这样的竞争&#xf…

$_GET,$_post与$_REQUEST

PHP $_GET $_GET 变量是一个数组&#xff0c;内容是由 HTTP GET 方法发送的变量名称和值。 PHP $_POST $_POST 变量用于收集来自 method"post" 的表单中的值。 $_POST 变量 $_POST 变量是一个数组&#xff0c;内容是由 HTTP POST 方法发送的变量名称和值。 $_POST 变…

嘘!偷偷教你们一个在双十一省钱的办法!

各位小可爱&#xff0c;大可爱&#xff0c;大家晚上好~一年一度的双11即将到来&#xff01;&#xff01;&#xff01;小木冒着被砍头的风险为大家争取了好多好多福利绝对比平时更优惠更省钱哦&#xff01;&#xff01;&#xff01;活动时间&#xff1a;10月27日-11月11日&#…