编年史与微云

总览

我面临的一个常见问题是: 如果是单个作者,多个读者,您如何扩展基于Chronicle的系统。 尽管有解决此问题的方法,但很有可能根本不会出现问题。

微云

这是我用来描述单个线程来完成当前由多个服务器完成的工作的术语。 (或者与将单个应用程序部署到多台计算机的趋势相反)

假设扩展系统的唯一方法是分区或具有多个副本。 除非您同时拥有多个系统,否则这种扩展并不总是那么好。 所有这些都增加了系统开发,部署和维护的复杂性。 我看到的一个常见问题是,开发人员不再能够在其工作站或单元/功能测试中测试端到端系统

基于编年史的处理引擎具有不同的方法。 它们通常旨在处理您所能承受的最大负载。 即瓶颈在其他地方,例如与外部系统,网关和数据库的接触点。 基于Chronicle的处理引擎可以每秒处理100,000至1,000,000入站和出站事件,延迟介于1到10微秒之间。 这比网关可以向引擎输入数据或向引擎输出数据的速率高得多,因此从来没有一个很好的分区用例。 这是一个选择,但您不应该认为这是您需要的选择。

这样做的好处是您拥有一个确定性系统,该系统在体系结构上非常简单。 该系统是确定性的,因为您具有每条入站和出站消息的记录,这些记录可能具有微秒级的计时,并且系统的行为是完全可复制的(并且可重新启动的)。 注意:其后果之一是,仅重新启动失败的服务将无济于事。 如果它基于特定消息以特定方式失败一次,则每次重新启动时都应该以完全相同的方式失败。 这使得重现问题和测试变得更加容易。

为什么这么快?

一个线程中的一个单线程处理引擎具有

  • 无锁
  • 没有TCP延迟
  • 可以锁定到内核或CPU,以改善缓存行为。
    即它永远不会上下文切换或放弃CPU。
  • 可重用的可变对象更加实用,因此您可以避免用垃圾搅乱缓存,从而使内存访问速度提高5倍。 (有了奖金,您将不再具有GC暂停)

避免产生垃圾的真正原因

大多数Java应用程序中的一个常见问题是GC暂停时间。 您通常希望将其最小化。 我主张减少产生的垃圾,但是我不担心GC暂停,因为我还没有编写一个可以在交易四年后暂停的系统。 我通过使Eden大小大于一天中产生的垃圾量来做到这一点,并在维护时段(视情况在深夜或周末)进行System.gc()。 在低延迟应用程序中避免垃圾的主要原因是创建垃圾会导致缓存的滚动或刷新。 如果您有一个系统(套接字上的所有JVM)产生200 MB / s的垃圾,并且有20 MB的L3高速缓存,则您每隔0.1秒就会有效地用垃圾填充高速缓存。 对L3高速缓存的内存访问可能比对主内存的访问快5倍。

注意: L3缓存在套接字的所有内核之间共享,因此,如果要在所有内核上实现可伸缩性,则希望使用L1缓存(通常为32 KB),并且如果有繁忙的线程在创建32 MB / s的垃圾,则每毫秒就会充满垃圾。

结论

因此,我开始使用术语“微云”。 即在一个线程中完成整个云的工作。 我有几个这样做的客户。 跨一个系统的许多JVM所做的工作只能通过一个非常快的线程来完成。 显然,在一个工作站上测试一个线程要容易得多,并且在生产中占用数据中心的机架空间要少得多。

参考: Vanilla Java博客上的JCG合作伙伴 Peter Lawrey撰写的编年史和微云 。

翻译自: https://www.javacodegeeks.com/2013/02/chronicle-and-the-micro-cloud.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/369435.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

去除IE10自带的清除按钮

最近在工作中碰到了一个问题,原本在IE8,IE9下正常的input表单,在IE10下会出现清除按钮,即表单右侧会出现一个可以清除该表单内容的小叉。由于之前一直没有兼容过IE10,所以我专门搜了下原因。发现,该功能是微…

Linux/CentOS7install PackageError: Loaded plugins: fastestmirror

Centons7 其大概意思是fastestmirror不能使用,fastestmirror是yum的一个加速插件,具体我也没有仔细了解过,可能是系统不支持或者缺少组件导致的。 处理办法就是禁用这个插件,方法如下: [rootlocalhost ~]# vim /etc/yu…

不要仅仅依靠单元测试

当您构建一个复杂的系统时,仅仅测试组件是不够的。 这很关键,但还不够。 想象一下一家汽车厂生产并进口最高质量的零件,但组装好之后再也不会启动发动机了。 如果您的测试用例套件几乎不包含单元测试,则您将永远无法确保系统整体正…

spring mvc的工作原理

该文转载自:http://blog.csdn.net/u012191627/article/details/41943393 SpringMVC框架介绍 1) spring MVC属于SpringFrameWork的后续产品,已经融合在Spring Web Flow里面。 Spring 框架提供了构建 Web 应用程序的全功能 MVC 模块。使用 Spring 可插入的…

oracle快速插入大量数据

方法一:循环 declare -- Local variables here m integer; begin -- Test statements here--输出开始时间 dbms_output.put_line(start:||sysdate); m:0;--循环插入的数据量 for i in 1..4000 loop m:m1; --插入语句,其中admintest||m, 为admintest后面…

春天遇见Apache Hadoop

SpringSource 刚刚宣布了适用于Apache Hadoop的Spring的第一个GA版本 。 该项目的目的是简化基于Hadoop的应用程序的开发。 您可以下载该项目在这里 ,并检查了Maven的文物在这里 。 Apache Hadoop的Spring诞生是为了解决Hadoop应用程序构建不良的问题,…

linux 模拟时序,stm32GPIO模拟时序读写nandflash(K9F1G08U0B)问题

我使用的STM32F103VBT6这款芯片,K9F1G08U0B和 STM32F103VBT6连接接口有如下对应关系:ALE——PA1WE——PA2WP——PA3R\B——PC0RE——PC1CE——PC2CLE——PC38位IO口对应PE0——PE7下面4个函数,对应的是读取设备的ID,我在main函数里调用函数Nand_Flash_Re…

pat 甲级 1072. Gas Station (30)

1072. Gas Station (30) 时间限制200 ms内存限制65536 kB代码长度限制16000 B判题程序Standard作者CHEN, YueA gas station has to be built at such a location that the minimum distance between the station and any of the residential housing is as far away as possibl…

骑士周游问题

骑士周游问题 问题:在一个 8*8 的棋盘上,马按照“日”字走,给定一个起点,打印出马不重复的走完棋盘64个格子的路径。 解答:递归 回溯 (对于任一步,马能走的下一步有8个方向,但是需要…

那些容易遗忘的web前端问题

背景: 年底将至,本人这只才出门的前端菜鸟,终于有空闲的时间来整理一下最近投简历时出现的问题。有的是经常使用但是没有仔细留意造成的;有的是个人认为根本没人使用而忽略的。为了下次不出现这种错误,进行一下总结。…

使用IntelliJ IDEA的原因

介绍 我经常遇到一个问题,为什么我使用Intellij来支持另一个IDE(在本例中为Eclipse)。 大多数时候,我会通过演示IntelliJ的某些功能并展示一切的集成程度来回答这个问题。 这让我开始思考使用它的真正原因是什么。 这篇文章将试图…

linux光标美化包,使用 [ powerlevel10k ] 美化你的WSL (Linux)

使用 [ powerlevel10k ] 美化你的WSL (Linux)使用 [ powerlevel10k ] 美化你的WSL (Linux)前言关于linux终端的美化,网上的教程有很多,但对于国内的用户来说,效果往往是这样的:教程中通过以下命令安装 oh-my-zshsh -c "$(cur…

HashMap实现原理分析

1 HashMap的数据结构 数据结构中有数组和链表来实现对数据的存储,但这两者基本上是两个极端。 数组 数组存储区间是连续的,占用内存严重,故空间复杂的很大。但数组的二分查找时间复杂度小,为O(1);数组的特点是&#xf…

opencv3.2.0在vs2015下安装与配置

准备工作 VS2015OpenCV 3.2.0OpenCV配置环境变量,path下添加\opencv\build\x64\vc14\bin,新设置的环境变量需要重启才能使用测试工程 新建VC控制台空项目修改平台为x64,这一步先做源文件中加入main.cpp,测试代码:#incl…

CSS实现响应式布局(自动拆分几列)

1.css代码 <style type"text/css">.container{margin-top: 10px;}.outerDiv{float:left;width:100%;}/* 大于648像素一行两个div&#xff0c;innerDiv两个宽度为&#xff1a;(300 4 20)*2 */media screen and (min-width: 648px){.outerDiv {width: 50%}}.inne…

如何使用字节序列化双精度数组(二进制增量编码,用于低差单调浮点数据集)...

低延迟系统需要高性能的消息处理和传递。 由于在大多数情况下&#xff0c;数据必须通过有线传输或进行序列化才能保持持久性&#xff0c;因此编码和解码消息已成为处理管道的重要组成部分。 高性能数据编码的最佳结果通常涉及应用程序数据细节的知识。 本文介绍的技术是一个很好…

error

for(int i1;i<size;i) { if(ba[i]) { pos i1; break; } }输入&#xff1a; a{4,5,7,4,6,8},b4 输出&#xff1a; 位置是4&#xff08;错误&#xff0c;这儿应该是1&#xff0c;但程序未失败。&#xff09;改成&#xff1a;for(int i0;i<size;i) { if(ba[i]) { pos i1; …

c语言第一次作业,C语言培训班第一次作业 (1)

1、以下叙述中正确的是()(A)、用户所定义的标识符不允许使用关键字。(B)、分号是C语句之间的分隔符&#xff0c;不是语句的一部分。(C)、花括号“&#xff5b;&#xff5d;”只能作为函数体的定界符。(D)、构成C程序的基本单位是函数&#xff0c;所有函数都可以由用户命名。1、…

2.Python爬虫入门二之爬虫基础了解

1.什么是爬虫 爬虫&#xff0c;即网络爬虫&#xff0c;大家可以理解为在网络上爬行的一直蜘蛛&#xff0c;互联网就比作一张大网&#xff0c;而爬虫便是在这张网上爬来爬去的蜘蛛咯&#xff0c;如果它遇到资源&#xff0c;那么它就会抓取下来。想抓取什么&#xff1f;这个由你来…

对request.getSession(false)的理解(附程序员常疏忽的一个漏洞)

本文属于本人原创&#xff0c;转载请注明出处&#xff1a;http://blog.csdn.net/xxd851116/archive/2009/06/25/4296866.aspx 【前面的话】 在网上经常看到有人对request.getSession(false)提出疑问&#xff0c;我第一次也很迷惑&#xff0c;看了一下J2EE1.3 API&#xff0c;看…