【Spring Cloud Alibaba】开源组件Sentinel

目录

  • 什么是Sentinel
    • 发展历史
    • 与Hystrix的异同
  • Sentinel可以做什么?
  • Sentinel的功能
  • Sentinel的开源生态
  • Sentinel的用户
  • 安装Sentinel控制台
    • 预备环境准备
    • Sentinel 分为两个部分:
    • 下载地址
  • 项目集成Sentinel
    • 创建项目
    • 修改依赖信息
    • 添加启动注解
    • 添加配置信息
    • 在控制器类中新增一个测试接口
    • 启动Nacos、order-sentinel-provider
  • Sentinel核心功能
    • Sentinel:分布式系统的流量防卫兵
    • 流量控制
    • 熔断降级
      • Sentinel熔断降级策略
        • 限制并发线程数进行降级
        • 通过响应时间进行降级
    • 系统负载保护
    • Sentinel核心规则
      • QPS和TPS
        • QPS
        • TPS
        • QPS VS TPS
      • RT,响应时间
      • 并发数:
      • 吞吐量
        • 系统吞吐量几个重要参数
    • 簇点链路规则
      • 配置直接流控模式——阈值类型为QPS
      • 配置直接流控模式——阈值类型为线程数
      • 接口(先访问一下),然后再去控制台
      • 配置关联流控模式——阈值类型为QPS
      • 配置流控效果——Warm Up(预热)
      • 配置流控效果——排队等待
    • 流控规则配置项的说明
    • Sentinel的降级规则
      • 回顾熔断降级
      • Sentinel熔断策略
        • RT(平均响应时间,秒级)
        • 异常比例 (ERROR_RATIO):
        • 异常数 (ERROR_COUNT):
      • 配置降级规则——降级策略为RT
      • 配置降级规则——降级策略为异常比例
      • 配置降级规则——降级策略为异常数
    • Sentinel的热点参数限流
      • 何为热点
      • 热点参数限流
      • 兜底方法
  • 附:参考百度解释:吞吐量(TPS)、QPS、并发数、响应时间(RT)几个概念
    • 响应时间(RT)
    • 吞吐量(Throughput)
    • 并发用户数
    • QPS每秒查询率(Query Per Second)

什么是Sentinel

  • 分布式系统的流量防卫兵
  • Sentinel 是阿里中间件团队开源的,面向分布式服务架构的轻量级高可用流量控制组件,主要以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度来帮助用户保护服务的稳定性。
  • Sentinel官网:https://github.com/alibaba/Sentinel/
  • Sentinel中文官网:https://github.com/alibaba/Sentinel/wiki/介绍

发展历史

  • 2012年,Sentinel诞生于阿里巴巴,其主要目标是流量控制。
  • 2013-2017年,Sentinel迅速发展,并成为阿里巴巴所有微服务的基本组成部分。 它已在6000多个应用程序中使用,涵盖了几乎所有核心电子商务场景。
  • 2018年,Sentinel演变为一个开源项目。
  • 2020年,Sentinel Golang发布。

与Hystrix的异同

SentinelHystrix
产生背景阿里巴巴公司Netflix公司
用途服务容错框架服务容错框架
支持语言Java、Go、C++Java
支持功能流量控制、熔断降级、系统自适应保护流量控制、熔断降级
线程模型单线程模型多线程模型
监控中心自带的Sentinel控制台需要借助Hystrix Dashboard
配置方式通过规则或代码配置通过注解或配置文件
隔离策略信号量隔离线程池隔离/信号量隔离
熔断降级策略基于响应时间或失败比率基于失败比率
实时指标实现滑动窗口滑动窗口(基于 RxJava)
规则配置支持多种数据源支持多种数据源
扩展性多个扩展点插件的形式
基于注解的支持支持支持
限流基于 QPS,支持基于调用关系的限流不支持
流量整形支持慢启动、匀速器模式不支持
系统负载保护支持不支持
控制台开箱即用,可配置规则、查看秒级监控、机器发现等不完善
常见框架的适配Servlet、Spring Cloud、Dubbo、gRPC 等Servlet、Spring Cloud Netflix

Sentinel可以做什么?

  • 丰富的应用场景:Sentinel 承接了阿里巴巴近 10 年的双十一大促流量的核心场景,例如秒杀(即突发流量控制在系统容量可以承受的范围)、消息削峰填谷、集群流量控制、实时熔断下游不可用应用等。
  • 完备的实时监控:Sentinel 同时提供实时的监控功能。您可以在控制台中看到接入应用的单台机器秒级数据,甚至 500 台以下规模的集群的汇总运行情况。
  • 广泛的开源生态:Sentinel 提供开箱即用的与其它开源框架/库的整合模块,例如与 Spring Cloud、Apache Dubbo、gRPC、Quarkus 的整合。您只需要引入相应的依赖并进行简单的配置即可快速地接入 Sentinel。同时 Sentinel 提供 Java/Go/C++ 等多语言的原生实现。
  • 完善的 SPI 扩展机制:Sentinel 提供简单易用、完善的 SPI 扩展接口。您可以通过实现扩展接口来快速地定制逻辑。例如定制规则管理、适配动态数据源等。
    在这里插入图片描述

Sentinel的功能

功能说明
实时监测Sentinel能够实时监测系统、网络或应用程序的活动,以便及时发现异常或威胁。
预警和警报当发现异常情况或威胁时,Sentinel能够发送警报或预警,提醒相关人员采取行动。
自动化分析Sentinel利用机器学习和人工智能等技术,能够对大量数据进行自动化分析,识别潜在的威胁和异常行为。
威胁情报Sentinel能够从不同的安全信息源获取最新的威胁情报,以帮助分析和应对威胁。
多层防御Sentinel通过多层次的防御机制,包括防火墙、入侵检测系统和反病毒软件等,来保护系统免受不同类型的攻击。
日志记录和审计Sentinel可以记录和审计系统的活动日志,以便对安全事件进行调查和分析。
自定义规则和策略Sentinel允许管理员根据自己的需求,制定自定义的监测规则和安全策略。
可扩展性Sentinel能够适应不同规模和复杂度的系统,并能够扩展以支持更大的负载和数据量。
用户友好界面Sentinel通常提供直观简洁的用户界面,使管理员能够轻松配置和监控安全系统。

Sentinel的开源生态

在这里插入图片描述

Sentinel的用户

在这里插入图片描述

安装Sentinel控制台

预备环境准备

Sentinel依赖 Java 环境来运行。请确保安装了JDK或JRE。

Sentinel 分为两个部分:

  • 核心库(Java 客户端)不依赖任何框架/库,能够运行于所有 Java 运行时环境,同时对 Dubbo / Spring Cloud 等框架也有较好的支持。
  • 控制台(Dashboard)基于 Spring Boot 开发,打包后可以直接运行,不需要额外的 Tomcat 等应用容器。

下载地址

  • https://github.com/alibaba/Sentinel/releases
  • 选择的版本:1.7.2
  • 将下载好的jar包拷贝到D:\Soft\Sentinel(需要自己创建,也可以是其他盘路径)
  • 进入D:\Soft\Sentinel,在磁盘地址栏中输入cmd,出现命令行窗口
  • 在命令行窗口输入:java -jar sentinel-dashboard-1.7.2.jar
    • 因为我的电脑上装了JDK8和JDK17,sentinel这个版本只能用JDK8运行,因此我用这个命令:C:\Program Files\Java\jdk1.8.0_281\bin>java -jar D:\soft\Sentinel\sentinel-dashboard-1.7.2.jar
      在这里插入图片描述
  • 运行成功后,访问Sentinel的控制台
  • 在浏览器中输入:http://localhost:8080
  • 输入用户名和密码:sentinel
    在这里插入图片描述在这里插入图片描述

项目集成Sentinel

创建项目

  • 指定artifactId为order-sentinel-provider
    在这里插入图片描述

修改依赖信息

在这里插入图片描述

添加启动注解

  • @EnableDiscoveryClient
@SpringBootApplication
@EnableDiscoveryClient
public class OrderSentinelProviderApplication {public static void main(String[] args) {SpringApplication.run(OrderSentinelProviderApplication.class, args);}
}

添加配置信息

spring:application:name: order-sentinel-providercloud:nacos:discovery:server-addr: localhost:8848sentinel:transport:dashboard: localhost:8080port: 8719
server:port: 8086

在控制器类中新增一个测试接口

@RestController
@Slf4j
public class LimitFlowController {@RequestMapping("/test")public String test(){log.info("=========阈值类型为QPS,Sentinel测试。");return "Sentinel调试环境已经准备";}
}

启动Nacos、order-sentinel-provider

  • 注意:直接启动订单微服务和Sentinel,会发现Sentinel中没有订单微服务的数据,因为Sentinel是懒加载机制,所以需要访问一下接口,再去访问Sentinel 就有数据了

在这里插入图片描述

Sentinel核心功能

Sentinel:分布式系统的流量防卫兵

  • 随着微服务的流行,服务和服务之间的稳定性变得越来越重要。
  • Sentinel 以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性。
  • 所以,Sentinel的核心功能包括:流量控制、熔断降级、系统负载保护。

流量控制

  • 在高并发、大流量场景下,进入系统的流量如果不加控制的话,系统就很有可能会被流量压垮。
  • 所以,在流量正式进入系统之前,需要对流量进行控制,以便使流量均匀、可控的方式进入系统。
  • Sentinel作为一个非常出色的容错组件,能够将不可控的流量经过处理转化成均匀、可控的流量。

熔断降级

  • 如果检测到系统中的某个调用链路中某个节点出现故障,比如请求超时、服务宕机或者异常比超出一定阈值时,就会对出现故障的节点的调用频率进行限制,甚至不调用出现故障的节点,让请求能够快速失败并返回,以最大程度避免影响到其他节点的服务而导致系统的级联故障。

Sentinel熔断降级策略

  • Sentinel主要通过限制并发线程数和响应时间对资源的访问进行降级
限制并发线程数进行降级
  • Sentinel可以通过限制服务节点的并发线程数量,来减少对其他服务节点的影响。
  • 例如,当某个服务节点出现故障,例如响应时间变长,或者直接宕机。此时,对服务的直接影响就是会造成请求线程数的不断堆积。
  • 如果这些堆积的线程数达到一定的数量后,对当前服务节点的后续请求就会被拒绝,等到堆积的线程完成任务后再开始继续接收新的请求。
通过响应时间进行降级
  • Sentinel除了可以通过限制并发线程数进行降级外,也能够通过响应时间进行降级。
  • 如果依赖的服务出现响应时间过长的情况,则所有对该服务的请求都会被拒绝,直到过了指定的时间窗口之后才能再次访问该服务。

系统负载保护

  • Sentinel提供了系统维度的自适应保护能力。当系统的压力和负载比较高的时候,如果还持续让大量的请求进入系统,此时就有可能将系统压垮,进而导致系统宕机。
  • Sentinel会在集群环境下,将本应服务A承载的流量转发到其他服务器上,比如转发到服务器B上。如果此时服务器B也处于高负载的状态,则Sentinel会提供相应的保护机制,让系统的入口流量和系统的整体负载达到平衡,让系统整体可用,并且能够最大限度的处理请求。

Sentinel核心规则

  • Sentinel的核心规则包括流控规则、熔断规则、热点规则、授权规则和系统规则
  • Sentinel能够对流量进行控制,主要是监控应用的QPS流量或者并发线程数等指标,如果达到指定的阈值时,就会被流量进行控制,以避免服务被瞬时的高并发流量击垮,保证服务的高可靠性

QPS和TPS

QPS
  • Queries Per Second意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数
  • 是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。
TPS
  • 是Transactions Per Second的缩写,也就是事务数/秒。
  • 它是软件测试结果的测量单位。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。
  • 客户机在发送请求时开始计时,收到服务器响应后结束计时,以此来计算使用的时间和完成的事务个数。
QPS VS TPS
  • QPS基本类似于TPS,但是不同的是,对于一个页面的一次访问,形成一个TPS;
  • 但一次页面请求,可能产生多次对服务器的请求,服务器对这些请求,就可计入“QPS”之中。
  • 如,访问一个页面会请求服务器2次,一次访问,产生一个“T”,产生2个“Q”。

RT,响应时间

  • 响应时间:执行一个请求从开始到最后收到响应数据所花费的总体时间,即从客户端发起请求到收到服务器响应结果的时间。
  • 响应时间RT(Response-time),是一个系统最重要的指标之一,它的数值大小直接反应了系统的快慢。

并发数:

  • 并发数是指系统同时能处理的请求数量,这个也是反应了系统的负载能力。

吞吐量

  • 系统的吞吐量与request对CPU的消耗、外部接口、IO等等紧密关联。
  • 单个request 对CPU消耗越高,外部系统接口、IO速度越慢,系统吞吐能力越低,反之越高。
系统吞吐量几个重要参数

分别是:QPS(TPS)、并发数、响应时间。

  • QPS(TPS):(Query Per Second)每秒钟request/事务 数量
  • 并发数:系统同时处理的request/事务数
  • 响应时间:一般取平均响应时间
  • QPS(TPS) = 并发数/平均响应时间
  • 并发数 = QPS * 平均响应时间

簇点链路规则

  • 点击簇点链路菜单,可以看到之前访问过的接口,如下所示
    在这里插入图片描述

  • 点击右侧的流控按钮,会弹出新增流控规则的提示框,如下所示
    在这里插入图片描述

配置直接流控模式——阈值类型为QPS

  • 这里,针对 http://localhost:8086/test接口进行直接流控模式
  • 在新增流控规则里阈值类型选择QPS,单机阈值输入1,表示每秒钟的请求量如果超过1,则会触发Sentinel的限流操作

配置直接流控模式——阈值类型为线程数

  • 这里,针对 http://localhost:8086/test2接口进行直接流控模式
  • 在新增流控规则里阈值类型选择线程数,单机阈值输入1,表示当调用API的线程数达到阈值时,则会触发Sentinel的限流操作

接口(先访问一下),然后再去控制台

@RestController
@Slf4j
public class LimitFlowController {@RequestMapping("/test")public String test(){log.info("=========阈值类型为QPS,Sentinel测试。");return "Sentinel调试环境已经准备";}@RequestMapping("/test2")public String test2() throws InterruptedException {System.out.println("=========阈值类型为线程数,Sentinel测试。");TimeUnit.SECONDS.sleep(2);return "Sentinel调试环境已经准备";}
}

在这里插入图片描述在这里插入图片描述在这里插入图片描述

配置关联流控模式——阈值类型为QPS

  • 这里,针对 http://localhost:8086/test3接口进关联流控模式
  • 在新增流控规则里阈值类型选择QPS,单机阈值输入5,表示当关联资源/test的QPS阈值超过5时,就限流/test3的访问
    @RequestMapping("/test3")public String test3() {System.out.println("=========阈值类型为QPS,流控模式为关联。");return "Sentinel调试环境已经准备";}

在这里插入图片描述在这里插入图片描述

配置流控效果——Warm Up(预热)

  • Warm up也叫预热模式,是应对服务冷启动的一种方案。请求阈值初始值是 threshold / coldFactor,持续指定时长后,逐渐提高到threshold值。而coldFactor的默认值是3。
    在这里插入图片描述
    @RequestMapping("/save")public String save() {System.out.println("=========阈值类型为QPS,流控模式为直接,流控效果为 Warm up预热。");return "Sentinel调试环境已经准备:预热";}

在这里插入图片描述在这里插入图片描述

配置流控效果——排队等待

  • 能够使请求均匀的通过,单机的阈值为每秒通过的请求数量,其余的请求会排队等待。
  • 另外,还会设置一个超时时间,当请求超过超时时间未处理时,会被丢弃。
    在这里插入图片描述
    @RequestMapping("/query")public String query() {System.out.println("=========阈值类型为QPS,流控模式为直接,流控效果为等待。");return "Sentinel调试环境已经准备:排队等待";}

在这里插入图片描述
在这里插入图片描述

流控规则配置项的说明

  • 资源名:资源的唯一名称,默认就是请求的接口路径,可以自行修改,但是要保证唯一。
  • 针对来源:具体针对某个微服务进行限流,默认值为default,表示不区分来源,全部限流。
  • 阈值类型:
    • QPS(每秒钟的请求数量):当调用该API的阈值达到达到阈值时候,进行限流,
    • 并发线程数:当调用该API的线程数达到阈值时,进行限流。
  • 单机阈值:与阈值类型组合使用。如果阈值类型选择的是QPS,表示当调用接口的QPS达到阈值时,进行限流操作。如果阈值类型选择的是并发线程数,则表示当调用接口的并发线程数达到阈值时,进行限流操作。
  • 是否集群:选中则表示集群环境,不选中则表示非集群环境。
  • 流控模式:
    • 直接:当API调用达到限流条件时,直接限流
    • 关联:当关联的资源达到阈值时,限流自己
    • 链路:统计从指定链路访问到本资源的请求,触发阈值时,对指定链路限流
  • 流控效果
    • 快速失败:直接失败,抛出异常
    • Warm Up:根据codeFactor(冷加载因子 默认为3)的值,从阈值/codeFactor,经过预热时长,才达到设置的QPS阈值。
    • 排队等待:匀速排队,让请求以均匀的速度通过,阈值类型必须设置为QPS,否则无效

Sentinel的降级规则

回顾熔断降级

  • 除了流量控制以外,对调用链路中不稳定的资源进行熔断降级也是保障高可用的重要措施之一。一个服务常常会调用别的模块,可能是另外的一个远程服务、数据库,或者第三方 API 等。
  • 例如,支付的时候,可能需要远程调用银联提供的 API;查询某个商品的价格,可能需要进行数据库查询。然而,这个被依赖服务的稳定性是不能保证的。如果依赖的服务出现了不稳定的情况,请求的响应时间变长,那么调用服务的方法的响应时间也会变长,线程会产生堆积,最终可能耗尽业务自身的线程池,服务本身也变得不可用。
  • 现代微服务架构都是分布式的,由非常多的服务组成。不同服务之间相互调用,组成复杂的调用链路。以上的问题在链路调用中会产生放大的效果。复杂链路上的某一环不稳定,就可能会层层级联,最终导致整个链路都不可用。因此我们需要对不稳定的弱依赖服务调用进行熔断降级,暂时切断不稳定调用,避免局部不稳定因素导致整体的雪崩。熔断降级作为保护自身的手段,通常在客户端(调用端)进行配置。

Sentinel熔断策略

RT(平均响应时间,秒级)
  • 平均响应时间超出阈值且在时间窗口内通过的请求>=5,两个条件同时满足后触发降级
  • 窗口期过后关闭断路器
  • RT最大为4900(更大的值需要在配置文件中设置)
异常比例 (ERROR_RATIO):
  • QPS>=5且异常比例(秒级统计)超过阈值时,触发降级
  • 时间窗口结束后,关闭降级
异常数 (ERROR_COUNT):
  • 异常数(分钟统计)超过阈值时,触发降级
  • 时间窗口结束后,关闭降级

配置降级规则——降级策略为RT

这里,针对 http://localhost:8086/hy1接口进行降级

    @RequestMapping("/hy1")public String hy1() throws InterruptedException {TimeUnit.SECONDS.sleep(1);System.out.println("=========降级测试策略为RT,Sentinel测试。");return "Sentinel调试环境已经准备:降级测试";}

在这里插入图片描述在这里插入图片描述

配置降级规则——降级策略为异常比例

这里,针对 http://localhost:8086/api/testSentinelE接口进行降级

    @RequestMapping("/hy2")public String hy2() throws InterruptedException {System.out.println(1/0);System.out.println("=========降级测试策略为异常比例,Sentinel测试。");return "Sentinel调试环境已经准备:异常比例";}

在这里插入图片描述在这里插入图片描述

配置降级规则——降级策略为异常数

  • 这里,针对 http://localhost:8086/api/testSentinelF接口进行降级
  • 在新增降级规则里降级策略选择异常数,异常数为5,时间窗口为70。当1分钟的异常数超过超过5时,触发降级
  • 点击5次以后,触发降级
    @RequestMapping("/hy3")public String hy3() throws InterruptedException {System.out.println(1/0);System.out.println("=========降级测试策略为异常数,Sentinel测试。");return "Sentinel调试环境已经准备:异常数";}

在这里插入图片描述在这里插入图片描述

Sentinel的热点参数限流

何为热点

  • 热点即经常访问的数据。很多时候我们希望统计某个热点数据中访问频次最高的 Top K 数据,并对其访问进行限制。比如
    • 商品 ID 为参数,统计一段时间内最常购买的商品 ID 并进行限制
    • 用户 ID 为参数,针对一段时间内频繁访问的用户 ID 进行限制

热点参数限流

  • 热点参数限流会统计传入参数中的热点参数,并根据配置的限流阈值与模式,对包含热点参数的资源调用进行限流。
  • 热点参数限流可以看做是一种特殊的流量控制,仅对包含热点参数的资源调用生效。

兜底方法

  • 之前的兜底方法:限流出问题后,系统默认提示
    • Blocked by Sentinel(flow limiting)
  • @SentinelResource 注解:用于自定义定义资源,并提供可选的异常处理和 fallback 配置项:
    • value:资源名称,必需项(不能为空)。
    • blockHandler / blockHandlerClass: blockHandler 对应处理 BlockException 的函数名称,可选项。
    • fallback / fallbackClass:fallback 函数名称,可选项,用于在抛出异常的时候提供 fallback 处理逻辑。
    @RequestMapping("/getGoods")@SentinelResource(value = "getGoods",blockHandler = "blockHandlerGetGoods")public String xian(String id,String name)  {return "Sentinel调试环境已经准备:异常比例";}public String blockHandlerGetGoods(String id, String name, BlockException ex){return "访问过快!等一会再访问吧!";}
  • 注意:兜底方法,参数要一致,添加BlockException
  • 配置热点规则——热点参数限流
    • 这里,针对 http://localhost:8086/getGoods接口进行热点参数限流
    • 新增热点规则
      在这里插入图片描述
      发送请求测试
      http://localhost:8086/getGoods
      http://localhost:8086/getGoods?id=1
      http://localhost:8086/getGoods?id=1&name=aa
      http://localhost:8086/getGoods?name=aa
      在这里插入图片描述

附:参考百度解释:吞吐量(TPS)、QPS、并发数、响应时间(RT)几个概念

响应时间(RT)

  • 响应时间是指系统对请求作出响应的时间。
  • 直观上看,这个指标与人对软件性能的主观感受是非常一致的,因为它完整地记录了整个计算机系统处理请求的时间。
  • 由于一个系统通常会提供许多功能,而不同功能的处理逻辑也千差万别,因而不同功能的响应时间也不尽相同,甚至同一功能在不同输入数据的情况下响应时间也不相同。
  • 所以,在讨论一个系统的响应时间时,人们通常是指该系统所有功能的平均时间或者所有功能的最大响应时间。
  • 当然,往往也需要对每个或每组功能讨论其平均响应时间和最大响应时间。

  • 对于单机的没有并发操作的应用系统而言,人们普遍认为响应时间是一个合理且准确的性能指标。
  • 需要指出的是,响应时间的绝对值并不能直接反映软件的性能的高低,软件性能的高低实际上取决于用户对该响应时间的接受程度。
  • 对于一个游戏软件来说,响应时间小于100毫秒应该是不错的,响应时间在1秒左右可能属于勉强可以接受,如果响应时间达到3秒就完全难以接受了。
  • 而对于编译系统来说,完整编译一个较大规模软件的源代码可能需要几十分钟甚至更长时间,但这些响应时间对于用户来说都是可以接受的。

吞吐量(Throughput)

  • 吞吐量是指系统在单位时间内处理请求的数量。
  • 对于无并发的应用系统而言,吞吐量与响应时间成严格的反比关系,实际上此时吞吐量就是响应时间的倒数。
  • 前面已经说过,对于单用户的系统,响应时间(或者系统响应时间和应用延迟时间)可以很好地度量系统的性能,但对于并发系统,通常需要用吞吐量作为性能指标。

  • 对于一个多用户的系统,如果只有一个用户使用时系统的平均响应时间是t,当有你n个用户使用时,每个用户看到的响应时间通常并不是n×t,而往往比n×t小很多(当然,在某些特殊情况下也可能比n×t大,甚至大很多)。
  • 这是因为处理每个请求需要用到很多资源,由于每个请求的处理过程中有许多不走难以并发执行,这导致在具体的一个时间点,所占资源往往并不多。
  • 也就是说在处理单个请求时,在每个时间点都可能有许多资源被闲置,当处理多个请求时,如果资源配置合理,每个用户看到的平均响应时间并不随用户数的增加而线性增加。
  • 实际上,不同系统的平均响应时间随用户数增加而增长的速度也不大相同,这也是采用吞吐量来度量并发系统的性能的主要原因。
  • 一般而言,吞吐量是一个比较通用的指标,两个具有不同用户数和用户使用模式的系统,如果其最大吞吐量基本一致,则可以判断两个系统的处理能力基本一致。

并发用户数

  • 并发用户数是指系统可以同时承载的正常使用系统功能的用户的数量。
  • 与吞吐量相比,并发用户数是一个更直观但也更笼统的性能指标。
  • 实际上,并发用户数是一个非常不准确的指标,因为用户不同的使用模式会导致不同用户在单位时间发出不同数量的请求。
  • 以网站系统为例,假设用户只有注册后才能使用,但注册用户并不是每时每刻都在使用该网站,因此具体一个时刻只有部分注册用户同时在线,在线用户就在浏览网站时会花很多时间阅读网站上的信息,因而具体一个时刻只有部分在线用户同时向系统发出请求。
  • 这样,对于网站系统我们会有三个关于用户数的统计数字:注册用户数、在线用户数和同时发请求用户数。
  • 由于注册用户可能长时间不登陆网站,使用注册用户数作为性能指标会造成很大的误差。
  • 而在线用户数和同事发请求用户数都可以作为性能指标。
  • 相比而言,以在线用户作为性能指标更直观些,而以同时发请求用户数作为性能指标更准确些。

QPS每秒查询率(Query Per Second)

  • 每秒查询率QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准,在因特网上,作为域名系统服务器的机器的性能经常用每秒查询率来衡量。
  • 对应fetches/sec,即每秒的响应请求数,也即是最大吞吐能力。 (看来是类似于TPS,只是应用于特定场景的吞吐量)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/22136.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

一条sql的执行流程

文章地址 https://blog.csdn.net/qq_43618881/article/details/118657040 连接器 请求先走到连接器,与客户端建立连接、获取权限、维持和管理连接 mysql缓存池 如果要查找的数据直接在mysql缓存池里面就直接返回数据 分析器 请求已经建立了连接,现在…

MySql索引的数据结构

mysql索引是什么? 想象一下,你手上有一本数学教材,但是目录被别人给撕掉了,现在要你翻到三三角函数的那一页,该怎么办? 没有了目录,就只有两种方法,要么一页一页翻,要么…

反激电源的类型与特点

主要分为 1 固定频率(CCMDCM) 2 可变频率控制(CRM电流临界模式) 这三种模式是很好辨别的,首先我们看左边的连续模式,Vds能看到他有一些尖峰毛刺,这是场效应管关闭的时候,LRC谐振导…

合势而上 聚力成峰 |“我店平台616购物嘉年华发布会”圆满落幕

引言 合势而上,聚力成峰;我店力量,势如破竹。 6月2日,“合势而上聚力成峰——我店平台616购物嘉年华发布会”于杭州顺利举办。会上,我店平台董事长肖翰成携手公司一众高管,正式启动“我店平台616购物嘉年华…

Java中getBytes()方法

我以为旅人将我 热情都燃尽 —— 24.6.4 String.getBytes(String decode)方法会根据指定的decode编码返回某字符串在该编码下的byte数组表示 而与getBytes相对的,可以通过new String(byte[], decode)的方式来还原这个“深”字时,这个new String(byte[],…

屏幕录制工具分享6款,附上详细电脑录屏教程(2024全新)

当你即将参加一个重要的在线会议或一堂关键的直播课,但又担心错过关键点或无法及时做笔记时,屏幕录制无疑是最好的方法之一。屏幕录制是一项非常有价值的技能,它能让你出于各种目的捕捉屏幕上的活动。无论你的目的是创建教程、演示软件功能、…

HiveMetastore

HiveMetastore 背后的存储 select * from DBS; select * from TBLS; select * from TABLE_PARAMS; 查找出没有 totalSize stats 的table SELECT DBS.NAME,t.TBL_NAME from DBS inner join (select DB_ID,TBL_NAME from TBLS where TBLS.TBL_ID not in(select TBL_ID from T…

家里总是“飞尘、毛絮”多怎么办?用这个东西教你轻松解决难题

每次清洁家里卫生的时候,都会发现家里空气中飘浮着毛毛和灰尘,地板上、沙发套、床单被罩都是毛毛。明明每天清洁,为什么家里还有这么多“飞尘、毛絮”呢?如果不将这些“飞尘、毛絮”清洁干净,空气中的飞尘、毛絮进入我…

任务3.3 学生喂养三种宠物:猫、狗和鸟

本任务旨在通过Java面向对象编程中的多态性和方法重载概念,实现一个学生喂养三种不同宠物(猫、狗、鸟)的程序。 定义基类和派生类 创建一个Animal基类,包含所有动物共有的属性和方法,如name、age、speak()、move()和ea…

一篇文章讲透排序算法之归并排序

0.前言 本篇文章将详细解释归并排序的原理,以及递归和非递归的代码原理。 一.概念 归并排序是建立在归并操作上的一种有效的排序算法,该算法是采用分治法的一个非常典型的应用。将已有序的子序列合并,得到完全有序的序列;即先使…

虚拟机Ubuntu 22.04上搭建GitLab操作步骤

GitLab是仓库管理系统,使用Git作为代码管理工具。GitLab提供了多个版本,包括社区版(Community Edition)和企业版(Enterprise Edition)。实际应用场景中要求CPU最小4核、内存最小8GB,非虚拟环境。 以下是在虚拟机中安装社区版步骤:…

git获取的项目无法运行

一、Unsupported engine 问题:在使用命令npm install下载依赖项的时候就遇到了这个问题,有帖子说多试几次,其实这是提示node版本问题,版本的更新出现兼容性问题,多试几次也没用。 解决方案: 更新node.js的…

Paper速读-[Visual Prompt Multi-Modal Tracking]-Dlut.edu-CVPR2023

文章目录 简介关于具体的思路问题描述算法细节实验结果模型的潜力模型结果 论文链接:Visual Prompt Multi-Modal Tracking 开源代码:Official implementation of ViPT 简介 这篇文章说了个什么事情呢,来咱们先看简单的介绍图 简单来说&…

【玩转C语言】第一讲--->C语言概念

🔥博客主页🔥:【 坊钰_CSDN博客 】 欢迎各位点赞👍评论✍收藏⭐ 目录 引言: 1. C语言是什么 2. C语言的辉煌历史 3. 第一个C语言程序 4. main()函数 5. printf() 函数 6. 库函数 6.1 库函数概念 7. 关键字介绍 …

工具:一键采集 平台:TB+PDD+JD...

什么是数据集? 电商商品数据集通常是指收集自电子商务平台的商品信息的结构化数据集合。这些数据包括但不限于商品名称、价格、描述、用户评价、分类标签、卖家信息、销售量、库存量、图片链接等。数据集可以由电商平台公开提供,也可以通过网络爬虫等技术…

沟通技巧(Communication Skills 业务分析能力)

背景 业务分析的胜任力模型,有六大部分,今天我们看第二部分,业务知识 Analytical Thinking and Problem Solving :分析判断及问题解决能力Behavioural Characteristics: 行为特质(责任、道德、适应性等等…

Kubernetes小记

Kubernetes 集群 架构 一个有效的 Kubernetes 部署称为集群,可以将 Kubernetes 集群分为两个部分:控制平面与计算设备(或称为节点)控制组件 控制平面 K8s 集群的神经中枢,负责处理重要的工作,以确保容器以足够的数量…

GCN 代码解析(一) for pytorch

Graph Convolutional Networks 代码详解 前言一、数据集介绍二、文件整体架构三、GCN代码详解3.1 utils 模块3.2 layers 模块3.3 models 模块3.4 模型的训练代码 总结 前言 在前文中,已经对图卷积神经网络(Graph Convolutional Neural Networks, GCN&am…

小程序CI/CD之自动化打包预览并钉钉通知发布进程

小程序打包方式分为两种:手动打包、自动打包 那如何实现 自动打包 呐?我们今天就来聊一聊! 首先,很重要,看 官方文档 这里提到今天我们要聊的“主角” miniprogram-ci miniprogram-ci 是从微信开发者工具中抽离的关于…

nacos开启鉴权

nacos版本1.4.3 1.nacos配置开启鉴权 application.properties 或 application.yaml 文件中 nacos.core.auth.enabled 设置为 true 2.修改JWT令牌 如果是Linux系统可以使用命令随机生成 echo -n ThisIsARandomlyGeneratedSecureKey32CharactersLong | base64 nacos.core.au…