【Spring Cloud Alibaba】开源组件Sentinel

目录

  • 什么是Sentinel
    • 发展历史
    • 与Hystrix的异同
  • Sentinel可以做什么?
  • Sentinel的功能
  • Sentinel的开源生态
  • Sentinel的用户
  • 安装Sentinel控制台
    • 预备环境准备
    • Sentinel 分为两个部分:
    • 下载地址
  • 项目集成Sentinel
    • 创建项目
    • 修改依赖信息
    • 添加启动注解
    • 添加配置信息
    • 在控制器类中新增一个测试接口
    • 启动Nacos、order-sentinel-provider
  • Sentinel核心功能
    • Sentinel:分布式系统的流量防卫兵
    • 流量控制
    • 熔断降级
      • Sentinel熔断降级策略
        • 限制并发线程数进行降级
        • 通过响应时间进行降级
    • 系统负载保护
    • Sentinel核心规则
      • QPS和TPS
        • QPS
        • TPS
        • QPS VS TPS
      • RT,响应时间
      • 并发数:
      • 吞吐量
        • 系统吞吐量几个重要参数
    • 簇点链路规则
      • 配置直接流控模式——阈值类型为QPS
      • 配置直接流控模式——阈值类型为线程数
      • 接口(先访问一下),然后再去控制台
      • 配置关联流控模式——阈值类型为QPS
      • 配置流控效果——Warm Up(预热)
      • 配置流控效果——排队等待
    • 流控规则配置项的说明
    • Sentinel的降级规则
      • 回顾熔断降级
      • Sentinel熔断策略
        • RT(平均响应时间,秒级)
        • 异常比例 (ERROR_RATIO):
        • 异常数 (ERROR_COUNT):
      • 配置降级规则——降级策略为RT
      • 配置降级规则——降级策略为异常比例
      • 配置降级规则——降级策略为异常数
    • Sentinel的热点参数限流
      • 何为热点
      • 热点参数限流
      • 兜底方法
  • 附:参考百度解释:吞吐量(TPS)、QPS、并发数、响应时间(RT)几个概念
    • 响应时间(RT)
    • 吞吐量(Throughput)
    • 并发用户数
    • QPS每秒查询率(Query Per Second)

什么是Sentinel

  • 分布式系统的流量防卫兵
  • Sentinel 是阿里中间件团队开源的,面向分布式服务架构的轻量级高可用流量控制组件,主要以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度来帮助用户保护服务的稳定性。
  • Sentinel官网:https://github.com/alibaba/Sentinel/
  • Sentinel中文官网:https://github.com/alibaba/Sentinel/wiki/介绍

发展历史

  • 2012年,Sentinel诞生于阿里巴巴,其主要目标是流量控制。
  • 2013-2017年,Sentinel迅速发展,并成为阿里巴巴所有微服务的基本组成部分。 它已在6000多个应用程序中使用,涵盖了几乎所有核心电子商务场景。
  • 2018年,Sentinel演变为一个开源项目。
  • 2020年,Sentinel Golang发布。

与Hystrix的异同

SentinelHystrix
产生背景阿里巴巴公司Netflix公司
用途服务容错框架服务容错框架
支持语言Java、Go、C++Java
支持功能流量控制、熔断降级、系统自适应保护流量控制、熔断降级
线程模型单线程模型多线程模型
监控中心自带的Sentinel控制台需要借助Hystrix Dashboard
配置方式通过规则或代码配置通过注解或配置文件
隔离策略信号量隔离线程池隔离/信号量隔离
熔断降级策略基于响应时间或失败比率基于失败比率
实时指标实现滑动窗口滑动窗口(基于 RxJava)
规则配置支持多种数据源支持多种数据源
扩展性多个扩展点插件的形式
基于注解的支持支持支持
限流基于 QPS,支持基于调用关系的限流不支持
流量整形支持慢启动、匀速器模式不支持
系统负载保护支持不支持
控制台开箱即用,可配置规则、查看秒级监控、机器发现等不完善
常见框架的适配Servlet、Spring Cloud、Dubbo、gRPC 等Servlet、Spring Cloud Netflix

Sentinel可以做什么?

  • 丰富的应用场景:Sentinel 承接了阿里巴巴近 10 年的双十一大促流量的核心场景,例如秒杀(即突发流量控制在系统容量可以承受的范围)、消息削峰填谷、集群流量控制、实时熔断下游不可用应用等。
  • 完备的实时监控:Sentinel 同时提供实时的监控功能。您可以在控制台中看到接入应用的单台机器秒级数据,甚至 500 台以下规模的集群的汇总运行情况。
  • 广泛的开源生态:Sentinel 提供开箱即用的与其它开源框架/库的整合模块,例如与 Spring Cloud、Apache Dubbo、gRPC、Quarkus 的整合。您只需要引入相应的依赖并进行简单的配置即可快速地接入 Sentinel。同时 Sentinel 提供 Java/Go/C++ 等多语言的原生实现。
  • 完善的 SPI 扩展机制:Sentinel 提供简单易用、完善的 SPI 扩展接口。您可以通过实现扩展接口来快速地定制逻辑。例如定制规则管理、适配动态数据源等。
    在这里插入图片描述

Sentinel的功能

功能说明
实时监测Sentinel能够实时监测系统、网络或应用程序的活动,以便及时发现异常或威胁。
预警和警报当发现异常情况或威胁时,Sentinel能够发送警报或预警,提醒相关人员采取行动。
自动化分析Sentinel利用机器学习和人工智能等技术,能够对大量数据进行自动化分析,识别潜在的威胁和异常行为。
威胁情报Sentinel能够从不同的安全信息源获取最新的威胁情报,以帮助分析和应对威胁。
多层防御Sentinel通过多层次的防御机制,包括防火墙、入侵检测系统和反病毒软件等,来保护系统免受不同类型的攻击。
日志记录和审计Sentinel可以记录和审计系统的活动日志,以便对安全事件进行调查和分析。
自定义规则和策略Sentinel允许管理员根据自己的需求,制定自定义的监测规则和安全策略。
可扩展性Sentinel能够适应不同规模和复杂度的系统,并能够扩展以支持更大的负载和数据量。
用户友好界面Sentinel通常提供直观简洁的用户界面,使管理员能够轻松配置和监控安全系统。

Sentinel的开源生态

在这里插入图片描述

Sentinel的用户

在这里插入图片描述

安装Sentinel控制台

预备环境准备

Sentinel依赖 Java 环境来运行。请确保安装了JDK或JRE。

Sentinel 分为两个部分:

  • 核心库(Java 客户端)不依赖任何框架/库,能够运行于所有 Java 运行时环境,同时对 Dubbo / Spring Cloud 等框架也有较好的支持。
  • 控制台(Dashboard)基于 Spring Boot 开发,打包后可以直接运行,不需要额外的 Tomcat 等应用容器。

下载地址

  • https://github.com/alibaba/Sentinel/releases
  • 选择的版本:1.7.2
  • 将下载好的jar包拷贝到D:\Soft\Sentinel(需要自己创建,也可以是其他盘路径)
  • 进入D:\Soft\Sentinel,在磁盘地址栏中输入cmd,出现命令行窗口
  • 在命令行窗口输入:java -jar sentinel-dashboard-1.7.2.jar
    • 因为我的电脑上装了JDK8和JDK17,sentinel这个版本只能用JDK8运行,因此我用这个命令:C:\Program Files\Java\jdk1.8.0_281\bin>java -jar D:\soft\Sentinel\sentinel-dashboard-1.7.2.jar
      在这里插入图片描述
  • 运行成功后,访问Sentinel的控制台
  • 在浏览器中输入:http://localhost:8080
  • 输入用户名和密码:sentinel
    在这里插入图片描述在这里插入图片描述

项目集成Sentinel

创建项目

  • 指定artifactId为order-sentinel-provider
    在这里插入图片描述

修改依赖信息

在这里插入图片描述

添加启动注解

  • @EnableDiscoveryClient
@SpringBootApplication
@EnableDiscoveryClient
public class OrderSentinelProviderApplication {public static void main(String[] args) {SpringApplication.run(OrderSentinelProviderApplication.class, args);}
}

添加配置信息

spring:application:name: order-sentinel-providercloud:nacos:discovery:server-addr: localhost:8848sentinel:transport:dashboard: localhost:8080port: 8719
server:port: 8086

在控制器类中新增一个测试接口

@RestController
@Slf4j
public class LimitFlowController {@RequestMapping("/test")public String test(){log.info("=========阈值类型为QPS,Sentinel测试。");return "Sentinel调试环境已经准备";}
}

启动Nacos、order-sentinel-provider

  • 注意:直接启动订单微服务和Sentinel,会发现Sentinel中没有订单微服务的数据,因为Sentinel是懒加载机制,所以需要访问一下接口,再去访问Sentinel 就有数据了

在这里插入图片描述

Sentinel核心功能

Sentinel:分布式系统的流量防卫兵

  • 随着微服务的流行,服务和服务之间的稳定性变得越来越重要。
  • Sentinel 以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性。
  • 所以,Sentinel的核心功能包括:流量控制、熔断降级、系统负载保护。

流量控制

  • 在高并发、大流量场景下,进入系统的流量如果不加控制的话,系统就很有可能会被流量压垮。
  • 所以,在流量正式进入系统之前,需要对流量进行控制,以便使流量均匀、可控的方式进入系统。
  • Sentinel作为一个非常出色的容错组件,能够将不可控的流量经过处理转化成均匀、可控的流量。

熔断降级

  • 如果检测到系统中的某个调用链路中某个节点出现故障,比如请求超时、服务宕机或者异常比超出一定阈值时,就会对出现故障的节点的调用频率进行限制,甚至不调用出现故障的节点,让请求能够快速失败并返回,以最大程度避免影响到其他节点的服务而导致系统的级联故障。

Sentinel熔断降级策略

  • Sentinel主要通过限制并发线程数和响应时间对资源的访问进行降级
限制并发线程数进行降级
  • Sentinel可以通过限制服务节点的并发线程数量,来减少对其他服务节点的影响。
  • 例如,当某个服务节点出现故障,例如响应时间变长,或者直接宕机。此时,对服务的直接影响就是会造成请求线程数的不断堆积。
  • 如果这些堆积的线程数达到一定的数量后,对当前服务节点的后续请求就会被拒绝,等到堆积的线程完成任务后再开始继续接收新的请求。
通过响应时间进行降级
  • Sentinel除了可以通过限制并发线程数进行降级外,也能够通过响应时间进行降级。
  • 如果依赖的服务出现响应时间过长的情况,则所有对该服务的请求都会被拒绝,直到过了指定的时间窗口之后才能再次访问该服务。

系统负载保护

  • Sentinel提供了系统维度的自适应保护能力。当系统的压力和负载比较高的时候,如果还持续让大量的请求进入系统,此时就有可能将系统压垮,进而导致系统宕机。
  • Sentinel会在集群环境下,将本应服务A承载的流量转发到其他服务器上,比如转发到服务器B上。如果此时服务器B也处于高负载的状态,则Sentinel会提供相应的保护机制,让系统的入口流量和系统的整体负载达到平衡,让系统整体可用,并且能够最大限度的处理请求。

Sentinel核心规则

  • Sentinel的核心规则包括流控规则、熔断规则、热点规则、授权规则和系统规则
  • Sentinel能够对流量进行控制,主要是监控应用的QPS流量或者并发线程数等指标,如果达到指定的阈值时,就会被流量进行控制,以避免服务被瞬时的高并发流量击垮,保证服务的高可靠性

QPS和TPS

QPS
  • Queries Per Second意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数
  • 是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。
TPS
  • 是Transactions Per Second的缩写,也就是事务数/秒。
  • 它是软件测试结果的测量单位。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。
  • 客户机在发送请求时开始计时,收到服务器响应后结束计时,以此来计算使用的时间和完成的事务个数。
QPS VS TPS
  • QPS基本类似于TPS,但是不同的是,对于一个页面的一次访问,形成一个TPS;
  • 但一次页面请求,可能产生多次对服务器的请求,服务器对这些请求,就可计入“QPS”之中。
  • 如,访问一个页面会请求服务器2次,一次访问,产生一个“T”,产生2个“Q”。

RT,响应时间

  • 响应时间:执行一个请求从开始到最后收到响应数据所花费的总体时间,即从客户端发起请求到收到服务器响应结果的时间。
  • 响应时间RT(Response-time),是一个系统最重要的指标之一,它的数值大小直接反应了系统的快慢。

并发数:

  • 并发数是指系统同时能处理的请求数量,这个也是反应了系统的负载能力。

吞吐量

  • 系统的吞吐量与request对CPU的消耗、外部接口、IO等等紧密关联。
  • 单个request 对CPU消耗越高,外部系统接口、IO速度越慢,系统吞吐能力越低,反之越高。
系统吞吐量几个重要参数

分别是:QPS(TPS)、并发数、响应时间。

  • QPS(TPS):(Query Per Second)每秒钟request/事务 数量
  • 并发数:系统同时处理的request/事务数
  • 响应时间:一般取平均响应时间
  • QPS(TPS) = 并发数/平均响应时间
  • 并发数 = QPS * 平均响应时间

簇点链路规则

  • 点击簇点链路菜单,可以看到之前访问过的接口,如下所示
    在这里插入图片描述

  • 点击右侧的流控按钮,会弹出新增流控规则的提示框,如下所示
    在这里插入图片描述

配置直接流控模式——阈值类型为QPS

  • 这里,针对 http://localhost:8086/test接口进行直接流控模式
  • 在新增流控规则里阈值类型选择QPS,单机阈值输入1,表示每秒钟的请求量如果超过1,则会触发Sentinel的限流操作

配置直接流控模式——阈值类型为线程数

  • 这里,针对 http://localhost:8086/test2接口进行直接流控模式
  • 在新增流控规则里阈值类型选择线程数,单机阈值输入1,表示当调用API的线程数达到阈值时,则会触发Sentinel的限流操作

接口(先访问一下),然后再去控制台

@RestController
@Slf4j
public class LimitFlowController {@RequestMapping("/test")public String test(){log.info("=========阈值类型为QPS,Sentinel测试。");return "Sentinel调试环境已经准备";}@RequestMapping("/test2")public String test2() throws InterruptedException {System.out.println("=========阈值类型为线程数,Sentinel测试。");TimeUnit.SECONDS.sleep(2);return "Sentinel调试环境已经准备";}
}

在这里插入图片描述在这里插入图片描述在这里插入图片描述

配置关联流控模式——阈值类型为QPS

  • 这里,针对 http://localhost:8086/test3接口进关联流控模式
  • 在新增流控规则里阈值类型选择QPS,单机阈值输入5,表示当关联资源/test的QPS阈值超过5时,就限流/test3的访问
    @RequestMapping("/test3")public String test3() {System.out.println("=========阈值类型为QPS,流控模式为关联。");return "Sentinel调试环境已经准备";}

在这里插入图片描述在这里插入图片描述

配置流控效果——Warm Up(预热)

  • Warm up也叫预热模式,是应对服务冷启动的一种方案。请求阈值初始值是 threshold / coldFactor,持续指定时长后,逐渐提高到threshold值。而coldFactor的默认值是3。
    在这里插入图片描述
    @RequestMapping("/save")public String save() {System.out.println("=========阈值类型为QPS,流控模式为直接,流控效果为 Warm up预热。");return "Sentinel调试环境已经准备:预热";}

在这里插入图片描述在这里插入图片描述

配置流控效果——排队等待

  • 能够使请求均匀的通过,单机的阈值为每秒通过的请求数量,其余的请求会排队等待。
  • 另外,还会设置一个超时时间,当请求超过超时时间未处理时,会被丢弃。
    在这里插入图片描述
    @RequestMapping("/query")public String query() {System.out.println("=========阈值类型为QPS,流控模式为直接,流控效果为等待。");return "Sentinel调试环境已经准备:排队等待";}

在这里插入图片描述
在这里插入图片描述

流控规则配置项的说明

  • 资源名:资源的唯一名称,默认就是请求的接口路径,可以自行修改,但是要保证唯一。
  • 针对来源:具体针对某个微服务进行限流,默认值为default,表示不区分来源,全部限流。
  • 阈值类型:
    • QPS(每秒钟的请求数量):当调用该API的阈值达到达到阈值时候,进行限流,
    • 并发线程数:当调用该API的线程数达到阈值时,进行限流。
  • 单机阈值:与阈值类型组合使用。如果阈值类型选择的是QPS,表示当调用接口的QPS达到阈值时,进行限流操作。如果阈值类型选择的是并发线程数,则表示当调用接口的并发线程数达到阈值时,进行限流操作。
  • 是否集群:选中则表示集群环境,不选中则表示非集群环境。
  • 流控模式:
    • 直接:当API调用达到限流条件时,直接限流
    • 关联:当关联的资源达到阈值时,限流自己
    • 链路:统计从指定链路访问到本资源的请求,触发阈值时,对指定链路限流
  • 流控效果
    • 快速失败:直接失败,抛出异常
    • Warm Up:根据codeFactor(冷加载因子 默认为3)的值,从阈值/codeFactor,经过预热时长,才达到设置的QPS阈值。
    • 排队等待:匀速排队,让请求以均匀的速度通过,阈值类型必须设置为QPS,否则无效

Sentinel的降级规则

回顾熔断降级

  • 除了流量控制以外,对调用链路中不稳定的资源进行熔断降级也是保障高可用的重要措施之一。一个服务常常会调用别的模块,可能是另外的一个远程服务、数据库,或者第三方 API 等。
  • 例如,支付的时候,可能需要远程调用银联提供的 API;查询某个商品的价格,可能需要进行数据库查询。然而,这个被依赖服务的稳定性是不能保证的。如果依赖的服务出现了不稳定的情况,请求的响应时间变长,那么调用服务的方法的响应时间也会变长,线程会产生堆积,最终可能耗尽业务自身的线程池,服务本身也变得不可用。
  • 现代微服务架构都是分布式的,由非常多的服务组成。不同服务之间相互调用,组成复杂的调用链路。以上的问题在链路调用中会产生放大的效果。复杂链路上的某一环不稳定,就可能会层层级联,最终导致整个链路都不可用。因此我们需要对不稳定的弱依赖服务调用进行熔断降级,暂时切断不稳定调用,避免局部不稳定因素导致整体的雪崩。熔断降级作为保护自身的手段,通常在客户端(调用端)进行配置。

Sentinel熔断策略

RT(平均响应时间,秒级)
  • 平均响应时间超出阈值且在时间窗口内通过的请求>=5,两个条件同时满足后触发降级
  • 窗口期过后关闭断路器
  • RT最大为4900(更大的值需要在配置文件中设置)
异常比例 (ERROR_RATIO):
  • QPS>=5且异常比例(秒级统计)超过阈值时,触发降级
  • 时间窗口结束后,关闭降级
异常数 (ERROR_COUNT):
  • 异常数(分钟统计)超过阈值时,触发降级
  • 时间窗口结束后,关闭降级

配置降级规则——降级策略为RT

这里,针对 http://localhost:8086/hy1接口进行降级

    @RequestMapping("/hy1")public String hy1() throws InterruptedException {TimeUnit.SECONDS.sleep(1);System.out.println("=========降级测试策略为RT,Sentinel测试。");return "Sentinel调试环境已经准备:降级测试";}

在这里插入图片描述在这里插入图片描述

配置降级规则——降级策略为异常比例

这里,针对 http://localhost:8086/api/testSentinelE接口进行降级

    @RequestMapping("/hy2")public String hy2() throws InterruptedException {System.out.println(1/0);System.out.println("=========降级测试策略为异常比例,Sentinel测试。");return "Sentinel调试环境已经准备:异常比例";}

在这里插入图片描述在这里插入图片描述

配置降级规则——降级策略为异常数

  • 这里,针对 http://localhost:8086/api/testSentinelF接口进行降级
  • 在新增降级规则里降级策略选择异常数,异常数为5,时间窗口为70。当1分钟的异常数超过超过5时,触发降级
  • 点击5次以后,触发降级
    @RequestMapping("/hy3")public String hy3() throws InterruptedException {System.out.println(1/0);System.out.println("=========降级测试策略为异常数,Sentinel测试。");return "Sentinel调试环境已经准备:异常数";}

在这里插入图片描述在这里插入图片描述

Sentinel的热点参数限流

何为热点

  • 热点即经常访问的数据。很多时候我们希望统计某个热点数据中访问频次最高的 Top K 数据,并对其访问进行限制。比如
    • 商品 ID 为参数,统计一段时间内最常购买的商品 ID 并进行限制
    • 用户 ID 为参数,针对一段时间内频繁访问的用户 ID 进行限制

热点参数限流

  • 热点参数限流会统计传入参数中的热点参数,并根据配置的限流阈值与模式,对包含热点参数的资源调用进行限流。
  • 热点参数限流可以看做是一种特殊的流量控制,仅对包含热点参数的资源调用生效。

兜底方法

  • 之前的兜底方法:限流出问题后,系统默认提示
    • Blocked by Sentinel(flow limiting)
  • @SentinelResource 注解:用于自定义定义资源,并提供可选的异常处理和 fallback 配置项:
    • value:资源名称,必需项(不能为空)。
    • blockHandler / blockHandlerClass: blockHandler 对应处理 BlockException 的函数名称,可选项。
    • fallback / fallbackClass:fallback 函数名称,可选项,用于在抛出异常的时候提供 fallback 处理逻辑。
    @RequestMapping("/getGoods")@SentinelResource(value = "getGoods",blockHandler = "blockHandlerGetGoods")public String xian(String id,String name)  {return "Sentinel调试环境已经准备:异常比例";}public String blockHandlerGetGoods(String id, String name, BlockException ex){return "访问过快!等一会再访问吧!";}
  • 注意:兜底方法,参数要一致,添加BlockException
  • 配置热点规则——热点参数限流
    • 这里,针对 http://localhost:8086/getGoods接口进行热点参数限流
    • 新增热点规则
      在这里插入图片描述
      发送请求测试
      http://localhost:8086/getGoods
      http://localhost:8086/getGoods?id=1
      http://localhost:8086/getGoods?id=1&name=aa
      http://localhost:8086/getGoods?name=aa
      在这里插入图片描述

附:参考百度解释:吞吐量(TPS)、QPS、并发数、响应时间(RT)几个概念

响应时间(RT)

  • 响应时间是指系统对请求作出响应的时间。
  • 直观上看,这个指标与人对软件性能的主观感受是非常一致的,因为它完整地记录了整个计算机系统处理请求的时间。
  • 由于一个系统通常会提供许多功能,而不同功能的处理逻辑也千差万别,因而不同功能的响应时间也不尽相同,甚至同一功能在不同输入数据的情况下响应时间也不相同。
  • 所以,在讨论一个系统的响应时间时,人们通常是指该系统所有功能的平均时间或者所有功能的最大响应时间。
  • 当然,往往也需要对每个或每组功能讨论其平均响应时间和最大响应时间。

  • 对于单机的没有并发操作的应用系统而言,人们普遍认为响应时间是一个合理且准确的性能指标。
  • 需要指出的是,响应时间的绝对值并不能直接反映软件的性能的高低,软件性能的高低实际上取决于用户对该响应时间的接受程度。
  • 对于一个游戏软件来说,响应时间小于100毫秒应该是不错的,响应时间在1秒左右可能属于勉强可以接受,如果响应时间达到3秒就完全难以接受了。
  • 而对于编译系统来说,完整编译一个较大规模软件的源代码可能需要几十分钟甚至更长时间,但这些响应时间对于用户来说都是可以接受的。

吞吐量(Throughput)

  • 吞吐量是指系统在单位时间内处理请求的数量。
  • 对于无并发的应用系统而言,吞吐量与响应时间成严格的反比关系,实际上此时吞吐量就是响应时间的倒数。
  • 前面已经说过,对于单用户的系统,响应时间(或者系统响应时间和应用延迟时间)可以很好地度量系统的性能,但对于并发系统,通常需要用吞吐量作为性能指标。

  • 对于一个多用户的系统,如果只有一个用户使用时系统的平均响应时间是t,当有你n个用户使用时,每个用户看到的响应时间通常并不是n×t,而往往比n×t小很多(当然,在某些特殊情况下也可能比n×t大,甚至大很多)。
  • 这是因为处理每个请求需要用到很多资源,由于每个请求的处理过程中有许多不走难以并发执行,这导致在具体的一个时间点,所占资源往往并不多。
  • 也就是说在处理单个请求时,在每个时间点都可能有许多资源被闲置,当处理多个请求时,如果资源配置合理,每个用户看到的平均响应时间并不随用户数的增加而线性增加。
  • 实际上,不同系统的平均响应时间随用户数增加而增长的速度也不大相同,这也是采用吞吐量来度量并发系统的性能的主要原因。
  • 一般而言,吞吐量是一个比较通用的指标,两个具有不同用户数和用户使用模式的系统,如果其最大吞吐量基本一致,则可以判断两个系统的处理能力基本一致。

并发用户数

  • 并发用户数是指系统可以同时承载的正常使用系统功能的用户的数量。
  • 与吞吐量相比,并发用户数是一个更直观但也更笼统的性能指标。
  • 实际上,并发用户数是一个非常不准确的指标,因为用户不同的使用模式会导致不同用户在单位时间发出不同数量的请求。
  • 以网站系统为例,假设用户只有注册后才能使用,但注册用户并不是每时每刻都在使用该网站,因此具体一个时刻只有部分注册用户同时在线,在线用户就在浏览网站时会花很多时间阅读网站上的信息,因而具体一个时刻只有部分在线用户同时向系统发出请求。
  • 这样,对于网站系统我们会有三个关于用户数的统计数字:注册用户数、在线用户数和同时发请求用户数。
  • 由于注册用户可能长时间不登陆网站,使用注册用户数作为性能指标会造成很大的误差。
  • 而在线用户数和同事发请求用户数都可以作为性能指标。
  • 相比而言,以在线用户作为性能指标更直观些,而以同时发请求用户数作为性能指标更准确些。

QPS每秒查询率(Query Per Second)

  • 每秒查询率QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准,在因特网上,作为域名系统服务器的机器的性能经常用每秒查询率来衡量。
  • 对应fetches/sec,即每秒的响应请求数,也即是最大吞吐能力。 (看来是类似于TPS,只是应用于特定场景的吞吐量)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/343288.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Django 里的表格内容做修改

当Django里表格内容需要做修改&#xff0c;可以这么操作。 先看效果图 修改后的表格 1. 先得在 asset_list.html 里修改。你们的html有可能跟我不一样 <table border"1px"><thead><tr><th>ID</th><th>标题</th><th…

九种mfc140u.dll丢失的解决方法,全面解决mfc140u.dll文件丢失

mfc140u.dll是 Microsoft Visual C 2015 Redistributable 的一部分&#xff0c;它与 Microsoft 基础类库&#xff08;MFC&#xff09;的 Unicode 版本有关。当您在运行使用 Visual C 2015 开发的应用程序时&#xff0c;可能会碰到关于mfc140u.dll丢失的错误。下面列出了一些解决…

探索k8s集群的配置资源(secret和configmap)

目录 ConfigMap ConfigMap&#xff08;主要是将配置目录或者文件挂载到k8s里面使用&#xff09; 与Secret类似&#xff0c;区别在于ConfigMap保存的是不需要加密配置的信息。&#xff08;例如&#xff1a;配置文件&#xff09; ConfigMap 功能在 Kubernetes1.2 版本中引入&…

Python深度学习基于Tensorflow(13)目标检测实战

文章目录 RPN 整体代码RPN 具体实现过程数据标注读取标注数据固定图片大小调整目标框使用预训练模型获取 feature_shape定义 RPN 网络生成RPN 的 CLS 和 REG 数据集获取所有的锚点计算锚点与目标框的IOU 定义 RPN loss 和 训练过程 参考资料 这里实现的是二阶段目标检测&#x…

Linux系统下 安装 Nginx

一、下载Nginx安装包 压缩包下载地址&#xff1a;nginx: download 服务器有外网&#xff0c;可直接使用命令下载 wget -c https://nginx.org/download/nginx-1.24.0.tar.gz 二、安装Nginx 1、解压 tar -zxvf nginx-1.24.0.tar.gz 2、安装Nginx所需依赖 yum install -y gc…

线性代数|机器学习-P1课程简介

文章目录 1. 书籍下载2. 正文 1. 书籍下载 链接&#xff1a;https://pan.baidu.com/s/1QbK0enLh0x4nU1c4Tqwlkw 提取码&#xff1a;r7ft 本课程回顾线性代数在概率论、统计学、优化和深度学习中的应用。是GILBERT STRANG教授的有一个经典的课程。课程将线性代数分为如下部分&a…

【第二节】C/C++数据结构之线性表

目录 一、线性表基本说明 1.1 基本概念 1.2 抽象数据类型 1.3 存储结构 1.4 插入与删除的区别 1.5 顺序存储和链式存储的优缺点 二、链表 2.1 基本概念 2.2 抽象数据类型 2.3 单链表的定义 2.4 单链表的基本操作 2.5 单链表模板形式的类定义与实现 三、单向循环链…

探索未来制造,BFT Robotics引领潮流

“买机器人&#xff0c;上BFT” 在这个快速变化的时代&#xff0c;创新和效率是企业发展的关键。BFT Robotics&#xff0c;作为您值得信赖的合作伙伴&#xff0c;专注于为您提供一站式的机器人采购和自动化解决方案。 产品系列&#xff1a; 协作机器人&#xff1a;安全、灵活、…

OpenShift 4 - OpenShift Service Mesh 3 预览

《OpenShift / RHEL / DevSecOps 汇总目录》 了解 OpenShift Service Mesh 3 的变化 OpenShift Service Mesh 是一套在 OpenShift 上安装部署、跟踪监控 Istio 运行环境的实现。红帽在 2023 年底推出了技术预览版的 OpenShift Service Mesh 3&#xff0c;它和目前的 OpenShif…

RERCS系统开发实战案例-Part01 快速启动面板创建新功能启动面板

需求背景&#xff1a;RERCS系统设计合同应收付比例调整界面&#xff0c;目的为合同与应收付款调整关联&#xff0c;保证数据的完整性与准确性。 步骤① 参数化快速启动板事务码 &#xff1a;LPD_CUST_PARAM 选择对应的角色与实例 可以看到系统中的快速启动面板菜单中已有的功能…

顶顶通呼叫中心中间件-asr录音路径修改(mod_cti基于FreeSWITCH)

顶顶通呼叫中心中间件-asr录音路径修改(mod_cti基于FreeSWITCH) 录音路径模板。如果不是绝对路径&#xff0c;会把这个路径追加到FreeSWITCH的recordings后面。支持变量&#xff0c;比如日期 ${strftime(%Y-%m-%d)}。最后一个录音文件路径会保存到变量 ${cti_asr_last_record_…

最大矩形问题

柱状图中最大的矩形 题目 分析 矩形的面积等于宽乘以高&#xff0c;因此只要能确定每个矩形的宽和高&#xff0c;就能计算它的面积。如果直方图中一个矩形从下标为 i 的柱子开始&#xff0c;到下标为 j 的柱子结束&#xff0c;那么这两根柱子之间的矩形&#xff08;含两端的柱…

Day45 代码随想录打卡|二叉树篇---路径总和

题目&#xff08;leecode T112&#xff09;&#xff1a; 给你二叉树的根节点 root 和一个表示目标和的整数 targetSum 。判断该树中是否存在 根节点到叶子节点 的路径&#xff0c;这条路径上所有节点值相加等于目标和 targetSum 。如果存在&#xff0c;返回 true &#xff1b;…

Docker搭建ELKF日志分析系统

Docker搭建ELKF日志分析系统 文章目录 Docker搭建ELKF日志分析系统资源列表基础环境一、系统环境准备1.1、创建所需的映射目录1.2、修改系统参数1.3、单击创建elk-kgc网络桥接 二、基于Dockerfile构建Elasticsearch镜像2.1、创建Elasticsearch工作目录2.2、上传资源到指定工作路…

临床应用的深度学习在视网膜疾病的诊断和转诊中的应用| 文献速递-视觉通用模型与疾病诊断

Title 题目 Clinically applicable deep learning for diagnosis and referral in retinal disease 临床应用的深度学习在视网膜疾病的诊断和转诊中的应用 01 文献速递介绍 诊断成像的数量和复杂性正在以比人类专家可用性更快的速度增加。人工智能在分类一些常见疾病的二…

nvm,node不是内部命令,npm版本不支持问题(曾经安装过nodejs)

nvm安装后nvm -v有效&#xff0c;node指令无效 环境变量配置无问题 推荐方案 下载你需要的node版本 Index of /dist/ (nodejs.org) 下载后解压到你的nvm存储版本的位置 cmd进入切换你的使用版本&#xff08;此时你的nodejs是从网上下载的&#xff0c;npm文件是存在的&…

rtl8723DU移植 android4.4 4418 (第二部分蓝牙部分)

使用的代码&#xff1a; HMI &#xff08;8723bu&#xff09;源码 567_RTL8723DU_WiFi_linux_v5.6.5.3_35502_COEX20181130-2e2e.20191025.zip 由于之前写的所有笔记没有保存&#xff0c;这里只能是部分。 0、 前置知识 1 、kernel 的移植 2、hardwire的移植 将 驱动中的 h…

一脉阳光上市圆梦:销售成本高昂,两大创始人的行贿往事与屡屡被罚

《港湾商业观察》施子夫 2024年6月7日&#xff0c;江西一脉阳光集团股份有限公司&#xff08;以下简称&#xff0c;一脉阳光&#xff09;将正式在港交所主板挂牌上市&#xff08;以下简称&#xff0c;一脉阳光&#xff1b;股票代码02522.HK&#xff09;&#xff0c;公司预计发…

106、python-第四阶段-3-设计模式-单例模式

不是单例类&#xff0c;如下&#xff1a; class StrTools():pass str1StrTools() str2StrTools() print(str1) print(str2) 运用单例&#xff0c;先创建一个test.py class StrTools():pass str1StrTools()然后创建一个hello.py&#xff0c;在这个文件中引用test.py中的对象&a…

QSqlDatabase、QSqlQuery、QSqlRecord、Sqlite用法

使用QSqlDatabase、QSqlQuery、QSqlRecord、Sqlite数据库实现一个简单的界面查询 1. 创建Sqlite数据库&#xff0c;表 mainwindow.cpp #include "mainwindow.h" #include "ui_mainwindow.h" #include "QSqlDatabase" #include "QSqlQuery&q…