目录
- 一、常用的限流算法
- 1.固定窗口计数器(计数器算法)
- 2 滑动窗口计数器算法
- 3. 漏桶算法
- 4 令牌桶算法(`常用`)
- Google开源项目Guava中的RateLimiter使用的就是令牌桶控制算法
- 二、 分布式限流
- 1、网关层(Nginx、Openresty、Spring Cloud Gateway等)流量限制
- nginx限流
- Spring Cloud Gateway 有两种方式来配置限流
- 2、中间件限流
- Redis
- Sentinel
- 系列文章
- 版本记录
在开发高并发系统时有三把利器用来保护系统:
缓存
、降级
和限流
一、常用的限流算法
1.固定窗口计数器(计数器算法)
固定窗口计数器算法概念如下:
-
将时间划分为多个窗口;
-
在每个窗口内每有一次请求就将计数器加一;
-
如果计数器超过了限制数量,则本窗口内所有的请求都被丢弃当时间到达下一个窗口时,计数器重置。
固定窗口计数器是最为简单的算法,但这个算法有时会让通过请求量允许为限制的两倍。考虑如下情况:限制1秒内最多通过5个请求,在第一个窗口的最后半秒内通过了5个请求,第二个窗口的前半秒内又通过了5个请求。这样看来就是在1秒内通过了10个请求。
2 滑动窗口计数器算法
滑动窗口计数器算法概念如下:
-
将时间划分为多个区间;
-
在每个区间内每有一次请求就将计数器加一维持一个时间窗口,占据多个区间;
-
每经过一个区间的时间,则抛弃最老的一个区间,并纳入最新的一个区间;
-
如果当前窗口内区间的请求计数总和超过了限制数量,则本窗口内所有的请求都被丢弃。
滑动窗口计数器是通过将窗口再细分,并且按照时间"滑动",这种算法避免了固定窗口计数器带来的双倍突发请求,但时间区间的精度越高,算法所需的空间容量就越大。
3. 漏桶算法
漏桶算法概念如下:
-
将每个请求视作"水滴"放入"漏桶"进行存储;
-
“漏桶"以固定速率向外"漏"出请求来执行,如果"漏桶"空了则停止"漏水”;
-
如果"漏桶"满了则多余的"水滴"会被直接丢弃。
漏桶算法多使用队列实现,服务的请求会存到队列中,服务的提供方则按照固定的速率从队列中取出请求并执行,过多的请求则放在队列中排队