如何使用 bucket4j 和 redis 创建频率限制器
在本教程中,我们将学习如何在扩展服务中实现频率限制。
我们将使用 bucket4j 库来实现它,我们将使用 作为分布式缓存。
为什么使用频率限制?
让我们从一些基础知识开始,以确保我们了解频率限制的必要性并介绍我们将在本教程中使用的工具。
无限频率的问题
如果公共 api 允许其用户每小时发出无限数量的请求,它可能会导致:
- 资源枯竭
- 服务质量下降
- 拒绝服务攻击
这可能会导致服务不可用或速度缓慢的情况。 它还可能导致服务产生更多意想不到的成本。
频率限制的好处
首先,限速可以防止拒绝服务攻击。 当与重复数据删除机制或 api 密钥结合使用时,速率限制还可以帮助防止分布式拒绝服务攻击。
其次,它有助于估计流量。 这对于公共 api 非常重要。 这也可以结合自动化脚本来监控和扩展服务。
第三,我们可以使用它来实施基于层的定价。 这种定价模式意味着用户可以为更高的请求率付费。
token bucket 算法
token bucket 是一种可以用来实现速率限制的算法。 简而言之,它的工作原理如下:
- 创建具有一定容量(令牌数)的存储桶。
- 当请求进来时,会检查存储桶。 如果有足够的容量,则允许请求继续进行。 否则,请求被拒绝。
- 当请求被允许时,容量会减少。
- 一定时间后,容量得到补充。
如何在分布式系统中实现 token bucket
要在分布式系统中实现 token bucket 算法,我们需要使用分布式缓存。
缓存是存储桶信息的键值存储。 我们将使用 redis 缓存来实现这一点。
在内部,bucket4j 允许我们插入 java jcache api 的任何实现。 redis 的 redisson 客户端就是我们将要使用的实现。
项目实现
我们将使用 spring boot 框架来构建ag捕鱼王app官网的服务。
ag捕鱼王app官网的服务将包含以下组件:
- 一个简单的 rest api。
- 连接到服务的 redis 缓存 - 使用 redisson 客户端。
- bucket4j 库围绕着 rest api。
- 我们将 bucket4j 连接到 jcache 接口,该接口将在后台使用 redisson 客户端作为实现。
首先,我们将学习对所有请求的 api 进行速率限制。 然后我们将学习为每个用户或每个定价层实施更复杂的频率限制机制。
让我们从项目设置开始。
安装依赖项
让我们将以下依赖项添加到我们的 pom.xml
(或 build.gradle)文件中。
<dependencies>
<dependency>
<groupid>org.springframework.bootgroupid>
<artifactid>spring-boot-starter-webartifactid>
dependency>
<dependency>
<groupid>org.redissongroupid>
<artifactid>redisson-spring-boot-starterartifactid>
<version>3.17.0version>
dependency>
<dependency>
<groupid>com.giffing.bucket4j.spring.boot.startergroupid>
<artifactid>bucket4j-spring-boot-starterartifactid>
<version>0.5.2version>
dependency>
dependencies>
缓存配置
首先,我们需要启动我们的 redis 服务器。 假设我们在本地机器的 6379 端口上运行了一个 redis 服务器。
我们需要执行两个步骤:
- 从我们的应用程序创建到该服务器的连接。
- 设置 jcache 以使用 redisson 客户端作为实现。
redisson 的文档提供了在常规 java 应用程序中实现此功能的简明步骤。 我们将在 spring boot 中实现相同的步骤。
我们先来看代码。 我们需要创建一个配置类来创建所需的 bean。
@configuration
public class redisconfig {
@bean
public config config() {
config config = new config();
config.usesingleserver().setaddress("redis://localhost:6379");
return config;
}
@bean
public cachemanager cachemanager(config config) {
cachemanager manager = caching.getcachingprovider().getcachemanager();
cachemanager.createcache("cache", redissonconfiguration.fromconfig(config));
return cachemanager;
}
@bean
proxymanager proxymanager(cachemanager cachemanager) {
return new jcacheproxymanager<>(cachemanager.getcache("cache"));
}
}
这是做什么的?
- 创建一个我们可以用来创建连接的配置对象。
- 使用配置对象创建缓存管理器。 这将在内部创建到 redis 实例的连接,并在其上创建一个名为 “cache” 的哈希。
- 创建将用于访问缓存的代理管理器。 无论我们的应用程序尝试使用 jcache api 缓存什么,它都会缓存在名为“cache”的哈希内的 redis 实例上。
构建api
让我们创建一个简单的 rest api。
@restcontroller
public class ratelimitcontroller {
@getmapping("/user/{id}")
public string getinfo(@pathvariable("id") string id) {
return "hello " id;
}
}
如果我使用 url 访问 api,我将得到响应 hello 1。
bucket4j 配置
要实现频率限制,我们需要配置 bucket4j。 值得庆幸的是,由于启动库,我们不需要编写任何样板代码。
它还会自动检测我们在上一步中创建的 proxymanager bean,并使用它来缓存存储桶。
我们需要做的是围绕我们创建的 api 配置这个库。同样有多种方法可以做到这一点。
我们可以选择在 starter 库中定义的基于属性的配置。对于所有用户或所有访客用户的频率限制等简单情况,这是最方便的方法。
但是,如果我们想为每个用户实现更复杂的东西,比如频率限制,最好为它编写自定义代码。
我们将实施每个用户的频率限制。 假设我们在数据库中存储了每个用户的频率限制,我们可以使用用户 id 来查询它。
让我们一步一步地为它编写代码。
创建桶
在我们开始之前,让我们看一下桶是如何创建的。
refill refill = refill.intervally(10, duration.ofminutes(1));
bandwidth limit = bandwidth.classic(10, refill);
bucket bucket = bucket4j.builder()
.addlimit(limit)
.build();
- refill – 桶将在多长时间后重新装满。
- bandwidth – 存储桶有多少带宽。 基本上,每个补充周期的请求。
- bucket – 使用这两个参数配置的对象。 此外,它还维护一个令牌计数器来跟踪存储桶中有多少令牌可用。
使用它作为构建块,让我们更改一些内容以使其适合我们的用例。
使用 proxymanager 创建和缓存存储桶
我们创建代理管理器的目的是在 redis 上缓存存储桶。 bucket一旦创建,就需要缓存在redis上,不需要再次创建。
为了实现这一点,我们将 bucket4j.builder()
替换为 proxymanager.builder()
。 proxymanager 将负责缓存存储桶而不是再次创建它们。
proxymanager 的构建器有两个参数——一个用于缓存存储桶的键和一个用于创建存储桶的配置对象。
让我们看看如何实现它:
@service
public class ratelimiter {
//自动装配依赖项
public bucket resolvebucket(string key) {
supplier configsupplier = getconfigsupplierforuser(key);
// 并不总是创建一个新的存储桶,而是返回现有的存储桶(如果存在)。
return buckets.builder().build(key, configsupplier);
}
private supplier getconfigsupplierforuser(string key) {
user user = userrepository.findbyid(userid);
refill refill = refill.intervally(user.getlimit(), duration.ofminutes(1));
bandwidth limit = bandwidth.classic(user.getlimit(), refill);
return () -> (bucketconfiguration.builder()
.addlimit(limit)
.build());
}
}
我们创建了一个方法,它为提供的密钥返回一个存储桶。 在下一步中,我们将看到如何使用它。
如何使用token并设置速率限制
当请求进来时,我们将尝试从相关存储桶中消费一个令牌。
我们将使用存储桶的 tryconsume() 方法来执行此操作。
@getmapping("/user/{id}")
public string getinfo(@pathvariable("id") string id) {
// 获取用户的存储桶
bucket bucket = ratelimiter.resolvebucket(id);
// 尝试使用存储桶中的令牌
if (bucket.tryconsume(1)) {
return "hello " id;
} else {
return "rate limit exceeded";
}
}
如果令牌被成功消费,tryconsume() 方法返回 true,如果令牌未被消费,则返回 false。
如何测试ag捕鱼王app官网的服务
我们可以使用任何自动化测试技术对此进行测试。 例如,我们可以使用 junit
。 让我们编写一个测试用例,多次调用 getinfo() 方法并验证响应是否正确。
假设我们有一个 id 为 1 的用户,并且限制为每分钟 10 个请求。 假设我们还有一个 id 为 2 的用户,限制为每分钟 20 个请求。
我们将为两个用户发送 11 个请求,并验证 id 为 1 的用户的请求失败,但 id 为 2 的用户的请求成功。
@test
public void testgetinfo() {
// 为用户 1 调用该方法 10 次
for (int i = 0; i < 10; i ) {
ratelimiter.getinfo(1));
ratelimiter.getinfo(2));
}
// 验证用户 1 的响应是否受频率限制
assertequals("rate limit exceeded", ratelimiter.getinfo(1));
// 验证用户 2 的响应是否成功
assertequals("hello 2", ratelimiter.getinfo(2));
}
当我们运行测试时,我们会看到测试通过了。
总结
在本教程中,我们介绍了如何在 spring boot 应用程序中使用 bucket4j 和 redis 创建频率限制器。我们还研究了如何使用 jcache 设置 redisson 客户端以及如何使用它来缓存存储桶。
最后,我们实现了一个简单的频率限制器,可用于对特定用户的请求进行频率限制。
希望您喜欢本文章。 谢谢阅读!
转载请发邮件至 1244347461@qq.com 进行申请,经作者同意之后,转载请以链接形式注明出处
本文地址:
相关文章
发布时间:2023/06/18 浏览次数:137 分类:python
-
本文将讨论如何使用python获取 redis 数据库中的所有键。使用 keys() 获取 redis 数据库中的所有键 要使用 redis,我们需要安装它; 您可以查看 redis 下载页面以了解操作方法。
如何在 django 应用程序中使用 redis 进行缓存
发布时间:2023/02/06 浏览次数:248 分类:python
-
减轻服务器压力的方法之一是缓存数据。 这是通过在处理数据后缓存数据,然后在下次请求时从缓存中提供数据来完成的。 本篇文章将详细讨论 redis,解释如何在 python 应用程序中安装
如何使用 node.js 在 redis cloud 上存储和检索 redisjson
发布时间:2022/09/07 浏览次数:108 分类:学无止境
-
在过去的几个月里,我一直在使用 redis 数据库来管理我的一些应用程序,随着应用程序的扩展,我发现我正在使用更多的 redis 功能。其中一项功能是 **redis stack**。在深入了解 redis sta
发布时间:2022/09/07 浏览次数:384 分类:操作系统
-
通过使用 homebrew,可以大大降低在 mac os x 上设置和配置开发环境的成本。让我们安装 redis。
发布时间:2021/08/11 浏览次数:185 分类:
mac系统使用 clion远程调试redis4源码
发布时间:2021/05/08 浏览次数:206 分类:redis
-
本篇介绍在mac系统下使用clion对redis进行远程源代码调试。主要适用sftp同步代码,gdbserver开启远程调试服务。linux作为redis运行的远程服务器。
如何在mac系统下使用clion调试redis源码
发布时间:2021/04/29 浏览次数:573 分类:redis
-
本篇主要介绍在mac系统下如何使用clion调试redis的源码。clion主要使用的是`cmake` `make` 进行编译。所以对于redis4来说,主要的就是先编写 cmakelists.txt 文件
redis 在 centos下安装方法及常见问题解决
发布时间:2017/08/18 浏览次数:975 分类:redis
-
本篇我们来介绍一下如何在centos下安装redis。其实,安装步骤很简单,只是中间可能会出现一些问题,这是值得我们所关注的。
自定义的phpredis操作类使用介绍
发布时间:2016/05/12 浏览次数:614 分类:php
-
php封装了一个redis的操作类,其中涉及的函数command、exec、result、get_errinfo等。本篇分别介绍了如何使用这些函数。