- r - 以节省内存的方式增长 data.frame
- ruby-on-rails - ruby/ruby on rails 内存泄漏检测
- android - 无法解析导入android.support.v7.app
- UNIX 域套接字与共享内存(映射文件)
我检查了这些问题但他们没有帮助我解决我的问题。我在使用 spring-data-redis 库的 Spring REST 应用程序中使用 Redis 作为速率限制的键值存储。我测试了巨大的负载。因为我使用以下代码来存储 key 并且我也设置了过期时间。大多数情况下, key 会按预期过期。但有时 key 不会过期!
代码片段
RedisAtomicInteger counter = counter = new RedisAtomicInteger("mykey");
counter.expire(1, TimeUnit.MINUTES);
我使用 redis-cli 工具检查了 key 的可用性
keys *
和
ttl keyname
redis.conf 具有默认值。
有什么建议吗?
编辑 1:
完整代码:
功能在一个方面
public synchronized Object checkLimit(ProceedingJoinPoint joinPoint) throws Exception, Throwable {
boolean isKeyAvailable = false;
List<String> keysList = new ArrayList<>();
Object[] obj = joinPoint.getArgs();
String randomKey = (String) obj[1];
int randomLimit = (Integer) obj[2];
// for RedisTemplate it is already loaded as
// @Autowired
// private RedisTemplate template;
// in this class
Set<String> redisKeys = template.keys(randomKey+"_"randomLimit+"*");
Iterator<String> it = redisKeys.iterator();
while (it.hasNext()) {
String data = it.next();
keysList.add(data);
}
if (keysList.size() > 0) {
isKeyAvailable = keysList.get(0).contains(randomKey + "_" + randomLimit);
}
RedisAtomicInteger counter = null;
// if the key is not there
if (!isKeyAvailable) {
long expiryTimeStamp = 0;
int timePeriodInMintes = 1;
expiryTimeStamp = new Date(System.currentTimeMillis() + timePeriodInMintes * 60 * 1000).getTime();
counter = new RedisAtomicInteger(randomKey+ "_"+ randomLimit + "_" + expiryTimeStamp,template.getConnectionFactory());
counter.incrementAndGet();
counter.expire(timePeriodInMintes, TimeUnit.MINUTES);
break;
} else {
String[] keys = keysList.get(0).split("_");
String rLimit = keys[1];
counter = new RedisAtomicInteger(keysList.get(0), template.getConnectionFactory());
int count = counter.get();
// If count exceeds throw error
if (count != 0 && count >= Integer.parseInt(rLimit)) {
throw new Exception("Error");
}
else {
counter.incrementAndGet();
}
}
return joinPoint.proceed();
}
当这些行运行时
RedisAtomicInteger counter = counter = new RedisAtomicInteger("mykey");counter.expire(1, TimeUnit.MINUTES);
我看见了
75672562.380127 [0 10.0.3.133:65462] "KEYS" "mykey_1000*"
75672562.384267 [0 10.0.3.133:65462] "GET" "mykey_1000_1475672621787"
75672562.388856 [0 10.0.3.133:65462] "SET" "mykey_1000_1475672621787" "0"
75672562.391867 [0 10.0.3.133:65462] "INCRBY" "mykey_1000_1475672621787" "1"
75672562.395922 [0 10.0.3.133:65462] "PEXPIRE" "mykey_1000_1475672621787" "60000"
...
75672562.691723 [0 10.0.3.133:65462] "KEYS" "mykey_1000*"
75672562.695562 [0 10.0.3.133:65462] "GET" "mykey_1000_1475672621787"
75672562.695855 [0 10.0.3.133:65462] "GET" "mykey_1000_1475672621787"
75672562.696139 [0 10.0.3.133:65462] "INCRBY" "mykey_1000_1475672621787" "1"
在 Redis 日志中,当我在
中“监控”它时最佳答案
编辑:现在有了更新的代码,我相信除了您报告的内容之外,您的方法存在根本性缺陷。
您实现它的方式需要在生产中运行 KEYS
- 这很糟糕。当你向外扩展时,你将导致服务器上的系统负载不断增加,而且是不必要的。正如它的每一个文档所说,不要在生产中使用keys
。请注意,在 key 名称中编码过期时间不会给您带来任何好处。如果您将 key 名称的那部分作为创建时间戳,甚至是随机数,则什么都不会改变。事实上,如果你删除了那一点,什么都不会改变。
更明智的方法是使用不依赖于时间的键名。使用过期为您处理该功能。让我们称您的限速为“ session ”。您的 key 名称没有时间戳是“ session ID”。通过在其上设置 60 秒的到期时间,它将在 61 秒标记时不再可用。因此,您可以安全地将结果递增并将结果与您的限制进行比较,而无需知道当前时间或到期时间。您只需要一个静态 key 名称和适当的过期设置。
如果您INCR
一个不存在的键,Redis 将返回“1”,这意味着它创建了键并在单个步骤/调用中递增了它。所以基本上逻辑是这样的:
步骤 3.1 很重要。计数为 1 表示这是 Redis 中的一个新 key ,并且您想为其设置过期时间。其他任何情况都意味着应该已经设置了到期时间。如果您在 3.2 中设置它,您将中断该过程,因为它将保留计数器超过 60 秒。
有了这个,您就不需要基于过期时间的动态 key 名称,因此不需要使用 keys
来查明是否存在该速率的现有“ session ” - 有限的对象。它还使您的代码更加简单和可预测,并减少到 Redis 的往返次数——这意味着它将降低 Redis 上的负载并提高性能。至于如何使用您正在使用的客户端库执行此操作,我不能说,因为我不太熟悉它。但是基本序列应该可以翻译成它,因为它相当基本和简单。
但是,您没有显示任何支持过期不会发生的断言的内容。您所做的只是表明 Redis 确实被告知并设置了过期时间。为了支持您的声明,您需要证明 key 不会过期。这意味着您需要在过期时间后显示对 key 的检索,并且在过期后不会通过重新创建计数器来“重置”。您可以看到过期发生的一种方法是使用 keyspace notifications .有了它,您将能够看到 Redis 说 key 已过期。
如果您使用多个窗口来限制速率,或者如果您有一个更大的窗口(即 10 分钟),在这种情况下,排序集可能是一个更明智的选择,以防止前端 -加载请求 - 如果需要的话。但是正如您编写的示例,上面的代码将正常工作。
关于redis - 为什么 Redis key 不会过期?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39850194/
我有一个关于 Redis Pubsub 的练习,如下所示: 如果发布者发布消息但订阅者没有收到服务器崩溃。订阅者如何在重启服务器时收到该消息? 请帮帮我,谢谢! 最佳答案 在这种情况下,消息将永远消失
我们正在使用 Service Stack 的 RedisClient 的 BlockingDequeue 来保存一些数据,直到它可以被处理。调用代码看起来像 using (var client =
我有一个 Redis 服务器和多个 Redis 客户端。每个 Redis 客户端都是一个 WebSocket+HTTP 服务器,其中包括管理 WebSocket 连接。这些 WebSocket+HTT
我有多个 Redis 实例。我使用不同的端口创建了一个集群。现在我想将数据从预先存在的 redis 实例传输到集群。我知道如何将数据从一个实例传输到集群,但是当实例多于一个时,我无法做到这一点。 最佳
配置:三个redis集群分区,跨三组一主一从。当 Master 宕机时,Lettuce 会立即检测到中断并开始重试。但是,Lettuce 没有检测到关联的 slave 已经将自己提升为 master
我想根据从指定集合中检索这些键来删除 Redis 键(及其数据集),例如: HMSET id:1 password 123 category milk HMSET id:2 password 456
我正在编写一个机器人(其中包含要禁用的命令列表),用于监视 Redis。它通过执行禁用命令,例如 (rename-command ZADD "")当我重新启动我的机器人时,如果要禁用的命令列表发生变化
我的任务是为大量听众使用发布/订阅。这是来自 docs 的订阅的简化示例: r = redis.StrictRedis(...) p = r.pubsub() p.subscribe('my-firs
我一直在阅读有关使用 Redis 哨兵进行故障转移的内容。我打算有1个master+1个slave,如果master宕机超过1分钟,就把slave变成master。我知道这在 Sentinel 中是
与仅使用常规 Redis 和创建分片相比,使用 Redis 集群有哪些优势? 在我看来,Redis Cluster 更注重数据安全(让主从架构解决故障)。 最佳答案 我认为当您需要在不丢失任何数据的情
由于 Redis 以被动和主动方式使 key 过期, 有没有办法得到一个 key ,即使它的过期时间已过 (但 在 Redis 中仍然存在 )? 最佳答案 DEBUG OBJECT myKey 将返回
我想用redis lua来实现monitor命令,而不是redis-cli monitor。但我不知道怎么办。 redis.call('monitor') 不起作用。 最佳答案 您不能从 Redis
我读过 https://github.com/redisson/redisson 我发现有几个 Redis 复制设置(包括对 AWS ElastiCache 和 Azure Redis 缓存的支持)
Microsoft.AspNet.SignalR.Redis 和 StackExchange.Redis.Extensions.Core 在同一个项目中使用。前者需要StackExchange.Red
1. 认识 Redis Redis(Remote Dictionary Server)远程词典服务器,是一个基于内存的键值对型 NoSQL 数据库。 特征: 键值(key-value)型,value
1. Redis 数据结构介绍 Redis 是一个 key-value 的数据库,key 一般是 String 类型,但 value 类型多种多样,下面就举了几个例子: value 类型 示例 Str
1. 什么是缓存 缓存(Cache) 就是数据交换的缓冲区,是存贮数据的临时地方,一般读写性能较高。 缓存的作用: 降低后端负载 提高读写效率,降低响应时间 缓存的成本: 数据一致性成本 代码维护成本
我有一份记录 list 。对于我的每条记录,我都需要进行一些繁重的计算,因为我要在Redis中创建反向索引。为了达到到达记录,需要在管道中执行多个redis命令(sadd为100 s + set为1
我有一个三节点Redis和3节点哨兵,一切正常,所有主服务器和从属服务器都经过验证,并且哨兵配置文件已与所有Redis和哨兵节点一起更新,但是问题是当Redis主服务器关闭并且哨兵希望选举失败者时再次
我正在尝试计算Redis中存储的消息之间的响应时间。但是我不知道该怎么做。 首先,我必须像这样存储chat_messages的时间流 ZADD conversation:CONVERSATION_ID
我是一名优秀的程序员,十分优秀!