Redis Out of Memory 异常，但仍然有足够的内存

Question

我正在使用 StackeExchange.Redis在我们的 .NET Core C# 项目中与 Redis 交互的项目。

在重负载下，我们的 Redis 连接将开始失败，并出现以下异常:

StackExchange.Redis.RedisServerException: OOM command not allowed when used memory > 'maxmemory'

问题是我们剩余的可用内存量大得离谱。我们使用的是 Elasticache，因此很容易查找:

我们还可以通过 shell 连接到 Elasticache，并查看是否有可用内存，并与其进行交互。

这是我用作连接信息层的代码。

    public class RedisTimeConnectionManager : IRedisConnectionManager
{
    // More info about the Lazy<> pattern https://stackoverflow.com/questions/28792196/how-does-connectionmultiplexer-deal-with-disconnects
    // Additional information about the multiplexer: https://github.com/StackExchange/StackExchange.Redis/blob/master/docs/Basics.md
    private static Lazy<ConnectionMultiplexer> RedisConnectionMultiplexer = new Lazy<ConnectionMultiplexer>(() =>
    {
        return ConnectionMultiplexer.Connect(ConnectionString);
    });

    private static string ConnectionString { get; set; }

    public RedisTimeConnectionManager(string connectionString)
    {
        ConnectionString = connectionString;
    }

    public ConnectionMultiplexer GetConnectionMultiplexer()
    {
        return RedisConnectionMultiplexer.Value;
    }

    public IDatabase GetDatabaseConnection()
    {
        return RedisConnectionMultiplexer.Value.GetDatabase();
    }
}

然后我将此连接层传递给我的 Redis“时间”管理器。这是引发 OOM 错误的代码:

public class TimeRedisManager : ITimeRedisManager
{
    private IRedisConnectionManager RedisConnectionManager { get; }

    public TimeRedisManager(IRedisConnectionManager redisConnectionManager)
    {
        RedisConnectionManager = redisConnectionManager;
    }

    public async Task<RedisUserTimelineGetValueDto> GetValueAsync(string id)
    {
        string key = $"time:{id}";

        HashEntry[] entries = await RedisConnectionManager.GetDatabaseConnection().HashGetAllAsync(key);

        // Parse and return values...
    }
}

因为 Elasticache 有超过 7.5GB 的可用内存，并且因为我可以通过 shell 与它交互，所以我假设它要么是 StackExchange.Redis 库，要么是我的代码中的连接管理问题。

.NET 核心 2.1StackExchange.Redis v 2.0.513

最后一件重要的事情 - 当这个异常发生时，它会一直发生。重新启动与 Redis 交互的服务不会执行任何操作。只有重启 Elasticache 节点才能解决问题。

Answer 1

Redis 可能占用其中存储数据所需内存的 2 倍。

在这里阅读更多:https://redis.io/topics/admin

If you are using Redis in a very write-heavy application, while saving an RDB file on disk or rewriting the AOF log Redis may use up to 2 times the memory normally used. The additional memory used is proportional to the number of memory pages modified by writes during the saving process, so it is often proportional to the number of keys (or aggregate types items) touched during this time. Make sure to size your memory accordingly.

因此，如果 Redis 中存储的数据占用 8 Gb 的空间，在重负载下 Redis 可能会消耗 16 Gbs。如果是这种情况，您可能需要相应地调整内存。