Redis数据存储和读写-6ren

Redis数据存储和读写

转载作者：撒哈拉更新时间：2024-06-02 11:09:21

今天工作群里，有小伙伴问了一个问题，从Redis获取的数据，一会是0，一会是OK.

这引起了我们对Redis数据存储和读写的疑问.

以下是整理的一些技术研究内容.

在 Redis 中，所有的数据存储都是基于字符串的。无论你插入的是 String、int 还是 DateTime 类型的数据，最终都会以字符串的形式存储在 Redis 中。具体来说:

String 类型数据:
- 存储：直接以字符串形式存储，无需额外处理。
- 取出：直接取出字符串即可。
int 类型数据:
- 存储：将 int 类型转换为字符串，然后存储。
- 取出：从 Redis 中取出字符串后，再转换为 int 类型。
DateTime 类型数据:
- 存储：通常将 DateTime 类型转换为某种标准格式的字符串（如 ISO 8601 格式），然后存储。
- 取出：从 Redis 中取出字符串后，再解析为 DateTime 类型。

具体的操作示例如下:

插入数据。

import redis
from datetime import datetime

# 连接到 Redis
r = redis.StrictRedis(host='localhost', port=6379, db=0)

# 存储 String 数据
r.set('my_string', 'Hello, Redis!')

# 存储 int 数据
r.set('my_int', str(12345))

# 存储 DateTime 数据
now = datetime.now().isoformat()
r.set('my_datetime', now)

取出数据。

# 取出 String 数据
my_string = r.get('my_string').decode('utf-8')

# 取出 int 数据
my_int = int(r.get('my_int'))

# 取出 DateTime 数据
my_datetime = datetime.fromisoformat(r.get('my_datetime').decode('utf-8'))

数据类型转换：当你从 Redis 取出数据时，Redis 返回的是字节字符串，你需要根据存储的数据类型进行相应的转换:

**String 数据：**直接解码为字符串。
**int 数据：**先解码为字符串，然后转换为整数。
**DateTime 数据：**先解码为字符串，然后解析为 DateTime 对象。

这种方式虽然简单直接，但需要在应用层处理数据的序列化和反序列化.

我们可以根据需要选择不同的序列化格式（如 JSON、Protobuf 等）来存储更复杂的数据结构.

这种设计会出现数据序列化和反序列化的性能问题吗？

Redis内部数据的存储原理是什么？

Redis 是一个基于内存的高性能键值存储系统，采用了多种数据结构来优化数据存储和访问效率。下面是 Redis 内部数据存储的一些关键原理和机制:

数据结构

Redis 支持多种数据结构，每种数据结构有其特定的存储方式:

字符串（String）。
- 存储：Redis 的字符串是二进制安全的，最长可以存储 512 MB 的数据。字符串数据结构采用简单动态字符串（SDS）来实现，这种结构允许高效的字符串操作和内存管理。
- 数据结构：SDS 是一种带有元数据（如长度和空余空间）的动态数组。
哈希（Hash）。
- 存储：哈希表用于存储键值对集合，适合存储对象的属性数据。
- 数据结构：采用哈希表（dict）实现。小哈希表（元素少于一定数量时）采用 ziplist（压缩列表）优化存储，大哈希表则使用标准的哈希表实现。
列表（List）。
- 存储：列表用于存储有序的字符串集合，支持快速的头尾插入和删除操作。
- 数据结构：列表小于一定大小时使用 ziplist 实现，较大时使用双向链表（quicklist）实现。
集合（Set）。
- 存储：集合用于存储无序的字符串集合，支持快速的添加、删除和成员检查操作。
- 数据结构：小集合使用整数数组（intset）实现，大集合使用哈希表实现。
有序集合（Sorted Set）。
- 存储：有序集合在集合的基础上为每个成员关联一个分数，成员按分数排序。
- 数据结构：采用跳表（skiplist）和哈希表联合实现，跳表用于排序，哈希表用于快速查找。
位图（Bitmap）。
- 存储：位图用于高效地存储和操作大量的二进制数据。
- 数据结构：底层实现为字符串，按位操作。
HyperLogLog 。
- 存储：用于基数估计算法，估算集合中不重复元素的数量。
- 数据结构：底层使用稀疏和稠密两种表示法来优化空间使用。
地理空间（Geo）。
- 存储：用于存储地理位置信息。
- 数据结构：基于有序集合实现，通过 GEOADD、GEORADIUS 等命令操作。

内存管理

Redis 采用多种内存管理技术来优化性能和内存使用:

内存分配：Redis 使用 jemalloc 作为默认的内存分配器，可以高效地管理内存碎片和分配。
对象共享：对于常用的小对象（如小整数），Redis 会在内部共享这些对象，减少内存开销。
内存压缩：对于字符串等数据，Redis 可以使用压缩技术来减少内存使用。
LRU/LFU 淘汰：当内存达到设定的上限时，Redis 可以根据设定的策略（如 LRU 或 LFU）淘汰不常用的数据。

持久化

为了防止数据丢失，Redis 提供了多种持久化机制:

RDB 快照：定期将内存中的数据快照保存到磁盘。优点是数据恢复速度快，但可能丢失最近的数据。
AOF 日志：记录每个写操作，定期将日志刷新到磁盘。优点是数据持久化更可靠，但恢复速度较慢。
混合模式：结合 RDB 和 AOF 的优点，先加载 RDB 快照，然后应用 AOF 日志。

哨兵和集群

为了实现高可用性和扩展性，Redis 提供了哨兵模式和集群模式:

哨兵模式：通过哨兵进程监控 Redis 主从节点的状态，自动进行故障转移。
集群模式：将数据分片存储到多个节点上，通过哈希槽（hash slot）实现数据分布和访问。

Redis 内部通过这些机制和原理，提供了高效、可靠的键值存储和访问服务.

以上。

周国庆

2024/6/2

。

最后此篇关于Redis数据存储和读写的文章就讲到这里了,如果你想了解更多关于Redis数据存储和读写的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！。

文章推荐：『手撕Vue-CLI』下载指定模板

MongoDB Catalina 读写
我用 chown 不行。 Bilals-MBP:~ $ sudo mkdir -p /data/db Password: mkdir: /data/db: Read-only file system
c++ - Qt和Arduino串行通信(读写)
我陷入了一个非常简单的问题。我正在尝试制作一个Qt GUI应用程序以从GUI控制我的Arduino(而不是从Arduino IDE的串行监视器控制它)。我能够使用QSerialPort write(
C++ COM口的打开、读写
我正在尝试使用 Win32 的 CreateFile 函数打开一个 COM 端口。我已经在 MSDN 以及几个论坛上阅读了有关如何执行此操作的文档，但无论我做什么，我仍然收到错误代码 #2(端口不存在
c++ - 用c++读写
我正在尝试使用系统调用 read() 和 write()。以下程序创建一个文件并将一些数据写入其中。这是代码.. int main() { int fd; open("stud
ios - Xcode中如何使用已有的数据库文件，读写？
我对 Xcode 和 sqlite 有点陌生。现在我有一个名为“mydb.db”的数据库文件，它已经有一些表和数据。我把它放在我的 mac 文件夹中，然后将它拖到“支持文件”下的 Xcode 项目中。
Python 读写 tty
背景:如果需要，请跳至问题部分我正在研究测试设备的前端。前端的目的是为了更容易编写长测试脚本。几乎只是让它们更易读和可写。设备将使用 Prologix GPIB-USB Controller 进行
Python文件常见操作实例分析【读写、遍历】
本文实例讲述了python文件常见操作。分享给大家供大家参考，具体如下： 1.文件是什么？文件是存储在外部介质上的数据或信息集合，程序中源程序、数据中保存的数据、图像中的像素数据等等；文件
multithreading - 原子交换(读写)操作的用例是什么？
C++0x 指定 std::atomic线程安全原子访问变量的模板。这个模板有一个成员函数 std::atomic::exchange原子地在“this”中存储一个新值并检索“this”的现有值。 W
vba - 读写 .ini 文件的推荐方式
VBA 中是否有任何方法可以读取和写入 INI 文件？我知道我可以使用； Open "C:\test.ini" For Input As #1 ...并解析数据。相反，我试图查看已有哪些工具可用。我
architecture - 读写 API，它们是独立的服务吗？
我最近在 GitHub 存储库 system-design-primer 上看到了系统设计示例，它显示了读/写 API。我正在尝试实现 this one 以进行练习。大纲是这样的。它分离了读写API
delphi - 读写 DEVMODE.dmColor
我在使用 DEVMODE 结构的 dmColor 字段时遇到问题。我的默认打印机是彩色打印机，如果我通过控制面板将打印机属性的颜色默认输出为黑白，则 DEVMODE.dmColor 字段始终返回 D
java - 读写 COM 端口？
我知道套接字等如何与 java/android 配合使用，但是如何使用 java 或 python 连接到桌面上的 COM 端口？您想使用地址吗？或者查找您想要的端口是否可用或者什么？我不知道该怎么
amazon-dynamodb - DynamoDB 读写
什么构成 DynamoDB 中的实际读取？它是读取表格中的每一行还是返回什么数据？这就是扫描如此昂贵的原因 - 您读取整个表格并为读取的每一行表格付费吗？能否将 ElasticCache (Me
java - 文件(读写)无法正确检测到换行符
我想用Java编写一个程序来检查src是否存在（如果不抛出FileNoot的话）并将src.txt的内容复制到des.txt 并在开头和结尾处打印两个文件的大小输出为： src.txt is in
c++ - 读写 float 组到文件
我在 C++ 中有一个 float 数组，我想将它保存到一个二进制文件中(以节省空间)，以便以后能够再次读取它。为此，我编写了以下代码来编写数组: float *zbuffer = new float
javascript - websocket javascript 读写
我试图为 websocket 创建一个 Read\Write 函数，但我遇到了一个问题...... var inarrivo = 0; var risposta = ""; function RDW_
c++ - 读写 QGraphicsScene 到二进制文件
在我的应用程序中是用 Qt 编写的，我有一个 QGraphicsScene。在这个 QgraphicsScene 中有一个图像和一些由用户绘制的项目。我想保存这个包含所有内容的 QgraphicsSc
c - 使用命名管道 C 读写
我正在编写一个程序，该程序应该无限期运行并保持变量的值。其他两个程序可以更改变量的值。我使用命名管道接收变量值并将其发送到外部程序。这是我的变量管理器代码。 manager.c: #includ
c - 读写 C 系统调用是否使用缓冲区？
我和一位老师谈过，他告诉我读写系统调用使用缓冲区，因为在你的系统规范中有一个变量控制你可以访问你想要读/写的设备的次数on，系统在他等待写入设备时使用buffer来存储数据。我在另一篇 Stack
C# 读写 TextFile 在中间结束
我运行一个方法，有三个部分，第 1 部分和第 3 部分都是“读取文本文件”，第二部分是将字符串保存到文本文件， // The Save Path is the text file's Path, u

撒哈拉

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城