redis数据结构之String详解

 更新时间:2025年08月15日 08:51:47   作者:ruan114514  
Redis以String为基础类型,因C字符串效率低、非二进制安全等问题,采用SDS动态字符串实现高效存储,通过RedisObject封装,支持多种编码方式(如RAW、EMBSTR、INT)和内存优化策略,灵活管理数据结构与内存使用

一、为什么Redis选String作为基础类型?

redis中的所有key是字符串,所有value本质上也是字符串,比如 集合set中的每一个 成员 都是一个独立的字符串对象,列表中的每一个 元素 都是一个独立的字符串对象,整个HASH是一个对象,它内部的每一个 字段(field) 和一个字段值(value) 都是一个独立的字符串对象

redis是通过c语言来实现的,但是没有直接使用c语言中的字符串,有几下几点原因

  • 获取字符串长度需要通过运算:C字符串以\0(空字符)结尾,要获取长度必须遍历整个数组直到遇到\0,时间复杂度为O(n),这在高性能数据库如Redis中效率低下。
  • 非二进制安全:C字符串不能存储任意二进制数据,因为它依赖于\0作为结束符。如果数据中包含\0(如一些二进制文件),会被错误截断,破坏数据完整性。
  • 不可修改:C语言字符串常量(如char* s = "hello")是只读的,无法直接扩展或修改其长度,这在动态数据存储中不灵活。

Redis的解决方案:Redis因此构建了自己的字符串结构——SDS(简单动态字符串),它通过设计一个智能结构来支持查找、二进制安全性和动态修改。

二、SDS底层数据结构

uint8_t (8位无符号整数),可表示的最大值是 255 (因为 2^8 - 1 = 255),因此 len 最多记录 255 字节 的长度,否则会溢出,如果一个 SDS 字符串的实际长度超过 255 字节,Redis 会自动选择更大容量的结构体(如 sdshdr16/sdshdr32)。

三、RedisObject是什么

通常我们了解的数据结构有字符串、双端链表、字典、压缩列表、整数集合等,但是Redis为了加快读写速度,并没有直接使用这些数据结构,而是在此基础上又包装了一层称之为RedisObject。

RedisObject 有五种对象:字符串对象(String)、列表对象(List)、哈希对象(Hash)、集合对象(Set)和有序集合对象(ZSet)。

1.type:数据类型标识(4 bit)就是redis基本类型

类型常量对应数据结构
OBJ_STRING0字符串
OBJ_LIST1列表
OBJ_SET2集合
OBJ_ZSET3有序集合
OBJ_HASH4哈希表

2.encoding:内部编码(4 bit)

同一数据类型可对应不同底层实现:

编码常量适用类型底层结构
OBJ_ENCODING_INT0String整数存储
OBJ_ENCODING_EMBSTR1String短字符串优化
OBJ_ENCODING_RAW2StringSDS动态字符串
OBJ_ENCODING_HT3Hash/Set哈希表
OBJ_ENCODING_ZIPLIST4List/Hash/Zset压缩列表
OBJ_ENCODING_QUICKLIST5List快速列表
OBJ_ENCODING_SKIPLIST6Zset跳表
OBJ_ENCODING_STREAM7Stream流数据结构

动态编码转换示例:

  • 当 Hash 的元素超过 hash-max-ziplist-entries 时
  • OBJ_ENCODING_ZIPLIST → OBJ_ENCODING_HT

3.lru:缓存淘汰信息(24 bit)

  • LRU模式:记录对象最后访问时间戳(精度:秒级)
  • LFU模式(Redis 4.0+):
16 bits      8 bits
+------------+------+
| 访问时间戳   | 频率 |
+------------+------+
  • 频率(logc):基于概率递增的访问计数器
  • 时间戳:解决冷数据滞留问题

4.refcount:引用计数(4字节)

  • 内存回收refcount=0 时自动释放内存
  • 对象共享:相同数据复用对象(如 SET key 100 共享整数对象)
  • 多客户端引用:同一 key 被多个客户端连接引用

5.ptr:数据指针(8字节)

指向实际数据结构,如:

  • OBJ_ENCODING_INT → 直接存储整数(void * 强转为 long
  • OBJ_ENCODING_RAW → 指向 sds 结构
  • OBJ_ENCODING_HT → 指向 dict 哈希表

四、String类型数据结构

string类型在redis中有三种编码方式

RAW编码

分配两次内存 RedisObject和SDS的内存不连续 两个数据结构申请了两片内存区域

EMBSTR编码

INT编码

为什么分界线是44字节?

44字节的临界值源于内存分配器的优化策略,具体计算如下:

1. 内存分配器的最小单位

  • Redis 默认使用 jemalloc 或 glibc malloc
  • 这些分配器的最小分配单元通常是 64字节(CPU缓存行对齐)

2. EMBSTR 的总内存占用公式

总大小 = RedisObject(16字节) + SDS头部(3字节) + 字符串内容(N字节) + 结束符\0(1字节)
  • 最大允许占用:64字节(分配器最小单元)
  • 固定开销:16(robj) + 3(sds) + 1(\0) = 20字节
  • 可用空间:64 - 20 = 44字节
编码类型OBJ_ENCODING_INTOBJ_ENCODING_EMBSTROBJ_ENCODING_RAW
触发条件数值类型且值在 [LONG_MIN, LONG_MAX]字符串长度 ≤ 44字节字符串长度 > 44字节
内存分配次数1次(RedisObject内联存储)1次(连续内存块)2次(RedisObject + SDS分开)
适用场景计数器(如 INCR 操作)短字符串(如JSON片段、短URL)长文本、二进制数据
修改时的行为直接替换整数值自动转换为 RAW 编码原地修改或重新分配
内存占用示例存储 100:16字节(RedisObject)存储 "hello":16+6=22字节存储1KB文本:16+1024+9=1049字节

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • redis和redission分布式锁原理及区别说明

    redis和redission分布式锁原理及区别说明

    文章对比了synchronized、乐观锁、Redis分布式锁及Redission锁的原理与区别,指出在集群环境下synchronized失效,乐观锁存在数据库性能瓶颈,而Redission通过watchdog自动续期和Lua原子操作解决Redis锁的超时问题,推荐其在高并发场景下的可靠性与易用性
    2025-08-08
  • Redis Brpop 命令作用详解

    Redis Brpop 命令作用详解

    BRPOP 是一个阻塞的列表弹出原语,该命令会按照给出的 key 顺序查看 list,并在找到的第一个非空 list 的尾部弹出一个元素,今天通过本文给大家介绍Redis Brpop 命令相关知识,感兴趣的朋友一起看看吧
    2023-07-07
  • Mac中Redis服务启动时错误信息:NOAUTH Authentication required

    Mac中Redis服务启动时错误信息:NOAUTH Authentication required

    这篇文章主要介绍了Mac中使用Redis服务启动时错误信息:"NOAUTH Authentication required"问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2023-08-08
  • Redis报错:无法连接Redis服务的解决方法

    Redis报错:无法连接Redis服务的解决方法

    在Linux系统上运行Redis服务时,有时会遇到“无法连接Redis服务”的报错,本文就详细的介绍一下解决方法,具有一定的参考价值,感兴趣的可以了解一下
    2023-09-09
  • 使用RedisAtomicInteger计数出现少计问题及解决

    使用RedisAtomicInteger计数出现少计问题及解决

    这篇文章主要介绍了使用RedisAtomicInteger计数出现少计问题及解决方案,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
    2022-11-11
  • redis zset实现滑动窗口限流的代码

    redis zset实现滑动窗口限流的代码

    这篇文章主要介绍了redis zset实现滑动窗口限流,滑动窗口算法思想就是记录一个滑动的时间窗口内的操作次数,操作次数超过阈值则进行限流,本文通过实例代码给大家详细介绍,需要的朋友参考下吧
    2022-03-03
  • Redis中缓存穿透的实现示例

    Redis中缓存穿透的实现示例

    本文主要介绍了Redis中缓存穿透的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2025-07-07
  • Redis不同数据类型使用场景代码实例

    Redis不同数据类型使用场景代码实例

    这篇文章主要介绍了Redis不同数据类型使用场景代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-12-12
  • 使用Redis实现延时任务的解决方案

    使用Redis实现延时任务的解决方案

    这篇文章主要介绍了使用Redis实现延时任务的解决方案,本文给大家介绍的非常详细,具有一定的参考借鉴价值,需要的朋友可以参考下
    2019-08-08
  • Redis跳跃表的基本原理和实现

    Redis跳跃表的基本原理和实现

    本文主要介绍了Redis跳跃表的基本原理和实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2022-06-06

最新评论