redis数据结构之String详解

 更新时间:2025年08月15日 08:51:47   作者:ruan114514  
Redis以String为基础类型,因C字符串效率低、非二进制安全等问题,采用SDS动态字符串实现高效存储,通过RedisObject封装,支持多种编码方式(如RAW、EMBSTR、INT)和内存优化策略,灵活管理数据结构与内存使用

一、为什么Redis选String作为基础类型?

redis中的所有key是字符串,所有value本质上也是字符串,比如 集合set中的每一个 成员 都是一个独立的字符串对象,列表中的每一个 元素 都是一个独立的字符串对象,整个HASH是一个对象,它内部的每一个 字段(field) 和一个字段值(value) 都是一个独立的字符串对象

redis是通过c语言来实现的,但是没有直接使用c语言中的字符串,有几下几点原因

  • 获取字符串长度需要通过运算:C字符串以\0(空字符)结尾,要获取长度必须遍历整个数组直到遇到\0,时间复杂度为O(n),这在高性能数据库如Redis中效率低下。
  • 非二进制安全:C字符串不能存储任意二进制数据,因为它依赖于\0作为结束符。如果数据中包含\0(如一些二进制文件),会被错误截断,破坏数据完整性。
  • 不可修改:C语言字符串常量(如char* s = "hello")是只读的,无法直接扩展或修改其长度,这在动态数据存储中不灵活。

Redis的解决方案:Redis因此构建了自己的字符串结构——SDS(简单动态字符串),它通过设计一个智能结构来支持查找、二进制安全性和动态修改。

二、SDS底层数据结构

uint8_t (8位无符号整数),可表示的最大值是 255 (因为 2^8 - 1 = 255),因此 len 最多记录 255 字节 的长度,否则会溢出,如果一个 SDS 字符串的实际长度超过 255 字节,Redis 会自动选择更大容量的结构体(如 sdshdr16/sdshdr32)。

三、RedisObject是什么

通常我们了解的数据结构有字符串、双端链表、字典、压缩列表、整数集合等,但是Redis为了加快读写速度,并没有直接使用这些数据结构,而是在此基础上又包装了一层称之为RedisObject。

RedisObject 有五种对象:字符串对象(String)、列表对象(List)、哈希对象(Hash)、集合对象(Set)和有序集合对象(ZSet)。

1.type:数据类型标识(4 bit)就是redis基本类型

类型常量对应数据结构
OBJ_STRING0字符串
OBJ_LIST1列表
OBJ_SET2集合
OBJ_ZSET3有序集合
OBJ_HASH4哈希表

2.encoding:内部编码(4 bit)

同一数据类型可对应不同底层实现:

编码常量适用类型底层结构
OBJ_ENCODING_INT0String整数存储
OBJ_ENCODING_EMBSTR1String短字符串优化
OBJ_ENCODING_RAW2StringSDS动态字符串
OBJ_ENCODING_HT3Hash/Set哈希表
OBJ_ENCODING_ZIPLIST4List/Hash/Zset压缩列表
OBJ_ENCODING_QUICKLIST5List快速列表
OBJ_ENCODING_SKIPLIST6Zset跳表
OBJ_ENCODING_STREAM7Stream流数据结构

动态编码转换示例:

  • 当 Hash 的元素超过 hash-max-ziplist-entries 时
  • OBJ_ENCODING_ZIPLIST → OBJ_ENCODING_HT

3.lru:缓存淘汰信息(24 bit)

  • LRU模式:记录对象最后访问时间戳(精度:秒级)
  • LFU模式(Redis 4.0+):
16 bits      8 bits
+------------+------+
| 访问时间戳   | 频率 |
+------------+------+
  • 频率(logc):基于概率递增的访问计数器
  • 时间戳:解决冷数据滞留问题

4.refcount:引用计数(4字节)

  • 内存回收refcount=0 时自动释放内存
  • 对象共享:相同数据复用对象(如 SET key 100 共享整数对象)
  • 多客户端引用:同一 key 被多个客户端连接引用

5.ptr:数据指针(8字节)

指向实际数据结构,如:

  • OBJ_ENCODING_INT → 直接存储整数(void * 强转为 long
  • OBJ_ENCODING_RAW → 指向 sds 结构
  • OBJ_ENCODING_HT → 指向 dict 哈希表

四、String类型数据结构

string类型在redis中有三种编码方式

RAW编码

分配两次内存 RedisObject和SDS的内存不连续 两个数据结构申请了两片内存区域

EMBSTR编码

INT编码

为什么分界线是44字节?

44字节的临界值源于内存分配器的优化策略,具体计算如下:

1. 内存分配器的最小单位

  • Redis 默认使用 jemalloc 或 glibc malloc
  • 这些分配器的最小分配单元通常是 64字节(CPU缓存行对齐)

2. EMBSTR 的总内存占用公式

总大小 = RedisObject(16字节) + SDS头部(3字节) + 字符串内容(N字节) + 结束符\0(1字节)
  • 最大允许占用:64字节(分配器最小单元)
  • 固定开销:16(robj) + 3(sds) + 1(\0) = 20字节
  • 可用空间:64 - 20 = 44字节
编码类型OBJ_ENCODING_INTOBJ_ENCODING_EMBSTROBJ_ENCODING_RAW
触发条件数值类型且值在 [LONG_MIN, LONG_MAX]字符串长度 ≤ 44字节字符串长度 > 44字节
内存分配次数1次(RedisObject内联存储)1次(连续内存块)2次(RedisObject + SDS分开)
适用场景计数器(如 INCR 操作)短字符串(如JSON片段、短URL)长文本、二进制数据
修改时的行为直接替换整数值自动转换为 RAW 编码原地修改或重新分配
内存占用示例存储 100:16字节(RedisObject)存储 "hello":16+6=22字节存储1KB文本:16+1024+9=1049字节

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • 基于Redis实现的分布式唯一编号生成工具类

    基于Redis实现的分布式唯一编号生成工具类

    这篇文章主要介绍了基于Redis实现的分布式唯一编号生成工具类,核心功能是生成格式为 业务编码+日期+3位自增序号(如 JJ20250826001)的全局唯一编号,适用于分布式系统中需要有序、不重复编号的场景(如订单号、单据号等),以下是详细解析,需要的朋友可以参考下
    2025-11-11
  • Redis集群水平扩展、集群中添加以及删除节点的操作

    Redis集群水平扩展、集群中添加以及删除节点的操作

    这篇文章主要介绍了Redis集群水平扩展、集群中添加以及删除节点的操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-03-03
  • redis缓存预热的实现示例

    redis缓存预热的实现示例

    本文主要介绍了Java中实现缓存预热的多种策略,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2024-11-11
  • redis.clients.jedis.exceptions.JedisDataException: NOAUTH Authentication required数据操作异常的解决方法

    redis.clients.jedis.exceptions.JedisDataException: NOAUTH 

    本文主要介绍了redis.clients.jedis.exceptions.JedisDataException: NOAUTH Authentication required数据操作异常的解决方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2024-05-05
  • 浅谈Redis主从复制以及主从复制原理

    浅谈Redis主从复制以及主从复制原理

    在现有企业中80%公司大部分使用的是redis单机服务,在实际的场景当中单一节点的redis容易面临风险。本文将介绍Redis主从复制以及主从复制原理。
    2021-05-05
  • Redis核心原理与实践之字符串实现原理

    Redis核心原理与实践之字符串实现原理

    这本书深入地分析了Redis常用特性的内部机制与实现方式,内容源自对Redis源码的分析,并从中总结出设计思路、实现原理。对Redis字符串实现原理相关知识感兴趣的朋友一起看看吧
    2021-09-09
  • Redis中的Lettuce使用详解

    Redis中的Lettuce使用详解

    Lettuce 是一个高级的、线程安全的 Redis 客户端,用于与 Redis 数据库交互,Lettuce 是一个功能强大、使用方便的 Redis 客户端,适用于各种规模的 Java 项目,下面给大家介绍Redis中的Lettuce使用详解,感兴趣的朋友一起看看吧
    2025-05-05
  • 详解如何清理redis集群的所有数据

    详解如何清理redis集群的所有数据

    这篇文章主要介绍了详解如何清理redis集群的所有数据,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2021-02-02
  • Redis缓存高可用集群详解

    Redis缓存高可用集群详解

    Redis集群提供了哨兵模式和高可用集群模式两种方案,前者适合低并发,配置复杂,主从切换可能导致瞬断;后者通过多主多从结构提高可用性和性能,支持线性扩展,配置简单,搭建Redis集群至少需要三个主节点
    2024-10-10
  • Redis+Caffeine实现高效两级缓存架构的详细指南

    Redis+Caffeine实现高效两级缓存架构的详细指南

    在现代高并发系统中,缓存是提升系统性能的关键组件之一,本文将介绍如何结合 Redis 和 Caffeine 构建一个高效的两级缓存系统,需要的小伙伴可以了解下
    2025-07-07

最新评论