当前位置:网站首页>[Redis]-[Redis底层数据结构]-SDS
[Redis]-[Redis底层数据结构]-SDS
2022-06-21 07:48:00 【Pacifica_】
前言
Redis 没有直接使用 C 语言的字符串,而是自己构建了一种名为 简单动态字符串 ( S i m p l e D y n a m i c S t r i n g Simple\ Dynamic\ String Simple Dynamic String,SDS)
结构定义
struct sdshdr{
int len; //记录buf数组中已使用字节的数量,也即该变量所保存字符串的长度
int free; //记录buf数组中未被使用的字节数
char buf[]; //字节数组用于保存字符串实际内容
};
SDS 遵循 C 字符串以空字符 ‘0’ 为结尾的惯例,但这个字符不算在字符串长度,即 len 属性之中。对于这个空字符的操作,SDS 的接口都已经封装好了,对用户来说这个空字符就是透明的;保留这个惯例的好处在于,可以直接使用 C 字符串函数库里的一些函数
SDS 的特点
常数复杂度获取字符串的长度
C 字符串本身并不记录自身的长度,每次获取字符串的长度都需要去遍历整个字符串,复杂度为 O(N);
而 SDS 使用一个变量 len 维护字符串内容的长度,每次获取长度只需访问 len 属性的值即可,复杂度为 O(1)
确保了获取字符串的长度的操作的时间复杂度从 O(N) 降低为 O(1),保证这个操作不会是影响性能的瓶颈,特别是在频繁获取字符串长度的场景下
杜绝了缓冲区溢出
由于 C 字符串不记录本身的长度,容易造成 缓冲区溢出 的问题。例如,<String.h>/strcat 函数,在对一个字符串拼接到另外一个字符串末尾时,由于不知道目标字符串的长度,执行函数会默认目标字符串所占空间是足够拼接被拼接的字符串的,所以会直接将被拼接的字符串接到目标字符串的后续空间中,这样就可能导致原来目标字符串后续空间中的内容被被拼接字符串给覆盖掉,即发生了缓冲区溢出的问题
而 SDS 记录了字符串本身的长度,在执行类似的拼接操作时,会先判断目标字符串的所占空间大小是否足以拼接被拼接字符串,如果不够的话,就会先扩展目标字符串的空间大小再进行拼接操作
减少了修改字符串时带来的内存重分配次数
一个包含 N 个字符的 C 字符串总是占用 N + 1 个字符长的数组,所以每次增长或者缩短一个 C 字符串,都会对这个字符串的数组进行一次重分配操作
内存重分配需要耗费一定的时间,如果这种操作不是频繁出现,那么每次修改字符串都进行一次内存重分配还是可以接受的;但 Redis 作为数据库,经常用于速度要求严格,数据修改频繁的场景,每次修改都耗费一定时间来内存重分配就会对性能造成一定的影响
SDS 使用了 未使用空间 的方法,即 buf 数组中可以包含未使用的字节,字节的数目由 free 属性维护。通过 未使用空间,SDS 实现了 空间预分配 和 惰性空间释放 两种优化策略
空间预分配
当需要对一个 SDS 进行空间扩展的时候,程序不仅会为 SDS 分配修改所必须要的空间,还会为 SDS 分配额外的未使用空间:
- 如果对 SDS 进行修改之后 SDS 的长度 (len 属性) 将小于 1 MB,那么程序分配和 len 属性同样大小的未使用空间
- 如果对 SDS 进行修改之后 SDS 的长度将大于等于 1 MB,那么程序就会分配 1 MB的未使用空间
通过 空间预分配 策略,就可以减少连续对字符串进行增长操作所需的内存重分配次数,在操作之前,会先判断未使用空间的大小是否足够,足够的话直接使用未使用空间
通过这种策略,SDS 将连续增长 N 次字符串所需的内存重分配次数从 必定 N 次 降低为 最多 N 次
惰性空间释放
惰性空间释放用于优化 SDS 的字符串缩短操作:当需要缩短 SDS 保存的字符串时,程序并不立即使用内存呢重分配来回收缩短后多出来的字节,而是使用 free 属性将这些字节的数量记录起来,并等待将来使用
通过这种策略,SDS 避免了缩短字符串时所需的内存重分配操作,并为将来可能出现的增长操作提供了优化:后续需要增长字符串时,如果增长所需的空间小于未使用空间的大小,那就可以直接进行增长操作而不需要进行内存重分配来扩展字符串的空间
二进制安全
C 字符串中的字符必须符合某种编码;而且除了字符串的末尾之外,字符串里面不能包含空字符,否则就会导致字符串保存的内容与预期的不符。这些性质使得 C 字符串不符合二进制安全的性质
而 SDS 的 API 都是二进制安全的,API 会以处理二进制的方式来处理 SDS 存放在 buf 数组中的内容,不会对其中的数据做任何限制,过滤,或者假设,数据在写入时是什么样的,被读取时就是什么样的,在这里没有任何 “特殊字符” 的概念,所有字符都是其本身而已。另外,SDS 使用 len 属性来判断字符串是否结束,而不是使用空字符,这就避免了空字符会造成的影响
有了二进制安全的特性,Redis 不仅可以存储文本数据,还可以保存任意格式的二进制数据
兼容部分 C 字符串函数
SDS 遵循 C 字符串中以空字符为结尾的惯例,这使得其可以重用一部分字符串函数库的函数,避免了不必要的代码重复
边栏推荐
- Asp. Net web API 2 Lesson 1 - getting started
- [visualization - source code reading] antvis / g-base interpretation - 1
- Matlab 3D diagram (unconventional)
- mysql如何关闭事务
- Research Report on anhydrous trisodium phosphate industry - market status analysis and development prospect forecast
- China inorganic fiber market trend report, technical innovation and market forecast
- C language conditional operator?: The only ternary operator
- 2021-06-17 STM32F103 USART serial port code using firmware library
- ANSA二次开发 - 外部程序采用socket与ANSA实现通信
- Upgrade Jenkins steps and problems encountered
猜你喜欢

stm32中定义和声明问题

rdkit | 药物分子进行片段分解

微信公众号对接 : 一键推送文章信息至公众号

Upgrade Jenkins steps and problems encountered

2021-07-28 STM32F103 I2C Hardware Transfer Include previous IO Clock EXIT USB use firmware library

The concept of tree

How to make MySQL case insensitive

Horizontal slot, one line of code can directly convert the web page to PDF and save it (pdfkit)

mysql如何关闭事务

2021-06-17 STM32F103 USART串口代码 使用固件库
随机推荐
In order to thoroughly understand the problem of garbled code, I dug up the history of the character set in a rage
Horizontal slot, one line of code can directly convert the web page to PDF and save it (pdfkit)
Deploy ZABBIX enterprise level distributed monitoring
Sword finger offer (2nd Edition) brush questions | 04 Find in 2D array
2021-07-28 STM32F103 I2C Hardware Transfer Include previous IO Clock EXIT USB use firmware library
Type de contrôle qml: Drawer
C language conditional operator?: The only ternary operator
RDKit | 拓扑极性表面积(TPSA)
数字孪生实际应用案例-煤矿篇
為什呢代碼沒報錯但是數據庫裏邊的數據顯示不出來
19 statistics and its sampling distribution -- distribution of sample mean and central limit theorem
32单片机——pwm波输出
Why is there no error in the code, but the data in the database cannot be displayed
RPA(影刀)无需写代码抓取某东的商品信息
Rdkit | molecular similarity based on molecular fingerprint
Learning Tai Chi maker esp8226 (IX) JSON data communication III
文件下载 二进制流的形式构造url和base64下载
MSDN中“演练:使用 Web 窗体页创建分页的数据访问” 一文中的代码的一点改进
144. preorder traversal of binary tree
Research Report on market supply and demand and strategy of shuttleless loom industry in China