redis源码学习8 内存管理

最新推荐文章于 2025-01-27 23:29:30 发布
原创 最新推荐文章于 2025-01-27 23:29:30 发布 · 251 阅读 · 0 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
收录于
redis源码学习

当前文章被收录于：

redis源码学习
8 篇文章 0 人学习
订阅专栏 查看详情
本文介绍了zmallo.c中内存管理的方法，通过HAVE_MALLOC_SIZE宏记录已使用的内存，并利用原子操作确保更新的安全性。同时，文章还探讨了defrag.c中的碎片整理策略，特别是jemalloc支持下的主动碎片整理机制。

列文件

  • zmallo.c 内存管理
  • defrag.c 碎片整理



zmallo.c 内存管理

默认定义了宏 HAVE_MALLOC_SIZE，所以会用静态变量 used_memory 存储使用的内存大小并在分配释放内存时更新它。更新时是命名为 atomic* 的宏做的原子操作。


defrag.c 碎片整理

只有使用 jemalloc 才支持

`activeDefragCycle()` 入口，最多每秒一次，'cpu占用' 等条件符合才进行整理
整理内容是所有数据库的 redisDb.dict 这个字典，用静态变量 current_db 和 cursor 存下当前遍历到哪里，每次迭代后检查是否超时限，超了就停等下一次
`activeDefragAlloc()` 整理一个指针的内存。不会重新分配到线程 cache 上

Redis源码解析(25) 在线增量内存碎片处理
李兆龙的博客
06-12 936
本作品采用知识共享署名-非商业性使用-相同方式共享 4.0 国际许可协议进行许可。 本作品 (李兆龙 博文, 由 李兆龙 创作)，由 李兆龙 确认，转载请注明版权。 文章目录引言源码分析activeDefragCycledefragScanCallbackdefragLaterStep总结 源码版本为6.2.3 引言 这是个非常有意思的特性，因为Redis本身的内存申请借助于jemalloc与自己封装的zmalloc系接口，所以可以很好的实现全局的内存统计与内存池化的功能，但是池化的问题也接踵而至，即内存碎
redis4支持内存碎片清理功能实现分析
weixin_34238642的博客
02-09 294
自动清理实现分析 实现代码的入口在:activ...
redis内存碎片整理
LT_lover的专栏
07-31 2397
redis在大量申请、释放资源后，会产生内存碎片，大量的内存碎片会影响新内存的申请，本文分析redis自带的内存碎片整理代码逻辑。
Redis 4.0 自动内存碎片整理（Active Defrag）源码分析
大叶子不小的博客
02-07 2050
我们先看一下redis.conf 中关于的注释（google 翻译）功能介绍警告此功能是实验性的。然而，即使在生产中也进行了压力测试，并且由多个工程师手动测试了一段时间。什么是主动碎片整理？自动（实时）碎片整理允许Redis服务器压缩内存中小数据分配和数据释放之间的空间，从而允许回收内存。碎片化是每个分配器都会发生的一个自然过程（幸运的是，对于Jemalloc来说却不那么重要）和某些工作负载。通常需要重新启动服务器以降低碎片，或者至少刷新所有数据并再次创建。
zmalloc内存管理(1)(Redis源码学习)
highmaple的博客
07-08 504
zmalloc内存管理(1)(Redis源码学习) 在学习sds.c源码时，sdsnewlen函数中开始调用zmalloc相关库函数： sds sdsnewlen(const void *init, size_t initlen) { ... //省略部分代码 // 根据是否有初始化内容，选择适当的内存分配方式 // T = O(N) if (init) { // zmalloc 不初始化所分配的内存 sh = zmalloc(sizeof(
Redis源码学习：SDS设计与内存管理
邓磊的系统设计笔记
06-19 1511
Redis使用简单动态字符串SDS来代替传统C字符串,解决了获取长度低效、缓冲区溢出和二进制不安全等问题。SDS在结构体中维护长度,支持二进制存储,自动扩容防止溢出,性能和灵活性均有提升。文中详细分析了SDS的内存分配、扩容和释放过程。
【redis 源码学习】空间配置（zmalloc）
看，未来的博客
08-28 4938
要学习redis的架构，摆在眼前的，就是空间配置器，所以，第一篇学习，我就先把这座山挪开！！！ 一定是可以实现的！！！
分布式进阶（十一）——分布式框架之高性能：Redis内存管理
smart_an的专栏
04-06 844
本章，我介绍了Redis的内存管理，核心是内存回收策略和缓存淘汰策略。
Redis源码学习
using namespace 数学工具构造器;
10-07 512
Redis 命令参考 1. 数据结构 【大课堂】Redis 简介——为什么选择Redis memcached和redis性能差不多（10-30w qps） Memcached 是多线程，非阻塞 IO 复用的网络模型；Redis 使用单线程的多路 IO 复用模型（Redis 6.0 引入了多线程 IO ） redis提供更丰富的附加功能：发布订阅模型、Lua脚本、事务等 redis过期数据的删除策略有惰性删除和定期删除，而Memcached 只有惰性删除 最详细的Redis五种数据结构详解（理论+实战） 吊打
Redis源码学习（三）--内存管理zmalloc.c
qq_20853741的博客
12-23 744
源码结构 zmalloc.c文件的内容如下： 主要函数 zmalloc() zfree() zcalloc() zrelloc() zstrdup() 字长与字节对齐 CPU一次性能读取数据的二进制位数称为字长，也就是我们通常所说的32位系统（字长4个字节）、64位系统（字长8个字节）的由来。所谓的8字节对齐，就是指变量的起始地址是8的倍数。比如程序运行时（CPU）在读取long型数据的时候，只需要一个总线周期，时间更短，如果不是8字节对齐的则需要两个总线周期才能读完数据。...
Redis源码分析（三十六）--- Redis中的11大优秀设计
热门推荐
走在前往架构师的路上
11-08 2万+
坚持了一个月左右的时间，从最开始的对Redis的代码做分类，从struct结构体分析开始，到最后分析main主程序结束，中间，各大模块的代码逐个击破，学习，总之，收获了非常多，好久没有这么久的耐心把一个框架学透，学习一个框架，会用那只是小小的一部分，能把背后的原理吃透才是真功夫。在这个学习的最后阶段，是时候要来点干货了，我把这1个多月来的一些总结的一些比较好的代码，和设计思想总结出来了，原本想凑成
redis源码阅读-入门篇
yxkong的专栏
12-08 820
redis源码阅读的准备环境，以及redis源码模块的简单介绍
Redis内存管理：内存快满了！redis如何驱逐数据？
2401_83412172的博客
05-02 778
面试题文档来啦，内容很多，485页！由于笔记的内容太多，没办法全部展示出来，下面只截取部分内容展示。
Redis源码学习：Redis对象和5种数据类型的工作原理
邓磊的系统设计笔记
06-23 1627
在server.h文件中，zsetdict *dict;} zset;本文讲解了什么Redis对象，已经面向用户的5种常用数据类型的底层逻辑，希望对你有帮助。
Redis源码学习——Redis字典扩容问题
耕云者~
04-23 1517
通过上一篇对dictScan函数的分析，我们引出了两个问题，就是Redis字典在进行扩容的时候，会从size=8直接扩容到size=64吗？那段代码块真的有用吗？下面我们就通过查看源码，逐步来探索一下这个问题。 想要探索这个问题的答案，我们首先要看一下字典会在什么时候进行扩容，首先查看到的函数是： * 根据需要，初始化字典（的哈希表），或者对字典（的现有哈希表）进行扩展 * T = O(N) ...
Redis内存管理与淘汰策略
最新发布
pedestrian_h的博客
01-27 886
本篇文章记录黑马redis笔记-内存管理与淘汰策略
Redis内存管理的基石zmallc.c源码解读（二）
果冻虾仁
04-01 3496
上一篇博文中，我介绍了zmalloc.c文件中几个常用的函数，接下来给大家介绍一下该文件中的其他函数，其实本文中的很多函数要比上一篇文章中的函数要更有趣的，但也更难，并且涉及到很多操作系统的知识。对操作系统，内存分配的底层原理感兴趣的童鞋不容错过。前面几个函数比较简单，一笔带过，后面几个是学习的重点。
Redis源码sds学习四-sdscpy和sdsdup
highmaple的博客
08-05 247
Redis源码sds学习四-sdscpy和sdsdup 在sds动态字符串学习二中，学习了sdscat函数，该函数是字符串拼接函数，C语言中是strcat函数是字符串拼接函数。字符串操作中很多函数，其中在C语言中，还有个常用的字符串拷贝strcpy函数，今天来学习一下redis sds中对应的字符串拷贝函数：sdscpy和sdsdup。 题外话： 学习了几个redis sds字符串操作函数，而C语言中字符串操作函数命名一般为 str*，sds中命名一般为 sds*，*部分对应是一样的，不知道后续其它动态字符
C语言实现redis自增序列,菜鸟从Redis源码学习C语言
weixin_39531183的博客
05-22 261
Redis是一款高效的内存缓存软件，以支持多种数据类型、支持持久化以及高性能著称，因此通过它的源码，来学习C语言是一个不错的主意。以C语言菜鸟身份，以Redis3.0.7为主版本对Redis进行浅显的原理分析。虽然当前Redis的最新版本为Redis3.2.x系列，但相对而言，市面上使用较多的还是Redis3.0.x系列，而且Redis3.0.x系列的代码更加易懂，因此，采用Redis3.0.7这...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值