redis 开启lazy-free机制，内部是否加锁了？

  • Z时代
  • 2024-03-01
  • 分类：IT

redis 开启lazy-free机制后，有些操作会在另一个线程执行，那么对于有些共享且可修改的数据，是不是就要使用同步机制（比如加锁）。

如果使用了同步机制，那单线程还有意义吗，直接支持多线程得了。

回答：

没有锁。

4.0 引入 Lazy Free 时为了避免锁机制带来的性能下降，直接就干掉了共享对象，换成了数据拷贝，这样就不需要锁了。也就是说，表面上看起来这只是个影响删除操作的新特性，实际上整个底层的存储和数据结构都发生了变化。

P.S. 6.0 真的就引入多线程 I/O 了哟。

回答：

  1. lazy-free 是 4.0 新增的功能，默认是关闭的，需要手动开启
  2. 开启 lazy-free 时，有多个「子选项」可以控制，分别对应不同场景下，是否开启异步释放内存：
    a) lazyfree-lazy-expire：key 在过期删除时尝试异步释放内存
    b) lazyfree-lazy-eviction：内存达到 maxmemory 并设置了淘汰策略时尝试异步释放内存
    c) lazyfree-lazy-server-del：执行 RENAME/MOVE 等命令或需要覆盖一个 key 时，Redis 内部删除旧 key 尝试异步释放内存
    d) replica-lazy-flush：主从全量同步，从库清空数据库时异步释放内存
  3. 即使开启了 lazy-free，但如果执行的是 DEL 命令，则还是会同步释放 key 内存，只有使用 UNLINK 命令才「可能」异步释放内存
  4. Redis 6.0 版本新增了一个新的选项 lazyfree-lazy-user-del，打开后执行 DEL 就与 UNLINK 效果一样了
  5. 最关键的一点，开启 lazy-free 后，除 replica-lazy-flush 之外，其它选项都只是「可能」异步释放 key 的内存，并不是说每次释放 key 内存都是丢到后台线程的
  6. 开启 lazy-free 后，Redis 在释放一个 key 内存时，首先会评估「代价」，如果代价很小，那么就直接在「主线程」操作了，「没必要」放到后台线程中执行（不同线程传递数据也会有性能消耗）

  7. 什么情况才会真正异步释放内存？这和 key 的类型、编码方式、元素数量都有关系（详见 lazyfreeGetFreeEffort 函数）：

    a) 当 Hash/Set 底层采用哈希表存储（非 ziplist/int 编码存储）时，并且元素数量超过 64 个
    b) 当 ZSet 底层采用跳表存储（非 ziplist 编码存储）时，并且元素数量超过 64 个
    c) 当 List 链表节点数量超过 64 个（注意，不是元素数量，而是链表节点的数量，List 底层实现是一个链表，链表每个节点是一个 ziplist，一个 ziplist 可能有多个元素数据）

只有满足以上条件，在释放 key 内存时，才会真正放到「后台线程」中执行，其它情况一律还是在主线程操作。

也就是说 String（不管内存占用多大）、List（少量元素）、Set（int 编码存储）、Hash/ZSet（ziplist 编码存储）这些情况下的 key，在释放内存时，依旧在「主线程」中操作。

  1. 可见，即使打开了 lazy-free，String 类型的 bigkey，在删除时依旧有「阻塞」主线程的风险。所以，即便 Redis 提供了 lazy-free，还是不建议在 Redis 存储 bigkey
  2. Redis 在释放内存「评估」代价时，不是看 key 的内存大小，而是关注释放内存时的「工作量」有多大。从上面分析可以看出，如果 key 内存是连续的，释放内存的代价就比较低，则依旧放在「主线程」处理。如果 key 内存不连续（包含大量指针），这个代价就比较高，这才会放在「后台线程」中执行
引用自极客时间《Redis 源码剖析与实战》- Lazy Free会影响缓存替换吗？评论区大神：Kaito

以上是 redis 开启lazy-free机制，内部是否加锁了？ 的全部内容， 来源链接： utcz.com/p/944476.html

回到顶部