Skip to main content

什么是大Key?

作者:程序员马丁

在线博客:https://open8gu.com

note

大话面试,技术同学面试必备的八股文小册,以精彩回答应对深度问题,助力你在面试中拿个offer。

回答话术

Redis 中的 "大 Key" 通常指的是一个占用较大内存空间的键(Key)。这可能会对 Redis 的性能产生负面影响,因为大 Key 可能导致内存碎片化、删除延迟以及网络传输时间延长等问题。

大 Key 可能出现在不同的场景中,例如:

1. 大型字符串

当一个键存储了一个非常大的字符串时,这被认为是一个大 Key。

SET names "xxxxxx"  # 存储大型字符串

2. 大型列表

当一个键存储了一个巨大的数据结构,例如大型的列表、集合或有序集合时,这个键可以被认为是大 Key。

LPUSH mylist "item1"  # 将大量数据存储在列表中

3. 大规模哈希表

当一个键存储了大规模的哈希表,包含了大量的字段和值时,也可以被视为大 Key。

HMSET user:1234 username "mading" email "mading@apache.org"  # 存储大规模哈希

4. 占用多大内存是大 Key?

"大 Key" 的概念相对主观,具体取决于应用程序的需求、硬件配置以及 Redis 实例的总内存大小。在一般情况下,如果一个键的数据量占用了大量的内存比例,可能就可以被认为是大 Key。

具体的大小标准没有固定的规定,因为这取决于多个因素,我们可以在应用设计时按照一个简约的标准执行:

  • String Key 存储内容最多不允许超过 5MB
  • LIST、SET、ZSET 等类型的 Key,成员数量最多不允许超过 20000
  • Hash 类型的 Key,Key 数量参考上条。同时,内部 Key 对应的 Val 不应该过大,不然还是可能成为大 Key。

以上观点参考了多家 Redis 开发规范,但就像上面说的,大 Key 的概念更多取决于应用程序需求、硬件配置以及实例总大小,所以没有标准限制。这点大家可以和面试官重点强调下。

5. 大 Key 风险

大 Key 可能会导致以下问题:

  • 内存碎片化:大 Key 占用的内存块较大,可能导致内存碎片化,从而影响 Redis 的内存使用效率。
  • 网络传输延迟:传输大 Key 的数据可能会导致较长的网络传输时间,特别是在进行备份、迁移或从节点同步等操作时。
  • 删除阻塞:在删除大 Key 的过程中,可能会导致其他操作的响应时间变长。这是因为在删除大 Key 时,需要遍历键中的所有元素,并在内部进行相应的清理操作。在此期间,其他操作会等待删除操作完成。
  • 持久化延迟:如果 Redis 实例使用了持久化机制(如 RDB 快照或 AOF 日志),删除大 Key 可能会导致持久化操作的延迟,因为持久化过程也需要处理大 Key 的数据。

问题详解

现在一些云服务厂商对于数据库的开发可谓是非常深入,帮助咱们做了很多监控、调优等事项,就拿大 Key 举例子,有历史和实时分析两种方式,还有不同纬度的拆分,点点点就能知道程序里有多少大 Key。

image.png

在大 Key 分析页面中,无论这些 Key 当前是否存在,所有曾经出现过的大 Key 都会被记录。此功能能够有效反映 Redis 的历史 Key 状态,有助于追溯过去的情况或已被破坏的现场问题。


如果需要更多关于大 Key 问题的详细文章可以查看以下内容: