db-tutorial/docs/12.数据库/05.KV数据库/01.Redis/01.Redis面试总结.md

12 KiB
Raw Blame History

title date categories tags permalink
Redis 面试总结 2020-07-13 17:03:42
数据库
KV数据库
Redis
数据库
KV数据库
Redis
面试
/pages/451b73/

Redis 面试总结

Redis 数据类型

【问题】

  • Redis 有哪些数据类型?
  • Redis 的数据类型分别适用于什么样的场景?

【解答】

Redis 数据类型和应用

数据类型的特性和应用细节点较多,详情可以参考:Redis 数据类型

1Redis 支持五种基本数据类型:

  • String常用于 KV 缓存
  • Hash存储结构化数据产品信息、用户信息等。
  • List存储列表粉丝列表、文章评论列表等。可以通过 lrange 命令进行分页查询。
  • Set存储去重列表粉丝列表等。可以基于 set 玩儿交集、并集、差集的操作。例如:求两个人的共同好友列表。
  • Sorted Set存储含评分的去重列表各种排行榜。

2除此以外还有 Bitmaps、HyperLogLogs、GEO、Streams 等高级数据类型。

Redis 内存淘汰

【问题】

  • Redis 有哪些内存淘汰策略?
  • 这些淘汰策略分别适用于什么场景?
  • Redis 有哪些删除失效 key 的方法?
  • 如何设置 Redis 中键的过期时间?
  • 如果让你实现一个 LRU 算法,怎么做?

【解答】

1Redis 过期策略是:定期删除+惰性删除

  • 消极方法passive way在主键被访问时如果发现它已经失效那么就删除它。
  • 主动方法active way定期从设置了失效时间的主键中选择一部分失效的主键删除。

2Redis 内存淘汰策略:

  • noeviction - 当内存使用达到阈值的时候,所有引起申请内存的命令会报错。这是 Redis 默认的策略。
  • allkeys-lru - 在主键空间中,优先移除最近未使用的 key。
  • allkeys-random - 在主键空间中,随机移除某个 key。
  • volatile-lru - 在设置了过期时间的键空间中,优先移除最近未使用的 key。
  • volatile-random - 在设置了过期时间的键空间中,随机移除某个 key。
  • volatile-ttl - 在设置了过期时间的键空间中,具有更早过期时间的 key 优先移除。

3如何选择内存淘汰策略

  • 如果数据呈现幂等分布,也就是一部分数据访问频率高,一部分数据访问频率低,则使用 allkeys-lru
  • 如果数据呈现平等分布,也就是所有的数据访问频率都相同,则使用 allkeys-random
  • volatile-lru 策略和 volatile-random 策略适合我们将一个 Redis 实例既应用于缓存和又应用于持久化存储的时候,然而我们也可以通过使用两个 Redis 实例来达到相同的效果。
  • 将 key 设置过期时间实际上会消耗更多的内存,因此我们建议使用 allkeys-lru 策略从而更有效率的使用内存。

4LRU 算法实现思路:可以继承 LinkedHashMap并覆写 removeEldestEntry 方法来实现一个最简单的 LRUCache

Redis 持久化

【问题】

  • Redis 有几种持久化方式?
  • Redis 的不同持久化方式的特性和原理是什么?
  • RDB 和 AOF 各有什么优缺点?分别适用于什么样的场景?
  • Redis 执行持久化时,可以处理请求吗?
  • AOF 有几种同步频率?

【解答】

Redis 持久化

详情可以参考:Redis 持久化

1Redis 支持两种持久化方式RDB 和 AOF。

2RDB 即某一时刻的二进制数据快照。

Redis 会周期性生成 RDB 文件。

生成 RDB 流程Redis fork 一个子进程,负责生成 RDB生成 RDB 采用 Copy On Write 模式,此时,如果收到写请求,会在原副本上操作,不影响工作。

RDB 只能恢复生成快照时刻的数据,之后的数据无法恢复。生成 RDB 的资源开销高昂。RDB 适合做冷备。

3AOF 会将写命令不断追加到 AOF 文本日志末尾。

AOF 丢数据比 RDB 少,但文件会比 RDB 文件大很多。

一般AOF 设置 appendfsync 同步频率为 everysec 即可。

4RDB or AOF

建议同时使用 RDB 和 AOF。用 AOF 来保证数据不丢失,作为数据恢复的第一选择; 用 RDB 来做不同程度的冷备,在 AOF 文件都丢失或损坏不可用的时候,还可以使用 RDB 来进行快速的数据恢复。

Redis 事务

【问题】

  • Redis 的并发竞争问题是什么?如何解决这个问题?
  • Redis 支持事务吗?
  • Redis 事务是严格意义的事务吗Redis 为什么不支持回滚。
  • Redis 事务如何工作?
  • 了解 Redis 事务中的 CAS 行为吗?

【解答】

Redis 的事务特性、原理

详情参考:Redis 应用指南之 事务

Redis 提供的不是严格的事务Redis 只保证串行执行命令,并且能保证全部执行,但是执行命令失败时并不会回滚,而是会继续执行下去

Redis 不支持回滚的理由:

  • Redis 命令只会因为错误的语法而失败,或是命令用在了错误类型的键上面。
  • 因为不需要对回滚进行支持,所以 Redis 的内部可以保持简单且快速。

MULTIEXECDISCARDWATCH 是 Redis 事务相关的命令。

Redis 有天然解决这个并发竞争问题的类 CAS 乐观锁方案:每次要写之前,先判断一下当前这个 value 的时间戳是否比缓存里的 value 的时间戳要新。如果是的话,那么可以写,否则,就不能用旧的数据覆盖新的数据。

Redis 管道

【问题】

  • 除了事务,还有其他批量执行 Redis 命令的方式吗?

【解答】

Redis 是一种基于 C/S 模型以及请求/响应协议的 TCP 服务。Redis 支持管道技术。管道技术允许请求以异步方式发送即旧请求的应答还未返回的情况下允许发送新请求。这种方式可以大大提高传输效率。使用管道发送命令时Redis Server 会将部分请求放到缓存队列中(占用内存),执行完毕后一次性发送结果。如果需要发送大量的命令,会占用大量的内存,因此应该按照合理数量分批次的处理。

Redis 高并发

【问题】

  • Redis 是单线程模型,为何吞吐量还很高?
  • Redis 的 IO 多路复用原理是什么?
  • Redis 集群如何分片和寻址?
  • Redis 集群如何扩展?
  • Redis 集群如何保证数据一致?
  • Redis 集群如何规划?你们公司的生产环境上如何部署 Redis 集群?

【解答】

Redis 集群

详情可以参考:Redis 集群

1单线程

Redis 为单进程单线程模式采用队列模式将并发访问变为串行访问。Redis 单机吞吐量也很高,能达到几万 QPS。

Redis 单线程模型,依然有很高的并发吞吐,原因在于:

  • Redis 读写都是内存操作。
  • Redis 基于非阻塞的 IO 多路复用机制,同时监听多个 socket将产生事件的 socket 压入内存队列中,事件分派器根据 socket 上的事件类型来选择对应的事件处理器进行处理。
  • 单线程,避免了线程创建、销毁、上下文切换的开销,并且避免了资源竞争。

2扩展并发吞吐量、存储容量

Redis 的高性能(扩展并发吞吐量、存储容量)通过主从架构来实现。

Redis 集群采用主从模型,提供复制和故障转移功能,来保证 Redis 集群的高可用。通常情况,一主多从模式已经可以满足大部分项目的需要。根据实际的并发量,可以通过增加节点来扩展并发吞吐。

一主多从模式下,主节点负责写操作(单机几万 QPS从节点负责查询操作单机十万 QPS

进一步如果需要缓存大量数据就需要分区sharding。Redis 集群通过划分虚拟 hash 槽来分片,每个主节点负责一定范围的 hash 槽。当需要扩展集群节点时,重新分配 hash 槽即可redis-trib 会自动迁移变更 hash 槽中所属的 key。

3Redis 集群数据一致性

Redis 集群基于复制特性实现节点间的数据一致性。

Redis 复制

【问题】

  • Redis 复制的工作原理Redis 旧版复制和新版复制有何不同?
  • Redis 主从节点间如何复制数据?
  • Redis 的数据一致性是强一致性吗?

【解答】

Redis 复制

详情可以参考:Redis 复制

1旧版复制基于 SYNC 命令实现。分为同步sync和命令传播command propagate两个操作。这种方式存在缺陷不能高效处理断线重连后的复制情况。

2新版复制基于 PSYNC 命令实现。同步操作分为了两块:

  • 完整重同步full resychronization 用于初次复制;
  • 部分重同步partial resychronization 用于断线后重复制。
    • 主从服务器的复制偏移量replication offset
    • 主服务器的复制积压缓冲区replication backlog
    • 服务器的运行 ID

3Redis 集群主从节点复制的工作流程:

  • 步骤 1. 设置主从服务器
  • 步骤 2. 主从服务器建立 TCP 连接。
  • 步骤 3. 发送 PING 检查通信状态。
  • 步骤 4. 身份验证。
  • 步骤 5. 发送端口信息。
  • 步骤 6. 同步。
  • 步骤 7. 命令传播。

Redis 哨兵

【问题】

  • Redis 如何实现高可用?
  • Redis 哨兵的功能?
  • Redis 哨兵的原理?
  • Redis 哨兵如何选举 Leader
  • Redis 如何实现故障转移?

【解答】

Redis 哨兵

详情可以参考:Redis 哨兵

1Redis 的高可用是通过哨兵来实现Raft 协议的 Redis 实现。Sentinel哨兵可以监听主服务器并在主服务器进入下线状态时自动从从服务器中选举出新的主服务器。

由一个或多个 Sentinel 实例组成的 Sentinel 系统可以监视任意多个主服务器,以及这些主服务器的所有从服务器,并在被监视的主服务器进入下线状态时,自动将下线主服务器的某个从服务器升级为新的主服务器,然后由新的主服务器代替已下线的主服务器继续处理命令请求。

img

Redis vs. Memcached

【问题】

Redis 和 Memcached 有什么区别?

分布式缓存技术选型,选 Redis 还是 Memcached为什么

Redis 和 Memcached 各自的线程模型是怎样的?

为什么单线程的 Redis 性能却不输于多线程的 Memcached

【解答】

Redis 不仅仅支持简单的 k/v 类型的数据,同时还提供 listsetzsethash 等数据结构的存储。memcache 支持简单的数据类型String。

Redis 支持数据的备份,即 master-slave 模式的数据备份。

Redis 支持数据的持久化,可以将内存中的数据保持在磁盘中,重启的时候可以再次加载进行使用,而 Memecache 把数据全部存在内存之中

redis 的速度比 memcached 快很多

Memcached 是多线程,非阻塞 IO 复用的网络模型Redis 使用单线程的 IO 复用模型。

Redis与Memcached的区别与比较

如果想要更详细了解的话,可以查看慕课网上的这篇手记(非常推荐) :《脚踏两只船的困惑 - Memcached 与 Redis》www.imooc.com/article/23549

终极策略: 使用 Redis 的 String 类型做的事,都可以用 Memcached 替换,以此换取更好的性能提升; 除此以外,优先考虑 Redis

参考资料