- 1.Redis
- 1.1Redis缓存穿透,缓存击穿,缓存雪崩
- 1.2 Redis RDB持久化、AOF持久化(缓存满了和数据丢失等问题)
- 1.3Redis为什么是单线程、及高并发快的原因
- 1.4 Redis并发竞争key的解决方案(缓存击穿)
- 1.5 Redis缓存和MySQL数据一致性的解决方案
- 1.6 Redis哨兵、复制、集群的设计原理,以及区别
- 1. 保证redis的高可用
- 2. Redis 主从复制、哨兵和集群这三个有什么区别
https://www.processon.com/mindmap/60827d6ce401fd45d70648b3
1.1Redis缓存穿透,缓存击穿,缓存雪崩| 问题 | 解释 | 解决方法 |
|---|---|---|
| 缓存穿透 | key对应的数据在缓存和数据库不存在,黑客一直用这个信息请求,可能压垮数据源 | 1. 布隆过滤器 2.针对这个key设置值为null的数据存入缓存中 |
| 缓存击穿 | 某个key失效,此时出现大量并发请求(热点数据) | 使⽤互斥锁(mutex key) :SETNX,是「SET if Not eXists」的缩写,也就是只有不存在的时候才设置 |
| 缓存雪崩 | 大量key在某一集中时间段缓存失效或者缓存服务器重启 | 在原有的失效时间基础上增加⼀个随机值,比如1-5分钟随机(加锁排队解决分布式环境高并发问题但是用户体验很差) |
-
注:布隆过滤器(删除困难,因为有hash冲突)https://blog.csdn.net/qq_41125219/article/details/119982158
-
缓存击穿互斥锁代码
// 伪代码
public String get(key) {
String value = redis.get(key);
if (value == null) { //代表缓存值过期
//设置3min的超时,防⽌del操作失败的时候,下次缓存过期⼀直不能load db
if (redis.setnx(key_mutex, 1, 3 * 60) == 1) { //代表设置成功
value = db.get(key);
redis.set(key, value, expire_secs);
redis.del(key_mutex);
} else { //这个时候代表同时候的其他线程已经load db并回设到缓存了,这时候重试获取缓
存值即可
sleep(50);
get(key); //重试
}
} else {
return value;
}
}
1.2 Redis RDB持久化、AOF持久化(缓存满了和数据丢失等问题)
- 1.为什么要持久化(redis持久化不保证数据的完整性)
redis是内存数据,宕机后会消失,持久化的目的不是为了存储,而是为了数据快速恢复 - 2.redis持久化的两种方式
| 方式 | RDB | AOF |
|---|---|---|
| 介绍 | 在指定时间间隔对数据进行快照存储 | 记录每次对服务器写的操作,以redis协议追加每次写操作到文件末尾 |
| 不同 | 1.只记录结果 2.默认开启 3.性能高 | 1.会记录过程 2.默认不开启 3.性能低 |
| 文件格式 | dump.rdb(二进制压缩文件) | 存储的rdis命令 |
| 优点 | 1.RDB是二进制压缩文件,占用空间小,便于传输 2.主进程fork子进程,主进程阻塞,主进程fork子进程后继续工作。子进程创建RDB文件 | |
| 缺点 | 不保证数据的完整性,最后一次快照后的更改数据丢失(用AOF辅助) |
- 如果服务器开启了AOF功能,会优先使用AOF方式还原数据,只有关闭了AOF持久化功能,才会使用RDB方式还原数据
- redis是基于内存的,内存的读写速度非常快
- redis是单线程的,减少了上下文的切换 (redis 单线程指的是网络请求模块使用了一个线程,即一个线程处理所有网络请求,其他模块仍用了多个线程。)单线程下不需要考虑锁的性能消耗,缺点:无法发挥多核cpu性能,不过可以单机开多个redis实例来完善。
- redis采用IO多路复用技术,可以处理多个连接
- 数据结构,全程采用hash结构,特殊的数据结构对数据存储进行优化,采用压缩表对数据进行压缩存储,采用跳表,有序的数据结构对数据进行快速的读取
注:复用指的是多路复用一个线程。多路指的是多个网络连接。IO多路可以监听多个套接字(socket连接)
1.4 Redis并发竞争key的解决方案(缓存击穿)- 1. 分布式锁
- 基于zookeeper,redis,数据库 实现
分布式锁的特点 :- 互斥性:只有一个客户端持有锁
- 无死锁:持有锁的客户端崩溃或发生意外,其他客户端仍然可以获取锁
- 容错:大部分redis节点存活就可以获取锁和释放锁
- 基于zookeeper,redis,数据库 实现
- 2.使用队列
- 让操作命令放在队列里,串行化执行。
- 1. 采用延时双删策略
- 步骤:
1、删除缓存
2、写数据库
3、休眠500ms
4、再删除缓存 - 设置缓存超时时间
- 弊端:最差的情况下超时时间内数据不一致
- 步骤:
- 2.异步更新缓存(基于订阅binlog的同步机制)
订阅,消息队列推送----》没看懂
- 1.哨兵 :提供了监控
- 故障监控和转移。主从节点,采用Raft算法选举
- 2.复制
1.主从复制:读写分离,一个master可以有多个slave
2.哨兵:监听,自动转移,哨兵发现主服务器挂了之后会从slave种选出一个新的主服务器
3.集群: 为了解决单机redis容量有限的问题,将数据按一定规则分配给多台集群



