- 关系数据库跟redis的区别
- redis持久化
- 哨兵
- 主从同步
- 缓存雪崩
- 穿透
- 击穿
- 完全基于内存,绝大部分就是内存操作,非常快,类似于HashMap,HashMap的优势就是查找和操作的时间复杂度都是O(1)
- 数据结构简单,对数据操作也简单
- 采用单线程,避免了不必要的上下文切换和竞争条件,也不存在多进程或者多线程导致的切换而消耗的cpu,不用考虑各种锁的问题
上下文切换:
通俗的讲就好比你看了一本书,看到第十页,你加上书签不看了,后来又开始从书签那里读。这里没问题,但是,别的小伙伴好奇你看的什么,就翻看了一下,书签位置被改变。一个人怎么看都没事,但是人多就换来换去的操作一本书,数据就会乱。
- 使用多路i/o复用模型,非阻塞io
- Redis直接自己构建了VM 机制 ,因为一般的系统调用系统函数的话,会浪费一定的时间去移动和请求;
持久化是redis高可用中比较重要的一个环节,因为redis数据在内存这一特性,持久化就必须有,不然一断电或者电脑关机就会丢失数据。
- RDB:RDB持久化就是对数据进行周期性持久化
- AOF:AOF机制就是对写入命令作为日志,以append-only的方式写入一个日志文件中,因为这个模式就是追加的方式,所有没有任何磁盘的开销,很快,类似于,mysql中的binlog
注意两种机制全部开启的情况下,redis在重启的情况下默认使用AOF去重新构建数据。
两种机制优缺点:
RDB优点:
-
他会生成多个数据文件,每一个数据文件都代表某一时刻redis中的数据,适合做冷备,定时同步到远程服务器上,比如阿里云的服务器,一旦线上挂了,就去远端拷贝一份之前的数据就好了。
-
RDB对redis的性能影响非常小,在数据恢复的时候速度比AOF快
RDB缺点:
- RDB都是快照文件,默认是五分钟甚至更久才会生成一次,这意味着这次同步到下次同步的这段时间数据可能丢失,AOF最多丢一秒数据。
- 如果生成快照的时候,文件特别大,就会使客户端卡顿几毫秒甚至几秒
AOF优点:
- 它是以追加的方式进行写数据,自然就少了很多磁盘寻址开销,写入性能惊人,文件还不容易破损
- 适合做灾难性数据误删除的紧急恢复
AOF缺点:
- 一样的数据,AOF要比RDB大
- 数据恢复没有RDB快
哨兵+主从同步不能保存数据不丢失,但是可以保证集群的高可用
哨兵组件的主要功能:
- 集群监控:负责监控Redis master 和slave进程是否正常工作
- 消息通知:如果某一个redis实例有故障,那么哨兵负责发送消息作为报警通知管理员
- 故障转移:如果master node挂掉了,会自动转移到slave node上
- 配置中心:如果故障发生了,通知client客户端新的master地址
你启动一台slave 的时候,他会发送一个psync命令给master ,如果是这个slave第一次连接到master,他会触发一个全量复制。master就会启动一个线程,生成RDB快照,还会把新的写请求都缓存在内存中,RDB文件生成后,master会将这个RDB发送给slave的,slave拿到之后做的第一件事情就是写进本地的磁盘,然后加载进内存,然后master会把内存里面缓存的那些新命名都发给slave。
缓存雪崩举个例子:假如首页的key都是12小时后过期,中午12点刷新的,我零点有一个秒杀活动,假设每秒有6000个请求,本来缓存可以扛住每秒5000个请求的但是缓存中的所有key都失效了,这个时候1秒6000个请求就全部落入数据库,数据库扛不住的,如果没有什么特别好的方案来处理这个故障,就算重启数据库,数据库也会被新的流量给打死。
如何处理雪崩:
- 在批量往redis存数据的时候,把每一个key的失效时间都加个随机值,这样可以保证数据不会在同一时间大面积失效,我相信,失效一部分,redis还是能扛住这点流量的。
- 如果Redis是集群部署,将热点数据均匀分布在不同的Redis库中也能避免全部失效的问题
- 设置热点数据永远不过期,有更新操作就更新缓存就好了(保险)
缓存穿透是指缓存和数据库中都没有的数据,而用户不断发起请求,我们的数据库的id都是1开始自增上去的,如发起者id值为-1的数据,这时的用户可能就是攻击者,会导致数据库压力过大,严重会击垮数据库。
解决办法:
- 在接口层增加校验,比如用户鉴权校验,参数校验,不合法的参数直接拦截
- 在网关层有配置项,讲每秒访问量超过阈值的进行拉黑
- 布隆过滤器,他的原理也很简单就是利用高效的数据结构和算法快速判断出你这个Key是否在数据库中存在,不存在你return就好了,存在你就去查了DB刷新KV再return。
至于缓存击穿,和缓存雪崩有点像,缓存雪崩是因为大面积的缓存失效,打崩了DB,而缓存击穿不同的是缓存击穿是指一个Key非常热点,在不停的扛着大并发,大并发集中对这一个点进行访问,当这个Key在失效的瞬间,持续的大并发就穿破缓存,直接请求数据库,就像在一个完好无损的桶上凿开了一个洞。
解决办法:
- 缓存击穿的话,设置热点数据永远不过期。或者加上互斥锁就能搞定了



