Redis总结笔记 

应用场景

  1. 缓存——热数据
  2. 计算器
  3. 队列
  4. 位操作
  5. 分布式锁与单线程机制
  6. 最新列表
  7. 排行榜
 

Maxmemory-policy算法

  1. volatile-lru:使用LRU算法移除key,只对设置了过期时间的键。
  2. allkeys-lru:使用LRU算法移除key。
  3. volatile-random:在过期集合中移除随机的key,只对设置了过期的时间的键。
  4. allkeys-random:移除随机的key。
  5. volatile-ttl:移除那些TTL值最小的key,即那些最近要过期的key。
  6. noeviction:不进行移除。针对写操作,只返回错误信息。
 

RDB

介绍 

  RDB是整个内存在压缩过的Snapshot,RDB的数据结构,可以配置复合的快照触发条件。默认:   是1分钟内改了1万次,   或5分钟内改了10次,   或15分钟内该了1次。

小总结

  • RDB是一个非常紧凑的文件。
  • RDB在保存RDB文件是父进程唯一需要做的就是fork出一个紫禁城,接下来的工作全部由子进程来做,父进程不需要再做其他I/O操作,所以RDB持久化方式可以最大化Redis的性能。
  • 与AOF相比,在回复大的数据集的时候,RDB方式会更快一些。
  • 数据丢失风险大。
  • RDB需要经常fork子进程来保存数据集到硬盘上,当数据集比较大的时候,fork的进程过程是非常耗时的,可能会导致Redis在一些毫秒级不能响应客户端请求。
 

AOF

  是什么   AOF保存的是appendonly.aof文件   配置位置   AOF启动/修复/恢复   Rewrite

优势

劣势

小总结

  • AOF文件是一个只进行追加的日志文件。
  • Redis可以在AOF文件体积变得过大时,自动地在后台对AOF进行重写。
  • AOF文件有序地保存了对数据库执行的所有写入操作,这些写入操作以Redis协议的格式保存,因此AOF文件的内容非常容易被人读懂,对文件进行分析也很轻松。
  • 对于相同的数据集来说,AOF文件的体积通常要大于RDB文件的体积。
  • 根据所使用的fsync策略,AOF的速度可能会慢于RDB。
 

持久化总结

  • RDB持久化方式能够在指定的时间间隔能对你的数据进行快照存储。
  • AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候回重新执行这些命令来恢复原始的数据,AOF命令以redis协议追加保存每次写的操作到文件末尾。
  • Redis还能对AOF文件进行后台重写,使得AOF文件的体积不至于过大。
  • 只做缓存:如果你只希望你的数据在服务器运行的时候存在,你也可以不使用任何持久化方式。
  • 同时开启两种持久化方式。
    • RDB的数据不实时,同时使用两者时服务器重启也只会找AOF文件。那要不要只使用AOF呢?
    • 作者建议不要,因为RDB更适合用于备份数据库(AOF在不断变化不好备份)。
    • 快速重启,而且不会有AOF可能潜在的BUG,留着作为一个万一的手段。
  • 性能建议。
    • 因为RDB文件只用做后备用途,建议只在Slave上持久化RDB文件,而且只要15分钟备份一次就够了,只保留save 900 1这条规则。
    • 如果Enable AOF,好处是在最恶劣情况下也智慧丢失不超过两秒的数据,启动脚本比较简单只load自己的AOF文件就可以了。代价以是带来了持续的I/O,二是AOF rewrite的最后将rewrite过程中产生的新数据写到新文件造成的阻塞几乎是不可避免的。只要硬盘许可,应该尽量减少AOF rewrite的频率,AOF重写的基础大小默认值64M大小了,可以设到5G以上,默认超过原大小的100%大小时重写可以改到适当的数值。
    • 如果不Enable AOF,仅靠Master-Slave Replication实现高可用也可以,能省掉一大笔I/O也减少了rewrite时带来的系统波动,代价是如果Master/Slave同时挂掉,会丢失十几分钟的数据,启动脚本也要比较买两个Master/Slave中的RDB文件,载入较新的那个,新浪微博就选用了这种架构。
 

事务

小结

  • Watch指令类似乐观锁,事务提交时,如果key的值已被别的客户端改变,比如某个list已被别的客户端push/pop过了,整个事务队列不会被执行。
  • 通过Watch命令在事务执行之前监听了多个keys,倘若在Watch之后有任何key的值发生了变化,Exec命令执行的事务都会被放弃,同时Nullmulti-bulk应答以通知调用者事务执行失败。
单独的隔离操作:事务中的所有命令都会序列化、按顺序地执行。事务在执行过程中,不会被其他客户端发送来的命令请求所打断。 没有隔离级别的概念:队列中的命令没有提交之前都不会实际的被执行,因为事务提交前任何指令都不会被实际执行,也不会存在“事务内的查询要看到事务里的更新,在事务外查询不能看到”这个让人万分头疼的问题。 不保证原子性:Redis同一个事务如果有一条命令执行失败,其后的命令仍然会被执行,没有回滚。  

主从复制

配置从(库)不配主(库)

从库配置:slaveof主库IP主库端口

  • 每次与master断开之后,都需要重新连接,除非你配置进redis.conf文件。
  • Info Replication。

修改配置文件细节操作

  • 拷贝多个redis.conf文件。
  • 开启daemonize yes。
  • Pid文件名字。
  • 指定端口。
  • Log文件名字。
  • Dump.rdb名字。

常用三招

  1. 一主二仆
  • Init。
  • 一个Master两个Slave。
  • 日志查看。
  • 主从问题演示。
    • 能干嘛。
    • 怎么玩。
    • 复制原理。
      • Slave启动成功连接到Master后会发送一个sync命令。
      • Master连接命令启动后台的存盘进程,同时收集所有接受到的用于修改数据命令,在后台进程执行完毕之后,master将传送整个数据到slave,以完成一次完全同步。
      • 全量复制:而Slave服务在接收到数据库文件数据后,将其存盘并加载到内存中。
      • 增量复制:Master继续将新的所有收集到的修改命令一次传给slave,完成同步,但是只要重新连接master,一次完全同步(全量复制)将被自动执行。
    • 哨兵模式。
      • 是什么。
      • 怎么玩。
        • 自定义/myredis目录下新建sentinel.conf文件,名字绝对不能错。
        • 配置哨兵,填写内容
          • sentinel monitor被监控的数据库名字(自己起名字)如:127.0.0.1 6379 1。
          • 上面最后的一个数字1,表示主机挂掉后slave投票看让谁接替为主机,得票数多称为主机。
        • 启动哨兵。
          • Redis-sentinel /myredis/sentinel.conf。
          • 上述目录依照各自的实际情况配置,可能目录不同。
        • 正常主从演示。
        • 原有的master挂了。
        • 投票新选。
        • 重新主从继续开工,Info Replication查查看。
        • 问题:如果之前的master重新回来,会不会master冲突?
      • 一组sentinel能同时监控多个master。
 Redis总结笔记 随笔  
    • 复制缺点。
      • 由于所有的写操作都是先在Master上操作,然后同步更新到Slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题变得更加严重。
  1. 薪火相传
  2. 反客为主
  • SlaveOf no one。使当前数据库停止与其他数据库同步,转为主数据库。
   

需了解的问题:

  1. RDB成功恢复,RDB可以搞定备份为什么会有OAF。新技术的出现一定要弥补老技术的不足同不同意,新技术一定会借鉴老技术,是老技术的子类,一般子类要比父类强大?
  2. 如果一个系统里面同时存在RDB和AOF是冲突还是协作?
  3. 为什么AOF会在RDB之后产生?
  4. AOF有什么优缺点?
 

一主二从典型问题

  1. 主机写入k1,从机写入k1,会报错,从机只能读。
  2. 主机宕机,从机不会上位争master,从机原地待命,如果主机重新恢复,主机写入,从机依然能获取到数据。
  3. 从机宕机了,主机能够写入,从机重启后需重新连接主机才能获取到主机数据,或者写入配置中。
  4. 从机备份时,是把主机的数据全部重新同步一遍。
 

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。