Redis优化

本文围绕Redis数据库展开,介绍了配置文件和常用命令,如redis-cli、redis-benchmark等。阐述了多数据库操作,包括切换、移动数据和清除数据。详细分析了RDB和AOF两种持久化方式的区别、优缺点及配置。还提及了Redis性能管理,如查看内存使用、内存碎片率和回收key。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Redis配置文件

■ 配置参数(/etclredis/6379.conf)

  ● bind:监听的主机地址
  ● port:端口
  ● daemonize yes:启用守护进程
  ● pidfile:指定PID文件
  ● loglevel notice:日志级别
  ● logfile:指定日志文件

Redis 数据库常用命令

redis-cli命令行工具

Redis 软件提供了多个命令工具,当Redis安装时,所包含的软件工具会同时被安装到系统中,在系统中可以直接使用。这些命令工具的作用分别如下所示。

  ● redis-server:用于启动 Redis的工具
  ● redis-benchmark:用于检测Redis 在本机的运行效率
  ● redis-check-aof :修复AOF持久化文件
  ● redis-check-rdb:修复 RDB 持久化文件
  ● redis-cli:是Redis命令行工具,用于连接数据库
  ● redis-setinel:是哨兵模式启动的工具

redis-benchmark 测试工具

redis-benchmark 是官方自带的 Redis性能测试工具,可以有效的测试Redis 服务的性能。
基本的测试语法为:redis-benchmark [option] [option value]。
■ 常用选项:

-h:指定服务器主机名。
  ● -p:指定服务器端口。
  ● -s:指定服务器socket。
  ● -c:指定并发连接数。
  ● -n:指定请求数。
  ● -d:以字节的形式指定SET/GET值的数据大小。
  ● -k:1=keep alive 0=reconnect 。保持时间
  ● -r:SET/GET/INCR 使用随机key,SADD使用随机值。
  ● -P:通过管道传输<numreq>请求。
  ● -q:强制退出redis。仅显示query /sec值。
  ● --csv:以CSV格式输出。
  ● -l:生成循环,永久执行测试。
  ● -t:仅运行以逗号分隔的测试命令列表。
  ● -I:Idle模式(空闲模式)。仅打开N个idle连接并等待。

压力测试

● 格式:

[root@localhost ^]# redis-benchmark -h IP地址 -p 端口号 -c 连接数量 -n 请求数

● 举例:

[root@server1 ~]# netstat -anptu | grep redis   #查看服务是否启动

在这里插入图片描述

[root@server1 ~]# redis-benchmark -h 192.168.10.10 -p 6379 -c 100 -n 20000

在这里插入图片描述

测试性能

● 格式:

[root@server1 ~]# redis-benchmark -h IP地址 -p 端口号 -q -d 数据包大小

● 举例

[root@server1 ~]# redis-benchmark -h 192.168.10.10 -p 6379 -q -d 100  #测试每种数据包类型每秒钟请求量

在这里插入图片描述
● 还可以测试某些操作的性能,例如执行redis-benchmark -t set,lpush -n 100000 -q命令的作用是测试本机上 Redis服务在进行set 与 lpush操作时的性能。
举例:

[root@server1 ~]# redis-benchmark -t set,lpush -n 100000 -q

在这里插入图片描述

key相关命令

● keys:获取符合规则的键值列表
● exists:判断键值是否存在
● del:删除当前数据库的指定key
● type:获取key对应的value值类型
● rename(覆盖) / renamenx(不覆盖):对已有的key进行重命名,
rename(覆盖):无论目标key是否存在都进行重命名,且源key的值会覆盖目标key的值。
renamenx(不覆盖):使用时,如果目标key存在则不进行重命名。
● dbsize:查看当前数据库中key的数目

Redis多数据库操作

■ Redis支持多数据库,默认支持16个数据库,0-15命名
若只有一个Redis数据库时,只在本地有效,在不做群集的情况下, Redis不能和别的数据库有联动性。
■ 多数据库相互独立,互不干扰
■ 多数据库常用命令
● 多数据库间切换
● 多数据库间移动数据
● 清除数据库内数据

多数据库间切换

● Redis支持多数据库,Redis在没有任何改动的情况下默认包含16 个数据库,数据库名称是用数字0-15来依次命名的。使用Select命令可以进行Redis的多数据库之间的切换,命令格式为selectindex,其中index表示数据库的序号。而使用redis-cli 连接Redis 数据库后,默认使用的是序号为0的数据库。
● 如下所示,使用select命令切换数据库后,会在前端的提示符中显示当前所在的数据库序号如“127.0.0.1:6379[10]>”表示当前使用的是序号为10的数据库;若当前使用的数据库是序号为0的数据库,提示符中则不显示序号,如“127.0.0.1:6379>”表示当前使用的是序号为0的数据库。
举例:

127.0.0.1:6379> select 10   #切换至10号库

在这里插入图片描述
多数据库间移动数据
● Redis数据库提供了一个move的命令,可以进行多数据库的数据移动
● 命令的基本语法格式为”move key dbindex“。其中“key“表示当前数据库的目标键,“dbindex“表示目标数据库的序号。
举例:

127.0.0.1:6379> set k6 6    
OK
127.0.0.1:6379> get k6       
"6"
127.0.0.1:6379> move k6 10     #将数据库0中k6移动到数据库10中
(integer) 1
127.0.0.1:6379> select 10         #切换到数据库10
OK
127.0.0.1:6379[10]> get k6        #查看被移动数据
"6"

清除数据库内数据
■ Redis 数据库的整库数据删除主要分为两个部分:
● 清空当前数据库数据,使用 FLUSHDB命令实现;清空所有数据库的数据,
● 使用FLUSHALL命令实现。但是,数据清空操作比较危险,生产环境下一般不建议使用。
● 举例:

127.0.0.1:6379[10]> flushdb   #清除数据库10内数据
OK
127.0.0.1:6379[10]> keys *
(empty list or set)

Redis持久化

持久化概述

● Redis是运行在内存中,内存中的数据断电丢失
● 为了能够重用Redis数据,或者防止系统故障,需要将Redis中的数据写入到磁盘空间中,即持久化

持久化分类

● RDB方式:创建快照的方式获取某一时刻Redis中所有数据的副本
● AOF方式:将执行的写命令写到文件的末尾,以日志的方式来记录数据的变化

RDB、AOF区别

● RDB持久化是指在指定的时间间隔内将内存中的数据集快照写入磁盘,实际操作过程是fork一个子进程,先将数据集写入临时文件,写入成功后,再替换之前的文件,用二进制压缩存储。
● AOF持久化以日志的形式记录服务器所处理的每一个写、删除操作,查询操作不会记录,以文本的方式记录,可以打开文件看到详细的操作记录。

RDB、AOF优缺点

RDB的优势

● 一旦采用该方式,那么你的整个Redis数据库将只包含一个文件,这对于文件备份而言是非常完美的。比如,你可能打算每个小时归档一次最近24小时的数据,同时还要每天归档一次最近30天的数据。通过这样的备份策略,一旦系统出现灾难性故障,我们可以非常容易的进行恢复。
● 对于灾难恢复而言,RDB是非常不错的选择。因为我们可以非常轻松的将一个单独的文件压缩后再转移到其它存储介质上。
● 性能最大化。对于Redis的服务进程而言,在开始持久化时,它唯一需要做的只是fork出子进程,之后再由子进程完成这些持久化的工作,这样就可以极大的避免服务进程执行IO操作了。
● 相比于AOF机制,如果数据集很大,RDB的启动效率会更高。

RDB的劣势

● 如果你想保证数据的高可用性,即最大限度的避免数据丢失,那么RDB将不是一个很好的选择。因为系统一旦在定时持久化之前出现宕机现象,此前没有来得及写入磁盘的数据都将丢失。
● 由于RDB是通过fork子进程来协助完成数据持久化工作的,因此,如果当数据集较大时,可能会导致整个服务器停止服务几百毫秒,甚至是1秒钟。

AOF的优势

● 该机制可以带来更高的数据安全性,即数据持久性。Redis中提供了3中同步策略,即每秒同步、每修改同步和不同步。事实上,每秒同步也是异步完成的,其效率也是非常高的,所差的是一旦系统出现宕机现象,那么这一秒钟之内修改的数据将会丢失。而每修改同步,我们可以将其视为同步持久化,即每次发生的数据变化都会被立即记录到磁盘中。可以预见,这种方式在效率上是最低的。至于无同步,无需多言,我想大家都能正确的理解它。
● 由于该机制对日志文件的写入操作采用的是append模式,因此在写入过程中即使出现宕机现象,也不会破坏日志文件中已经存在的内容。然而如果我们本次操作只是写入了一半数据就出现了系统崩溃问题,不用担心,在Redis下一次启动之前,我们可以通过redis-check-aof工具来帮助我们解决数据一致性的问题。
● 如果日志过大,Redis可以自动启用rewrite机制。即Redis以append模式不断的将修改数据写入到老的磁盘文件中,同时Redis还会创建一个新的文件用于记录此期间有哪些修改命令被执行。因此在进行rewrite切换时可以更好的保证数据安全性。
● AOF包含一个格式清晰、易于理解的日志文件用于记录所有的修改操作。事实上,我们也可以通过该文件完成数据的重建。

AOF的劣势

● 对于相同数量的数据集而言,AOF文件通常要大于RDB文件。RDB 在恢复大数据集时的速度比 AOF的恢复速度要快。
● 根据同步策略的不同,AOF在运行效率上往往会慢于RDB。总之,每秒同步策略的效率是比较高的,同步禁用策略的效率和RDB一样高效。

RDB持久化

■ redis的默认持久化方式
■ 默认文件名dump.rdb

触发条件

  ● 在指定的时间间隔内,执行指定次数的写操作(配置文件控制)
  ● 执行save或者是bgsave(异步)命令
  ● 执行flushall命令,清空数据库所有数据
  ● 执行shutdown 命令,保证服务器正常关闭且不丢失任何数据

优缺点

  ● 适合大规模的数据恢复
  ● 如果业务对数据完整性和一致性要求不高,RDB是很好的选择
  ● 数据的完整性和一致性不高
  ● 备份时占用内存

通过RDB文件恢复数据

 ● 将dump.rdb文件拷贝到redis的安装目录的bin目录下,重启redis服务即可

配置文件选项

vim /etc/redis/6379.conf
save 900 1     #900秒之内至少一次写操作
save 300 10    #300秒之内至少10次写操作
save 60 10000     #60秒之内至少10000次写操作
#只要满足其一都会触发快照操作,注释所有的save项表示关闭RDB
dbfilename dump.rdb      #RDB文件名称
dir /var/lib/redis/6379   #RDB文件路径
rdbcompression yes   #是否进行压缩   

AOF持久化

■ Redis 默认不开启
■ 弥补RDB的不足(数据的不一致性)
■ 采用日志的形式来记录每个写操作,并追加到日志文件中末尾
■ Redis重启会根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作
■ 根据AOF文件恢复数据

● 将appendonly.aof文件拷贝到Redis的安装目录的bin目录下,重启Redis服务即可

配置文件选项

vim /etc/redis/6379.conf
appendonly yes      #开启AOF持久化
appendfilename "appendonly.aof "    #AOF文件名称
#appendfsync always      #always:同步持久化,每次发生数据变化会立刻写入磁盘
appendfsync everysec   #everysec:默认推荐,每秒异步记录一次(默认值)
#appendfsync no     #no:不同步,交给操作系统决定如何同步
aof-load-truncated yes      #忽略最后一条可能存在问题的指令

AOF的重写机制

  ● AOF的工作原理是将写操作追加到文件中,文件的冗余内容会越来越多
  ● 当AOF文件的大小超过所设定的阈值时Redis就会对AOF文件的内容压缩

AOF重写的原理

● Redis会fork出一条新进程,读取内存中的数据(并没有读取旧文件),并重新写到一个临时文件中,最后替换旧的aof文件

AOF的重写配置

vim letc/redis/6379.conf
#在日志进行BGREWRITEAOF时,如果设置为yes表示新写操作不进行同步fsync,只是暂存在缓冲区里,避免造成磁盘IO操作冲突,等重写完成后在写入。Redis中默认为no
no-appendfsync-on-rewrite no
#当前AOF文件大小是上次日志重写时AOF文件大小两倍时,发生BGREWRITEAOF操作
auto-aof-rewrite-percentage 100
#当前AOF文件执行BGREWRITEAOF命令的最小值,避免刚开始启动Reids时由于文件尺寸较小导致频繁的BGREWRITEAOF
auto-aof-rewrite-min-size 64mb

Redis性能管理

查看Ridis内存使用

[root@master1~]# /usr/local/redis/bin/redis-cli
127.0.0.1:6379> info memory
# Memory
used_memory:2650536                     # 以使用内存的大小
used_memory_human:2.53M
used_memory_rss:12120064          # 内存分配的大小
used_memory_rss_human:11.56M
used_memory_peak:2650536
used_memory_peak_human:2.53M
used_memory_peak_perc:100.00%
used_memory_overhead:2573336
used_memory_startup:1458272
used_memory_dataset:77200
used_memory_dataset_perc:6.48%
total system memory:1912078336
total_system_memory_ human:1.78G
used_memory_lua:37888
used_memory_lua_human:37.00K
maxmemory:0
maxmemory_human:0B
maxmemory_policy:noeviction
mem_fragmentation_ratio:4.57       #内存碎片率  内存总量/已用内存总量
mem_allocator:jemalloc-4.0.3
active_defrag_running:0
lazyfree_pending_objects:0

内存碎片率

  ● 操系统分配的内存值used_memory_rss除以Redis使用的内存值used_memory计算得出。
  ● 内存碎片是由操作系统低效的分配/回收物理内存导致的
     ◆ 不连续的物理内存分配
  ● 跟踪内存碎片率对理解Redis实例的资源性能是非常重要的
      ◆ 内存碎片率稍大于1是合理的,这个值表示内存碎片率比较低
      ◆ 内存碎片率超过1.5,说明Redis消耗了实际需要物理内存的150%,其中50%是内存碎片率
      ◆ 内存碎片率低于1的,说明Redis内存分配超出了物理内存(会使用swap的空间),操作系统正在进行内存交换
  ● redis实例的内存使用率超过可用最大内存,操作系统将开始进行内存与swap空间交换
  ● 避免内存交换
      ◆ 针对缓存数据大小选择
      ◆ 尽可能的使用Hash数据结构
      ◆ 设置key的过期时间

回收key

  ● 保证合理分配redis有限的内存资源
  ● 当达到设置的最大阀值时,需选择一种key的回收策略
      ◆  默认情况下回收策略是禁止删除
      ◆ redis.conf配置文件中修改  maxmemory-policy 属性值
□ volatile-lru:使用LRU算法从已设置过期时间的数据集合中淘汰数据
□ volatile-ttl:从已设置过期时间的数据集合中挑选即将过期的数据淘汰
□ volatile-random:从已设置过期时间的数据集合中随机挑选数据淘汰
□ allkeys-Iru:使用LRU算法从所有数据集合中淘汰数据
□ allkeys-random:从数据集合中任意选择数据淘汰
□ no-enviction:禁止淘汰数据
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值