Redis-02部署和运维

安装&配置

• 启动: /opt/apps/redis/bin/redis-server /opt/conf/redis/${port}.conf
• conf文件: http://yijiebuyi.com/blog/bc2b3d3e010bf87ba55267f95ab3aa71.html

命令行

• 连接本地: redis-cli -p 6379
• 连接远程: redis-cli -h host -p port -a pwd

以下参考: http://redisdoc.com/index.html

sys/info类命令

• SELECT: 选择数据库, 比如SELECT 0选择0号数据库(默认的)
• INFO : 返回信息, @ref: http://redisdoc.com/server/info.html
• MONITOR : 可以看到实时的查询信息(查询来源IP.), 注意这个命令对性能有影响
• DBSIZE : 返回当前库Key的数量
• FLUSHDB/FLUSHALL: 清空当前库, 清空整个Redis的数据
• CLIENT LIST : 获取连接到服务器的客户端连接列表
• CLIENTKILL [ip:port] [ID client-id] : 关闭客户端连接
• CONFIG GET * 获取所有参数
• CONFIG SET 参数 值
• BGSAVE: 异步持久化, 不要用SAVE!

key类命令

• TYPE key 返回 key 所储存的值的类型。
• DEL key [key ...]: 删除给定的一个或多个 key 。时间复杂度：O(N)， N 为被删除的 key 的数量
• EXISTS key: 检查给定 key 是否存在
• RANDOMKEY: 从当前数据库中随机返回(不删除)一个 key 。
• KEYS pattern: 查找所有符合给定模式 pattern 的 key（慎用！） 。时间复杂度： O(N)， N 为数据库中 key 的数量。
  • KEYS * 匹配数据库中所有 key 。
  • KEYS h?llo 匹配 hello ， hallo 和 hxllo 等。
• SCAN 0 增量迭代式获取，返回的游标被用作下一次SCAN X，每次执行都只会返回少量元素， 所以可以用于生产环境
• SORT key DESC: 返回键值从大到小排序的结果。
• EXPIRE key seconds: 为给定 key 设置生存时间，当 key 过期时(生存时间为 0 )，它会被自动删除。
  • 生存时间可以通过使用 DEL 命令来删除整个 key 来移除，或者被 SET 和 GETSET 命令覆写(overwrite)
  • 对一个 key 执行 INCR 命令，对一个列表进行 LPUSH 命令，或者对一个哈希表执行 HSET 命令，这类操作都不会修改 key 本身的生存时间。
• TTL key : 以秒为单位，返回给定 key 的剩余生存时间(TTL, time to live)。

慢查询

• SLOWLOG GET 1000: 获取1000条慢查询
• SLOWLOG RESET 可以清空 slow log
• CONFIG GET slowlog-log-slower-than 获取慢查询设置, 单位是微秒, 默认10,000(10毫秒), 超过10毫秒需关注
• CONFIG SET slowlog-log-slower-than 10000

性能测试

• redis 性能测试的基本命令如下：redis-benchmark [option] [option value]
• 以下实例同时执行 10000 个请求来检测性能：redis-benchmark -n 10000 -q
  • -c: 指定并发连接数
  • -n: 指定请求数
  • -d: 以字节的形式指定 SET/GET 值的数据大小

持久化

Redis 分别提供了 RDB 和 AOF 两种持久化模式

• RDB: http://redisbook.readthedocs.io/en/latest/internal/rdb.html

  • 在不同的时间点，将redis存储的数据生成快照并存储到磁盘等介质上；
  • 对于RDB方式，redis会单独创建（fork）一个子进程来进行持久化，而主进程是不会进行任何IO操作，保证性能
  • 在默认情况下， Redis 将数据库快照保存在名字为 dump.rdb 的二进制文件中。你可以对 Redis 进行设置， 让它在“ N 秒内数据集至少有 M 个改动”这一条件被满足时， 自动保存一次数据集。你也可以通过调用 SAVE 或者 BGSAVE ， 手动让 Redis 进行数据集保存操作。

• AOF: https://redisbook.readthedocs.io/en/latest/internal/aof.html

  • Append Only File，即只允许追加不允许改写的文件
  • AOF 持久化记录服务器执行的所有写操作命令，并在服务器启动时，通过重新执行这些命令来还原数据集。
  • AOF 的默认策略为每秒钟 fsync 一次，在这种配置下，Redis 仍然可以保持良好的性能，并且就算发生故障停机，也最多只会丢失一秒钟的数据
  • Redis 可以在 AOF 文件体积变得过大时，自动地在后台对 AOF 进行重写： 重写后的新 AOF 文件包含了恢复当前数据集所需的最小命令集合。 整个重写操作是绝对安全的，因为 Redis 在创建新 AOF 文件的过程中，会继续将命令追加到现有的 AOF 文件里面，即使重写过程中发生停机，现有的 AOF 文件也不会丢失。 而一旦新 AOF 文件创建完毕，Redis 就会从旧 AOF 文件切换到新 AOF 文件，并开始对新 AOF 文件进行追加操作。

• RDB-AOF混合持久化: Redis 4.0 新功能简介：RDB-AOF 混合持久化 — blog.huangz.me

INFO返回信息

• server 部分记录了 Redis 服务器的信息，它包含以下域：

* redis_version : Redis 服务器版本
* redis_git_sha1 : Git SHA1
* redis_git_dirty : Git dirty flag
* os : Redis 服务器的宿主操作系统
* arch_bits : 架构（32 或 64 位）
* multiplexing_api : Redis 所使用的事件处理机制
* gcc_version : 编译 Redis 时所使用的 GCC 版本
* process_id : 服务器进程的 PID
* run_id : Redis 服务器的随机标识符（用于 Sentinel 和集群）
* tcp_port : TCP/IP 监听端口
* uptime_in_seconds : 自 Redis 服务器启动以来，经过的秒数
* uptime_in_days : 自 Redis 服务器启动以来，经过的天数
* lru_clock : 以分钟为单位进行自增的时钟，用于 LRU 管理

• clients 部分记录了已连接客户端的信息，它包含以下域：

* connected_clients : 已连接客户端的数量（不包括通过从属服务器连接的客户端）
* client_longest_output_list : 当前连接的客户端当中，最长的输出列表
* client_longest_input_buf : 当前连接的客户端当中，最大输入缓存
* blocked_clients : 正在等待阻塞命令（BLPOP、BRPOP、BRPOPLPUSH）的客户端的数量

• memory 部分记录了服务器的内存信息，它包含以下域：

* used_memory : 由 Redis 分配器分配的内存总量，以字节（byte）为单位
* used_memory_human : 以人类可读的格式返回 Redis 分配的内存总量
* used_memory_rss : 从操作系统的角度，返回 Redis 已分配的内存总量（俗称常驻集大小）。这个值和 top 、 ps 等命令的输出一致。
* used_memory_peak : Redis 的内存消耗峰值（以字节为单位）
* used_memory_peak_human : 以人类可读的格式返回 Redis 的内存消耗峰值
* used_memory_lua : Lua 引擎所使用的内存大小（以字节为单位）
* mem_fragmentation_ratio : used_memory_rss 和 used_memory 之间的比率
* mem_allocator : 在编译时指定的， Redis 所使用的内存分配器。可以是 libc 、 jemalloc 或者 tcmalloc 。

在理想情况下， used_memory_rss 的值应该只比 used_memory 稍微高一点儿。
当 rss > used ，且两者的值相差较大时，表示存在（内部或外部的）内存碎片。
内存碎片的比率可以通过 mem_fragmentation_ratio 的值看出。
当 used > rss 时，表示 Redis 的部分内存被操作系统换出到交换空间了，在这种情况下，操作可能会产生明显的延迟。
Because Redis does not have control over how its allocations are mapped to memory pages, high used_memory_rss is often the result of a spike in memory usage.

当 Redis 释放内存时，分配器可能会，也可能不会，将内存返还给操作系统。
如果 Redis 释放了内存，却没有将内存返还给操作系统，那么 used_memory 的值可能和操作系统显示的 Redis 内存占用并不一致。
查看 used_memory_peak 的值可以验证这种情况是否发生。

• persistence 部分记录了跟 RDB 持久化和 AOF 持久化有关的信息，它包含以下域：

* loading : 一个标志值，记录了服务器是否正在载入持久化文件。
* rdb_changes_since_last_save : 距离最近一次成功创建持久化文件之后，经过了多少秒。
* rdb_bgsave_in_progress : 一个标志值，记录了服务器是否正在创建 RDB 文件。
* rdb_last_save_time : 最近一次成功创建 RDB 文件的 UNIX 时间戳。
* rdb_last_bgsave_status : 一个标志值，记录了最近一次创建 RDB 文件的结果是成功还是失败。
* rdb_last_bgsave_time_sec : 记录了最近一次创建 RDB 文件耗费的秒数。
* rdb_current_bgsave_time_sec : 如果服务器正在创建 RDB 文件，那么这个域记录的就是当前的创建操作已经耗费的秒数。
* aof_enabled : 一个标志值，记录了 AOF 是否处于打开状态。
* aof_rewrite_in_progress : 一个标志值，记录了服务器是否正在创建 AOF 文件。
* aof_rewrite_scheduled : 一个标志值，记录了在 RDB 文件创建完毕之后，是否需要执行预约的 AOF 重写操作。
* aof_last_rewrite_time_sec : 最近一次创建 AOF 文件耗费的时长。
* aof_current_rewrite_time_sec : 如果服务器正在创建 AOF 文件，那么这个域记录的就是当前的创建操作已经耗费的秒数。
* aof_last_bgrewrite_status : 一个标志值，记录了最近一次创建 AOF 文件的结果是成功还是失败。

• 如果 AOF 持久化功能处于开启状态，那么这个部分还会加上以下域：

  * aof_current_size : AOF 文件目前的大小。
  * aof_base_size : 服务器启动时或者 AOF 重写最近一次执行之后，AOF 文件的大小。
  * aof_pending_rewrite : 一个标志值，记录了是否有 AOF 重写操作在等待 RDB 文件创建完毕之后执行。
  * aof_buffer_length : AOF 缓冲区的大小。
  * aof_rewrite_buffer_length : AOF 重写缓冲区的大小。
  * aof_pending_bio_fsync : 后台 I/O 队列里面，等待执行的 fsync 调用数量。
  * aof_delayed_fsync : 被延迟的 fsync 调用数量。

• stats 部分记录了一般统计信息，它包含以下域：

  * total_connections_received : 服务器已接受的连接请求数量。
  * total_commands_processed : 服务器已执行的命令数量。
  * instantaneous_ops_per_sec : 服务器每秒钟执行的命令数量。
  * rejected_connections : 因为最大客户端数量限制而被拒绝的连接请求数量。
  * expired_keys : 因为过期而被自动删除的数据库键数量。
  * evicted_keys : 因为最大内存容量限制而被驱逐（evict）的键数量。
  * keyspace_hits : 查找数据库键成功的次数。
  * keyspace_misses : 查找数据库键失败的次数。
  * pubsub_channels : 目前被订阅的频道数量。
  * pubsub_patterns : 目前被订阅的模式数量。
  * latest_fork_usec : 最近一次 fork() 操作耗费的毫秒数。

• replication : 主/从复制信息

      * role : 如果当前服务器没有在复制任何其他服务器，那么这个域的值就是 master ；否则的话，这个域的值就是 slave。注意，在创建复制链的时候，一个从服务器也可能是另一个服务器的主服务器。
  
  * 如果当前服务器是一个从服务器的话，那么这个部分还会加上以下域：
      * master_host : 主服务器的 IP 地址。
      * master_port : 主服务器的 TCP 监听端口号。
      * master_link_status : 复制连接当前的状态， up 表示连接正常， down 表示连接断开。
      * master_last_io_seconds_ago : 距离最近一次与主服务器进行通信已经过去了多少秒钟。
      * master_sync_in_progress : 一个标志值，记录了主服务器是否正在与这个从服务器进行同步。
  
  * 如果同步操作正在进行，那么这个部分还会加上以下域：
      * master_sync_left_bytes : 距离同步完成还缺少多少字节数据。
      * master_sync_last_io_seconds_ago : 距离最近一次因为 SYNC 操作而进行 I/O 已经过去了多少秒。
  
  * 如果主从服务器之间的连接处于断线状态，那么这个部分还会加上以下域：
      * master_link_down_since_seconds : 主从服务器连接断开了多少秒。

• cpu 部分记录了 CPU 的计算量统计信息，它包含以下域：

  * used_cpu_sys : Redis 服务器耗费的系统 CPU 。
  * used_cpu_user : Redis 服务器耗费的用户 CPU 。
  * used_cpu_sys_children : 后台进程耗费的系统 CPU 。
  * used_cpu_user_children : 后台进程耗费的用户 CPU 。

• commandstats 部分记录了各种不同类型的命令的执行统计信息，比如命令执行的次数、命令耗费的 CPU 时间、执行每个命令耗费的平均 CPU 时间等等。对于每种类型的命令，这个部分都会添加一行以下格式的信息：

  * cmdstat_XXX:calls=XXX,usec=XXX,usecpercall=XXX

• cluster 部分记录了和集群有关的信息，它包含以下域：

  * cluster_enabled : 一个标志值，记录集群功能是否已经开启。
  * keyspace 部分记录了数据库相关的统计信息，比如数据库的键数量、数据库已经被删除的过期键数量等。对于每个数据库，这个部分都会添加一行以下格式的信息： dbXXX:keys=XXX,expires=XXX

参考

• Redis 设计与实现
• Redis 命令参考
• Redis 源码日志