官方文档:https://redis.io/docs/
原理介绍可以参考我之前的文章:
主从模式特点:
工作机制:
IP | 主机名 | 角色 |
local-168-182-110 | 192.168.182.110 | master |
local-168-182-111 | 192.168.182.111 | slave1 |
local-168-182-112 | 192.168.182.112 | slave2 |
下载地址:http://download.redis.io/releases/
cd /opt/softwarewget http://download.redis.io/releases/redis-7.0.3.tar.gz# 解压tar -xf redis-7.0.3.tar.gzcd redis-7.0.3# 设置环境变量echo "export REDIS_HOME=/opt/software/redis-7.0.3">> /etc/profilesource /etc/profile
cd $REDIS_HOMEyum -y install gcc gcc++make && make install# 默认安装目录 /usr/local/bin
cat << EOF > /usr/lib/systemd/system/redis.service[Unit]Description=Redis persistent key-value databaseAfter=network.targetAfter=network-online.targetWants=network-online.target[Service]ExecStart=/usr/local/bin/redis-server /usr/local/redis/redis.conf --supervised systemdExecStop=/usr/libexec/redis-shutdownType=forkingUser=redisGroup=redisRuntimeDirectory=redisRuntimeDirectoryMode=0755LimitNOFILE=65536PrivateTmp=true[Install]WantedBy=multi-user.targetEOF
配置描述:
Description: # 描述服务 After: # 描述服务类别 [Service] # 服务运行参数的设置 Type=forking # 是后台运行的形式 ExecStart # 为服务的具体运行命令 ExecReload # 为重启命令 ExecStop # 为停止命令 LimitNOFILE=65536 # 打开文件数和进程数有限制,默认限制为1024,如果不设置,或者设置为LimitNOFILE=unlimited(不识别),则得到了1024PrivateTmp=True # 表示给服务分配独立的临时空间 #【注意】[Service]的启动、重启、停止命令全部要求使用绝对路径 [Install] #运行级别下服务安装的相关设置,可设置为多用户,即系统运行级别为3重载系统服务:systemctl daemon-reload
/usr/libexec/redis-shutdown
#!/bin/bash## Wrapper to close properly redis and sentineltest x"$REDIS_DEBUG" != x && set -xREDIS_CLI=/usr/local/bin/redis-cli# Retrieve service nameSERVICE_NAME="$1"if [ -z "$SERVICE_NAME" ]; then SERVICE_NAME=redisfi# Get the proper config file based on service nameCONFIG_FILE="/usr/local/redis/$SERVICE_NAME.conf"# Use awk to retrieve host, port from config fileHOST=`awk '/^[[:blank:]]*bind/ { print $2 }' $CONFIG_FILE | tail -n1`PORT=`awk '/^[[:blank:]]*port/ { print $2 }' $CONFIG_FILE | tail -n1`PASS=`awk '/^[[:blank:]]*requirepass/ { print $2 }' $CONFIG_FILE | tail -n1`SOCK=`awk '/^[[:blank:]]*unixsocket\s/ { print }' $CONFIG_FILE | tail -n1`# Just in case, use default host, portHOST=${HOST:-127.0.0.1}if [ "$SERVICE_NAME" = redis ]; then PORT=${PORT:-6379}else PORT=${PORT:-26739}fi# Setup additional parameters# e.g password-protected redis instances[ -z "$PASS" ] || ADDITIONAL_PARAMS="-a $PASS"# shutdown the service properlyif [ -e "$SOCK" ] ; then $REDIS_CLI -s $SOCK $ADDITIONAL_PARAMS shutdownelse $REDIS_CLI -h $HOST -p $PORT $ADDITIONAL_PARAMS shutdownfi
配置完就可以通过systemctl启停redis了
chmod +x /usr/libexec/redis-shutdownuseradd -s /sbin/nologin redismkdir /usr/local/redis ; cp $REDIS_HOME/redis.conf /usr/local/redis/ && chown -R redis:redis /usr/local/redismkdir -p /opt/software/redis-7.0.3/data && chown -R redis:redis /opt/software/redis-7.0.3/datayum install -y bash-completion && source /etc/profile # 命令补全systemctl daemon-reloadsystemctl enable redis
修改linux内核参数
# 临时生效sysctl -w vm.overcommit_memory=1# 永久生效echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf && sysctl -p### 可选值:0,1,2。# 0,:表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应用进程。# 1:表示内核允许分配所有的物理内存,而不管当前的内存状态如何。# 2: 表示内核允许分配超过所有物理内存和交换空间总和的内存。
修改配置如下:
vi /usr/local/redis/redis.conf
bind 192.168.182.110 # 监听ip,多个ip用空格分隔daemonize yes # 允许后台启动logfile "/usr/local/redis/redis.log" # 日志路径dir /opt/software/redis-7.0.3/data # 数据库备份文件存放目录masterauth 123456 # slave连接master密码,master可省略requirepass 123456 # 设置master连接密码,slave可省略appendonly yes # 在/opt/software/redis-7.0.3/data目录生成appendonly.aof文件,将每一次写操作请求都追加到appendonly.aof 文件中
修改配置如下:
vi /usr/local/redis/redis.conf
bind 192.168.182.111 # 监听ip,多个ip用空格分隔daemonize yes # 允许后台启动logfile "/usr/local/redis/redis.log" # 日志路径dir /opt/software/redis-7.0.3/data # 数据库备份文件存放目录# replicaof用于追随某个节点的redis,被追随的节点为主节点,追随的为从节点。就是设置master节点replicaof 192.168.182.110 6379masterauth 123456 # slave连接master密码,master可省略requirepass 123456 # 设置master连接密码,slave可省略appendonly yes # 在/opt/software/redis-7.0.3/data目录生成appendonly.aof文件,将每一次写操作请求都追加到appendonly.aof 文件中
修改配置如下:
vi /usr/local/redis/redis.conf
bind 192.168.182.112 # 监听ip,多个ip用空格分隔daemonize yes # 允许后台启动logfile "/usr/local/redis/redis.log" # 日志路径dir /opt/software/redis-7.0.3/data # 数据库备份文件存放目录# replicaof用于追随某个节点的redis,被追随的节点为主节点,追随的为从节点。就是设置master节点replicaof 192.168.182.110 6379masterauth 123456 # slave连接master密码,master可省略requirepass 123456 # 设置master连接密码,slave可省略appendonly yes # 在/opt/software/redis-7.0.3/data目录生成appendonly.aof文件,将每一次写操作请求都追加到appendonly.aof 文件中
systemctl start redissystemctl status redis
# 交互式redis-cli -h 192.168.182.110 -a 123456192.168.182.110:6379> info replication# 交互式redis-cli -h 192.168.182.110192.168.182.110:6379> auth 123456192.168.182.110:6379> info replication# 非交互式redis-cli -h 192.168.182.110 -a 123456 info replication
在这里Redis的主从模式就部署完了(一主两从)
【温馨提示】在slave节点上只能读,无法写入数据
主从模式的弊端就是不具备高可用性,当master挂掉以后,Redis将不能再对外提供写入操作,因此sentinel应运而生。
sentinel中文含义为哨兵,顾名思义,它的作用就是监控redis集群的运行状况,特点如下:
工作机制:
IP | 主机名 | 角色 |
local-168-182-110 | 192.168.182.110 | master,sentinel |
local-168-182-111 | 192.168.182.111 | slave1,sentinel |
local-168-182-112 | 192.168.182.112 | slave2,sentinel |
【温馨提示】 sentinel 最好跟redis部署在不同的机器上,sentinel 端口:26379
【温馨提示】前面已经安装过了redis主从模式了,因为哨兵模式是基于主从模式的,所以redis的配置这里就省略了,直接修改sentinel配置文件,配置3个哨兵,每个哨兵的配置都是一样的。
# 三个节点创建存储目录mkdir /opt/software/redis-7.0.3/sentinelmkdir /opt/software/redis-7.0.3/sentinel ; chown -R redis:redis /opt/software/redis-7.0.3/cat >/usr/local/redis/sentinel.conf<<EOFdaemonize yeslogfile "/usr/local/redis/sentinel.log"# sentinel工作目录dir "/opt/software/redis-7.0.3/sentinel"# 判断master失效至少需要2个sentinel同意,建议设置为n/2+1,n为sentinel个数# sentinel monitor <master-name> <ip> <port> <count>sentinel monitor mymaster 192.168.182.110 6379 2sentinel auth-pass mymaster 123456# 判断master主观下线时间,默认30ssentinel down-after-milliseconds mymaster 30000EOF
/usr/local/bin/redis-sentinel /usr/local/redis/sentinel.confnetstat -tnlp|grep 26379
# 停掉mastersystemctl stop redisredis-cli -h 192.168.182.111 -a 123456 info replication
发现master节点已经切换到其它节点了。再测试一下读写
[root@local-168-182-110 redis-7.0.3]# redis-cli -h 192.168.182.112 -a 123456Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.192.168.182.112:6379> set k2 v2OK
新的master节点写能力也正常,接下来就是恢复故障了。
redis-cli -h 192.168.182.112 -a 123456 info replication
发现就算原先的master节点恢复了,也不会切换到master角色,而是作为slave角色。
cluster集群特点:
三台机器,分别开启三个redis服务,也就是每个节点就是一主两从模式
IP | 主机名 | 端口 | 节点 |
local-168-182-110 | 192.168.182.110 | 7001,7002,7003 | node1 |
local-168-182-111 | 192.168.182.111 | 7001,7002,7003 | node2 |
local-168-182-112 | 192.168.182.112 | 7001,7002,7003 | node3 |
【温馨提示】这里是基于主从模式的配置修改,不是基于主从模式部署,哨兵模式是基于主从模式部署。
# 创建存储目录mkdir -p /opt/software/redis-7.0.3/cluster/redis_{7001..7003}cp /usr/local/redis/redis.conf /usr/local/redis/cluster_redis_7001.confcp /usr/local/redis/redis.conf /usr/local/redis/cluster_redis_7002.confcp /usr/local/redis/redis.conf /usr/local/redis/cluster_redis_7003.confchown -R redis:redis /usr/local/redis ;chown -R redis:redis /opt/software/redis-7.0.3/cluster
修改配置文件/usr/local/redis/cluster_redis_7001.conf
# 【注意】节点不一样,IP不一样,记得修改这个bind配置bind 192.168.182.110port 7001daemonize yespidfile "/var/run/cluster_redis_7001.pid"logfile "/usr/local/redis/cluster_redis_7001.log"dir "/opt/software/redis-7.0.3/cluster/redis_7001"#replicaof 192.168.182.110 6379masterauth "123456"requirepass "123456"appendonly yes# 开启集群模式cluster-enabled yes# 虽然此配置的名字叫"集群配置文件",但是此配置文件不能人工编辑,它是集群节点自动维护的文件,主要用于记录集群中有哪些节点、他们的状态以及一些持久化参数等,方便在重启时恢复这些状态。通常是在收到请求之后这个文件就会被更新。cluster-config-file nodes_7001.confcluster-node-timeout 15000
修改配置文件/usr/local/redis/cluster_redis_7002.conf
# 【注意】节点不一样,IP不一样,记得修改这个bind配置bind 192.168.182.110port 7002daemonize yespidfile "/var/run/cluster_redis_7002.pid"logfile "/usr/local/redis/cluster_redis_7002.log"dir "/opt/software/redis-7.0.3/cluster/redis_7002"#replicaof 192.168.182.110 6379masterauth "123456"requirepass "123456"appendonly yes# 配置yes则开启集群功能,此redis实例作为集群的一个节点,否则,它是一个普通的单一的redis实例。cluster-enabled yes# 虽然此配置的名字叫"集群配置文件",但是此配置文件不能人工编辑,它是集群节点自动维护的文件,主要用于记录集群中有哪些节点、他们的状态以及一些持久化参数等,方便在重启时恢复这些状态。通常是在收到请求之后这个文件就会被更新。cluster-config-file nodes_7002.confcluster-node-timeout 15000
修改配置文件/usr/local/redis/cluster_redis_7002.conf
# 【注意】节点不一样,IP不一样,记得修改这个bind配置bind 192.168.182.110port 7003daemonize yespidfile "/var/run/cluster_redis_7003.pid"logfile "/usr/local/redis/cluster_redis_7003.log"dir "/opt/software/redis-7.0.3/cluster/redis_7003"#replicaof 192.168.182.110 6379masterauth "123456"requirepass "123456"appendonly yes# 配置yes则开启集群功能,此redis实例作为集群的一个节点,否则,它是一个普通的单一的redis实例。cluster-enabled yes# 虽然此配置的名字叫"集群配置文件",但是此配置文件不能人工编辑,它是集群节点自动维护的文件,主要用于记录集群中有哪些节点、他们的状态以及一些持久化参数等,方便在重启时恢复这些状态。通常是在收到请求之后这个文件就会被更新。cluster-config-file nodes_7003.confcluster-node-timeout 15000
其它两台机器配置与192.168.182.110一致,只是ip不同,此处省略
# 将配置copy到另外两个节点scp -r /usr/local/redis/cluster_redis_{7001..7003}.conf local-168-182-111:/usr/local/redis/scp -r /usr/local/redis/cluster_redis_{7001..7003}.conf local-168-182-112:/usr/local/redis/# 在node2上执行sed -i 's/192.168.182.110/192.168.182.111/g' /usr/local/redis/cluster_redis_{7001..7003}.conf# 在node3上执行sed -i 's/192.168.182.110/192.168.182.112/g' /usr/local/redis/cluster_redis_{7001..7003}.conf
redis-server /usr/local/redis/cluster_redis_7001.confnetstat -tnlp|grep 7001redis-server /usr/local/redis/cluster_redis_7002.confnetstat -tnlp|grep 7002redis-server /usr/local/redis/cluster_redis_7003.confnetstat -tnlp|grep 7003tail -f /usr/local/redis/cluster_redis_7001.logtail -f /usr/local/redis/cluster_redis_7002.logtail -f /usr/local/redis/cluster_redis_7003.log
# –cluster-replicas 2 : 表示集群的一个主节点有2个从节点,就是一主两从模式redis-cli -a 123456 --cluster create 2.168.182.110:7001 192.168.182.110:7002 192.168.182.110:7003 2.168.182.111:7001 192.168.182.111:7002 192.168.182.111:7003 2.168.182.112:7001 192.168.182.112:7002 192.168.182.112:7003 \--cluster-replicas 2
会自动生成nodes.conf文件
ll /opt/software/redis-7.0.3/cluster/redis_{7001..7003}
redis-cli -c -h 192.168.182.110 -p 7001192.168.182.110:7001> auth 123456
redis-cli -c -h 192.168.182.129 -p 7001192.168.182.110:7001> auth 123456192.168.182.110:7001> CLUSTER INFO
redis-cli -c -h 192.168.182.129 -p 7001192.168.182.110:7001> auth 123456192.168.182.110:7001> CLUSTER INFO192.168.182.110:7001> CLUSTER NODES
node1上增加一节点
# copy配置cp /usr/local/redis/cluster_redis_7003.conf /usr/local/redis/cluster_redis_7004.conf# 创建存储目录mkdir /opt/software/redis-7.0.3/cluster/redis_7004# 修改配置vi /usr/local/redis/cluster_redis_7004.confbind 192.168.182.110port 7004daemonize yespidfile "/var/run/redis_7004.pid"logfile "/usr/local/redis/cluster_redis_7004.log"dir "/opt/software/redis-7.0.3/cluster/redis_7004"#replicaof 192.168.182.110 6379masterauth "123456"requirepass "123456"appendonly yescluster-enabled yescluster-config-file nodes_7004.confcluster-node-timeout 15000# 授权chown -R redis:redis /usr/local/redis && chown -R redis:redis /opt/software/redis-7.0.3/cluster/redis_7004
redis-server /usr/local/redis/cluster_redis_7004.confnetstat -tnlp|grep :7004
[root@local-168-182-110 ~]# redis-cli -c -h 192.168.182.110 -p 7001192.168.182.110:7001> auth 123456# 添加节点192.168.182.110:7001> CLUSTER MEET 192.168.182.110 7004# 查看节点信息192.168.182.110:7001> CLUSTER NODES
可以看到,新增的节点都是以master身份加入集群的
将新增的192.168.182.110:7004节点身份改为192.168.182.130:7001的slave
redis-cli -c -h 192.168.182.110 -p 7004192.168.182.110:7004> auth 123456# 改变节点类型192.168.182.110:7004> cluster replicate 0a9d68b75d529b611b4bae5753be602006fcef74192.168.182.110:7004> CLUSTER NODES
redis-cli -c -h 192.168.182.110 -p 7001192.168.182.110:7001> auth 123456# 查看节点192.168.182.110:7001> CLUSTER NODES# 删除节点192.168.182.110:7001> CLUSTER FORGET 378ef2a24fb4138496b8da85bb66143800b53686# 检查节点信息192.168.182.110:7001> CLUSTER NODES
redis-cli -c -h 192.168.182.110 -p 7001192.168.182.110:7001> auth 123456# 将节点的配置文件保存到硬盘里面192.168.182.110:7001> CLUSTER SAVECONFIG
可以看到,之前删除的节点又恢复了,这是因为对应的配置文件没有删除,执行CLUSTER SAVECONFIG恢复。
netstat -lntp |grep :7001|awk '{print $NF}'|cut -d '/' -f 1|xargs kill -9redis-cli -c -h 192.168.182.111 -p 7001 -a 123456 CLUSTER NODES
对应192.168.182.110:7001的一行可以看到,master fail,状态为disconnected;而对应192.168.182.110:7004的一行,slave已经变成master。
【故障恢复】重新启动192.168.182.110:7001节点
redis-server /usr/local/redis/cluster_redis_7001.confredis-cli -c -h 192.168.182.111 -p 7001 -a 123456 CLUSTER NODES
可以看到,192.168.182.110:7001节点启动后为slave节点,并且是192.168.182.110:7004的slave节点。即master节点如果挂掉,它的slave节点变为新master节点继续对外提供服务,而原来的master节点如果重启,则变为新master节点的slave节点。
【温馨提示】cluster不能选择db,只能默认db为0,所以select切库相当于是不能使用的。
cluster info :打印集群的信息cluster nodes :列出集群当前已知的所有节点( node),以及这些节点的相关信息。
cluster meet <ip> <port> :将 ip 和 port 所指定的节点添加到集群当中,让它成为集群的一份子。cluster forget <node_id> :从集群中移除 node_id 指定的节点。cluster replicate <node_id> :将当前节点设置为 node_id 指定的节点的从节点。cluster saveconfig :将节点的配置文件保存到硬盘里面。
cluster addslots <slot> [slot ...] :将一个或多个槽( slot)指派( assign)给当前节点。cluster delslots <slot> [slot ...] :移除一个或多个槽对当前节点的指派。cluster flushslots :移除指派给当前节点的所有槽,让当前节点变成一个没有指派任何槽的节点。cluster setslot <slot> node <node_id> :将槽 slot 指派给 node_id 指定的节点,如果槽已经指派给另一个节点,那么先让另一个节点删除该槽>,然后再进行指派。cluster setslot <slot> migrating <node_id> :将本节点的槽 slot 迁移到 node_id 指定的节点中。cluster setslot <slot> importing <node_id> :从 node_id 指定的节点中导入槽 slot 到本节点。cluster setslot <slot> stable :取消对槽 slot 的导入( import)或者迁移( migrate)。
cluster keyslot <key> :计算键 key 应该被放置在哪个槽上。cluster countkeysinslot <slot> :返回槽 slot 目前包含的键值对数量。cluster getkeysinslot <slot> <count> :返回 count 个 slot 槽中的键
# 登录master节点,slave节点是只读的redis-cli -c -h 192.168.182.112 -p 7001192.168.182.112:7001> auth 123456OK192.168.182.112:7001> set k1 v1OK192.168.182.112:7001> get k1"v1"# 获取多个值192.168.182.112:7001> mget k1 k2 k31) "v1"2) "v2"3) "v3"
Redis hash 是一个 string 类型的 field(字段) 和 value(值) 的映射表,hash 特别适合用于存储对象。
# 登录master节点,slave节点是只读的redis-cli -c -h 192.168.182.112 -p 7001192.168.182.112:7001> auth 123456# 设置192.168.182.112:7001> HSET myhash field1 "foo"(integer) 1# 获取192.168.182.112:7001> hget myhash field1"foo"
Redis列表是简单的字符串列表,按照插入顺序排序。你可以添加一个元素到列表的头部(左边)或者尾部(右边)
# 登录master节点,slave节点是只读的redis-cli -c -h 192.168.182.112 -p 7001192.168.182.112:7001> auth 123456192.168.182.112:7001> LPUSH larr v1(integer) 1192.168.182.112:7001> LPUSH larr v2(integer) 2192.168.182.112:7001> LPUSH larr v3(integer) 3# 获取0到10个元素192.168.182.112:7001> LRANGE larr 0 101) "v3"2) "v2"3) "v1"
Redis 的 Set 是 String 类型的无序集合。集合成员是唯一的,这就意味着集合中不能出现重复的数据。
# 登录master节点,slave节点是只读的redis-cli -c -h 192.168.182.112 -p 7001192.168.182.112:7001> auth 123456192.168.182.112:7001> SADD myset "hello"(integer) 1192.168.182.112:7001> SADD myset "foo"(integer) 1# 已经存在,则不能添加该元素192.168.182.112:7001> SADD myset "hello"(integer) 0# 获取192.168.182.112:7001> SMEMBERS myset1) "foo"2) "hello"192.168.182.112:6379>
Redis 有序集合和集合一样也是 string 类型元素的集合,且不允许重复的成员。不同的是每个元素都会关联一个 double 类型的分数。redis 正是通过分数来为集合中的成员进行从小到大的排序。有序集合的成员是唯一的,但分数(score)却可以重复。
# 登录master节点,slave节点是只读的redis-cli -c -h 192.168.182.112 -p 7001192.168.182.112:7001> auth 123456192.168.182.112:7001> ZADD key1 1 redis(integer) 1192.168.182.112:7001> ZADD key1 2 mongodb(integer) 1192.168.182.112:7001> ZADD key1 3 mysql(integer) 1# 已经存在,不能添加192.168.182.112:7001> ZADD key1 3 mysql(integer) 0# 已经存在,不能添加192.168.182.112:7001> ZADD key1 4 mysql(integer) 0# 获取数据192.168.182.112:7001> ZRANGE key1 0 10 WITHSCORES1) "redis"2) "1"3) "mongodb"4) "2"5) "mysql"6) "4"
主从模式、哨兵模式、集群模式的环境部署就到这里了,redis更多操作请查看官方文档,小伙伴有什么疑问欢迎给我留言哦~