linux运维21

编程语言 2022-06-12 19:57:29 阅读次数: 0

linux运维篇21

一、简述redis集群的实现原理

工作原理：虽然redis有主从结构，但是无法解决只能单机写入数据的问题，无法实现分布式数据保存。而redis集群会预先分配16384个槽位，当客户端需要写入一个key(键值对)到服务器时，会使用CRC16(key) mod 16384计算后得到值，然后根据值对应的槽位决定写入到哪个redis节点，从而实现分布式数据写入，解决单机瓶颈。

集群特点：

  1. 所有redis节点使用ping机制互联
  2. 集群中某个节点故障失联需要半数以上节点交叉确认节点状态，可用性高。
  3. 客户端可以直接连接redis服务器
  4. redis有预先分配槽位机制，实现分布式数据保存
  5. 有多少个redis节点就有10W*n个并发，并发性高

二、基于redis5的redis cluster部署

redis官网集群文档：redis集群
单个redis编译安装：redis编译安装
redis4实现集群：redis4集群

集群拓扑：
在这里插入图片描述

系统版本 centos 7.7
redis版本 redis-5.0.3
集群1 192.168.116.132:6379, 192.168.116.132:6380
集群2 192.168.116.133:6379, 192.168.116.133:6380
集群3 192.168.116.134:6379, 192.168.116.134:6380
  1. 服务器都安装阿里云yum源和关闭防火墙，关闭selinux
cd /etc/yum.repos.d/
yum install -y wget
wget http://mirrors.aliyun.com/repo/Centos-7.repo
wget http://mirrors.aliyun.com/repo/epel-7.repo
mv CentOS-Base.repo CentOS-Base.repo.bak
sed -i -e '/mirrors.cloud.aliyuncs.com/d' -e '/mirrors.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo
yum clean all
yum makecache
systemctl stop firewalld
systemctl disable firewalld
sed -i 's/SELINUX=enforcing$/SELINUX=disabled/g' /etc/selinux/config
setenforce 0
yum install ntp -y                    校对时间，每台服务器时间保持一致
ntpdate time1.aliyun.com
  1. 3个节点都创建redis多实例脚本：
根据下面主备情况安装3个节点多实例
主：192.168.116.132:6379
备：192.168.116.132:6380

主：192.168.116.133:6379
备：192.168.116.133:6380

主：192.168.116.134:6379
备：192.168.116.134:6380

vi redis_duoshili.sh 

#!/bin/bash
. /etc/init.d/functions
#设置redis版本，密码，安装目录，端口号
VERSION=redis-5.0.3
PASSWORD=123456
INSTALL_DIR=/usr/local/redis
DEFAULT_PORT=6379
#如果只要安装单个redis,设置为0就行
DSL_NUM=1
#如网络质量不好可以自行去官网下载，然后删除下面#wget https://download.redis.io/releases/${VERSION}.tar.gz || { action "源码包下载失败" false;exit; }#这句话
#redis版本下载官网:https://download.redis.io/releases/?_ga=2.164994486.889360285.1614915959-1081687905.1611193410

redis_install() {
    
    
yum install -y gcc jemalloc-devel -q || {
    
     action "安装依赖失败" false;exit; }
wget https://download.redis.io/releases/${VERSION}.tar.gz || {
    
     action "源码包下载失败" false;exit; }
tar xf ${VERSION}.tar.gz
cd ${VERSION}
make PREFIX=${INSTALL_DIR}/${DEFAULT_PORT}/ install && action "redis 编译完成" || {
    
     action "redis 编译失败" false;exit; }
mkdir -p ${INSTALL_DIR}/${DEFAULT_PORT}/{
    
    etc,log,data,run}
cp redis.conf ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}.conf
cp sentinel.conf ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}-sentinel.conf
if id redis &>/dev/null;then
        action "redis 用户已经存在" false
else
        useradd -r -s /sbin/nologin redis
        action "redis 用户创建成功"
fi
cat >> /etc/sysctl.conf <<EOF
net.core.somaxconn = 1024
vm.overcommit_memory = 1
EOF
sysctl -p
echo "echo never > /sys/kernel/mm/transparent_hugepage/enabled">>/etc/rc.d/rc.local
chmod +x /etc/rc.d/rc.local
ln -s ${INSTALL_DIR}/${DEFAULT_PORT}/bin/redis-* /usr/bin/
cp src/redis-trib.rb /usr/bin/
}
dsl_install() {
    
    
sed -ri -e "/^bind 127.0.0.1/c bind 0.0.0.0"  -e "/# requirepass/a requirepass $PASSWORD"  -e "/^dir .*/c dir ${INSTALL_DIR}/${DEFAULT_PORT}/data/"  -e "/logfile .*/c logfile ${INSTALL_DIR}/${DEFAULT_PORT}/log/redis-${DEFAULT_PORT}.log" -e "/^dbfilename dump.rdb$/c dbfilename dump-${DEFAULT_PORT}.rdb" -e  "/^pidfile .*/c  pidfile ${INSTALL_DIR}/${DEFAULT_PORT}/run/redis-${DEFAULT_PORT}.pid" -e "/^appendonly no$/c appendonly yes" ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}.conf
cat > /usr/lib/systemd/system/redis${DEFAULT_PORT}.service <<EOF
[Unit]
Description=Redis persistent key-value database
After=network.target
[Service]
ExecStart=${INSTALL_DIR}/${DEFAULT_PORT}/bin/redis-server ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}.conf --supervised systemd
ExecStop=/bin/kill -s QUIT $MAINPID
Type=notify
User=redis
Group=redis
RuntimeDirectory=redis
RuntimeDirectoryMode=0755
[Install]
WantedBy=multi-user.target
EOF
if [ "$DSL_NUM" -gt 0 ];then
        for i in `seq $DSL_NUM` ;do
                let i=${DEFAULT_PORT}+i
                mkdir ${INSTALL_DIR}/${i}/{
    
    bin,etc,log,data,run} -p
                cp ${INSTALL_DIR}/${DEFAULT_PORT}/bin/* ${INSTALL_DIR}/${i}/bin/
                sed "s/${DEFAULT_PORT}/${i}/g"  ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}.conf >${INSTALL_DIR}/${i}/etc/redis-${i}.conf
                sed "s/${DEFAULT_PORT}/${i}/g" /usr/lib/systemd/system/redis${DEFAULT_PORT}.service >/usr/lib/systemd/system/redis${i}.service
                cp ${INSTALL_DIR}/${DEFAULT_PORT}/etc/redis-${DEFAULT_PORT}-sentinel.conf ${INSTALL_DIR}/${i}/etc/redis-${i}-sentinel.conf
        done
        chown redis.redis -R ${INSTALL_DIR}
        systemctl daemon-reload
        [ $? -eq 0 ] &&action "${DSL_NUM}个$VERSION创建成功,请查看$INSTALL_DIR目录" ||  {
    
     action "redis 实例创建失败" false;exit; }
elif    [ "$DSL_NUM" -eq 0 ];then
        chown redis.redis -R ${INSTALL_DIR}
        systemctl daemon-reload
        [ $? -eq 0 ] &&action "单个$VERSION创建成功,请查看$INSTALL_DIR目录" ||  {
    
     action "单个redis创建失败" false;exit; }
else
        continue;
fi
}
redis_install
dsl_install

bash redis_duoshili.sh     安装脚本
  1. 找一个节点配置集群，以192.168.116.132为例子
vi /usr/local/redis/6379/etc/redis-6379.conf  每个节点的主实例配置这些

cluster-enabled yes
cluster-config-file nodes-6379.conf
cluster-require-full-coverage no

vi /usr/local/redis/6380/etc/redis-6380.conf  每个节点的从实例配置这些
cluster-enabled yes
cluster-config-file nodes-6379.conf
cluster-require-full-coverage no
masterauth 123456

将2个复制直接复制到另外2个节点替换掉原文件
scp /usr/local/redis/6379/etc/redis-6379.conf 192.168.116.133:/usr/local/redis/6379/etc/redis-6379.conf
scp /usr/local/redis/6379/etc/redis-6379.conf 192.168.116.134:/usr/local/redis/6379/etc/redis-6379.conf
scp /usr/local/redis/6380/etc/redis-6380.conf 192.168.116.133:/usr/local/redis/6380/etc/redis-6380.conf
scp /usr/local/redis/6380/etc/redis-6380.conf 192.168.116.134:/usr/local/redis/6380/etc/redis-6380.conf

systemctl start redis6379         配置修改完成后，全部节点启动实例
systemctl start redis6380
ss -tnl                 确认端口打开，6379,6380是redis默认启动端口，16379,16380是集群需要启动的端口

在这里插入图片描述

  1. 开始创建集群
找一个节点配置集群，以192.168.116.132为例子
前面写主节点的IP和端口，后面写从节点的IP和端口
redis-cli -a 123456  --cluster create 192.168.116.132:6379   192.168.116.133:6379    192.168.116.134:6379   192.168.116.132:6380    192.168.116.133:6380  192.168.116.134:6380   --cluster-replicas 1 

--cluster-replicas 1   代表从节点有几个，这里只有1个从节点就写1就行
redis会自动分配槽位，输入yes确认就行

在这里插入图片描述

  1. 查看集群状态
redis-cli -a 123456 cluster nodes   查看集群状态
redis-cli -a 123456 info replication  查看主从状态，因为是自动分配，所以主从可能不在同一台设备，这个不影响使用

在这里插入图片描述

  1. 集群测试
redis-cli -a 123456 cluster keyslot test1      keyslot这个参数是计算值对应的槽位
redis-cli -a 123456 cluster nodes

可以看到0-5360槽都是192.168.116.132:6379这个redis节点的，弹出的提示是4768，那么这个key会保存到192.168.116.132这个节点
1218d06cfb8c08b127b86fddea6f0545fca8db47 192.168.116.132:6379@16379 myself,master - 0 1640592637000 1 connected 0-5460

在这里插入图片描述

客户端往其他节点设置值，比如192.168.116.133节点

redis-cli -a 123456 -h 192.168.116.133 -p 6379 -c set test1 test1

在这里插入图片描述

在192.168.116.133没有看到这个值，提示要去192.168.116.132查找

redis-cli -a 123456 -h 192.168.116.133 -p 6379 get test1

在这里插入图片描述

在192.168.116.132确认查看到了值，证明集群创建成功

redis-cli -a 123456 -h 192.168.116.132 -p 6379 get test1

在这里插入图片描述

猜你喜欢

转载自blog.csdn.net/DLWH_HWLD/article/details/122027722
今日推荐
开源日报 | Chrome内置Gemini的意义不在于Gemini；中国AI追随之路的五大误区；ECharts创始人“下海”养鱼；谷歌I/O开发者大会什么都有，只是没有惊喜
微软回应中国区AI团队“打包赴美”传闻
基于大语言模型的开源知识库问答系统 MaxKB GitHub Star 数量突破 5,000 个！
美国拟限制 AI 大模型出口中国和俄罗斯
苹果将与 OpenAI 达成协议，将 ChatGPT 应用于 iPhone
openKylin 社区生态委员会第六次会议圆满召开
阿里云正式发布通义千问 2.5
Python 3.13 发布首个 Beta：实验性自由线程模式和 JIT、改进交互式解释器
Stack Overflow 拿我的代码去训练 AI 大模型，还封了我的账号
Pop!_OS 的 COSMIC 桌面完成 App Store 上架工作
《2024 年一季度互联网投融资运行情况》研究报告
报告：Django 仍然是 74% 开发者的首选
周排行
返回指定时间格式
fopen函数中的mode参数
Java 单例模式探讨
Flex remoteobject工作原理探讨
寻找mplayer的便捷安装方法
30天了解30种技术系列---(26)MySQL自动化运维工具Inception
关于Jboss/Tomcat/Jetty的JNDI定义123
程序减肥，strip，eu-strip 及其符号表
AsyncTask、View.post(Runnable)、ViewTreeObserver三种方式总结frame animation自动启动
Json和Bean的互相转换
每日归档
更多
2024-05-15(24)
2024-05-14(0)
2024-05-13(18)
2024-05-12(0)
2024-05-11(38)
2024-05-10(38)
2024-05-09(35)
2024-05-08(42)
2024-05-07(14)
2024-05-06(40)

代码天地 © 2018 codetd.com

境外服务器   最新电视剧2022