Autor: Independencia Pen Widow @TaoCloud
DRBD (Distributed Replicated Block Device) es una solución de replicación y almacenamiento libre compartida implementada por software que refleja el contenido de los dispositivos de bloque entre servidores. Puede entenderse simplemente como RAID de red.
La función principal de DRBD la realiza el kernel de Linux, que está más cerca de la pila IO del sistema. La ubicación de DRBD está debajo del sistema de archivos y más cerca del kernel del sistema operativo y la pila IO que el sistema de archivos.
1. Prepare el medio ambiente
| nodo | Nombre de la CPU | dirección IP | Disco | sistema operativo |
|---|---|---|---|---|
| Nodo 1 | nodo1 | 172.16.201.53 | sda, sdb | centos7.6 |
| Nodo 2 | nodo2 | 172.16.201.54 | sda, sdb | centos7.6 |
Apague el firewall y selinux
#2节点都需要配置
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
sed -i "s/SELINUX=enforcing/SELINUX=disabled/g" /etc/selinux/configConfigurar la fuente epel
#2节点都需要配置
yum install epel-releaseDos, instale drbd
Si hay un software drbd completo en la fuente de yum, puede instalarlo directamente a través de yum. Si yum no puede encontrar algunos paquetes de software, puede instalarlo a través de la compilación. Elija uno de los 2 métodos siguientes.
1.yum instalar drbd
yum install drbd drbd-bash-completion drbd-udev drbd-utils kmod-drbdEs posible que no pueda encontrar el paquete kmod-drbd cuando lo instale en modo yum, por lo que debe compilarlo e instalarlo.
2. Compile e instale drbd
2.1 Preparar el entorno de compilación
yum update
yum -y install gcc gcc-c++ make automake autoconf help2man libxslt libxslt-devel flex rpm-build kernel-devel pygobject2 pygobject2-devel
reboot2.2 Descargue el paquete de código fuente en el sitio web oficial,
Obtenga la dirección de descarga del paquete de código fuente en el sitio web oficial https://www.linbit.com/en/drbd-community/drbd-download/ y descárguelo .
wget https://www.linbit.com/downloads/drbd/9.0/drbd-9.0.21-1.tar.gz
wget https://www.linbit.com/downloads/drbd/utils/drbd-utils-9.13.0.tar.gz
wget https://www.linbit.com/downloads/drbdmanage/drbdmanage-0.99.18.tar.gz
mkdir -p rpmbuild/{BUILD,BUILDROOT,RPMS,SOURCES,SPECS,SRPMS}
mkdir DRBD92.3. Compilar y generar un paquete rpm
tar xvf drbd-9.0.21-1.tar.gz
cd drbd-9.0.21-1
make kmp-rpm
cp /root/rpmbuild/RPMS/x86_64/*.rpm /root/DRBD9/tar xvf drbdmanage-0.99.18.tar.gz
cd drbdmanage-0.99.18
make rpm
cp dist/drbdmanage-0.99.18*.rpm /root/DRBD9/2.4. Empiece a instalar drbd
#2节点都需要安装
cd /root/DRBD9
yum install drbd-kernel-debuginfo-9.0.21-1.x86_64.rpm drbdmanage-0.99.18-1.noarch.rpm drbdmanage-0.99.18-1.src.rpm kmod-drbd-9.0.21_3.10.0_1160.6.1-1.x86_64.rpmTres, configure DRBD
1. El nodo principal divide vg
#节点1操作
pvcreate /dev/sdb1
vgcreate drbdpool /dev/sdb1 2. Inicialice el clúster DRBD y agregue nodos
#节点1操作
[root@node1 ~]# drbdmanage init 172.16.201.53
You are going to initialize a new drbdmanage cluster.
CAUTION! Note that:
* Any previous drbdmanage cluster information may be removed
* Any remaining resources managed by a previous drbdmanage installation
that still exist on this system will no longer be managed by drbdmanage
Confirm:
yes/no: yes
Empty drbdmanage control volume initialized on '/dev/drbd0'.
Empty drbdmanage control volume initialized on '/dev/drbd1'.
Waiting for server: .
Operation completed successfully
#添加节点2
[root@node1 ~]# drbdmanage add-node node2 172.16.201.54
Operation completed successfully
Operation completed successfully
Host key verification failed.
Give leader time to contact the new node
Operation completed successfully
Operation completed successfully
Join command for node node2:
drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h/pAcGwV1LnlxhFERegistre la última línea en el resultado devuelto: "drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h / pAcGwV1LnlxhFE" y ejecútelo en el nodo 2 para unirse al clúster.
3. Divida vg del nodo
#节点2操作
pvcreate /dev/sdb
vgcreate drbdpool /dev/sdb 4. Únase al clúster desde el nodo
#节点2操作
[root@node2 ~]# drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h/pAcGwV1LnlxhFE
You are going to join an existing drbdmanage cluster.
CAUTION! Note that:
* Any previous drbdmanage cluster information may be removed
* Any remaining resources managed by a previous drbdmanage installation
that still exist on this system will no longer be managed by drbdmanage
Confirm:
yes/no: yes
Waiting for server to start up (can take up to 1 min)
Operation completed successfully
5. Verifique el estado del clúster
#节点1操作，以下返回结果为正常状态
[root@node1 ~]# drbdadm status
.drbdctrl role:Primary
volume:0 disk:UpToDate
volume:1 disk:UpToDate
node2 role:Secondary
volume:0 peer-disk:UpToDate
volume:1 peer-disk:UpToDate
6. Crea recursos
#节点1操作
#创建资源test01
[root@node1 ~]# drbdmanage add-resource test01
Operation completed successfully
[root@node1 ~]# drbdmanage list-resources
+----------------+
| Name | State |
|----------------|
| test01 | ok |
+----------------+7. Crear volumen
#节点1操作
#创建5GB的卷test01
[root@node1 ~]# drbdmanage add-volume test01 5GB
Operation completed successfully
[root@node1 ~]# drbdmanage list-volumes
+-----------------------------------------------------------------------------+
| Name | Vol ID | Size | Minor | | State |
|-----------------------------------------------------------------------------|
| test01 | 0 | 4.66 GiB | 100 | | ok |
+-----------------------------------------------------------------------------+
[root@node1 ~]#8. Desplegar recursos
El número "2" al final indica el número de nodos
#节点1操作
[root@node1 ~]# drbdmanage deploy-resource test01 2
Operation completed successfully
#创建完时，状态为Inconsistent，正在进行同步
[root@node1 ~]# drbdadm status
.drbdctrl role:Primary
volume:0 disk:UpToDate
volume:1 disk:UpToDate
node2 role:Secondary
volume:0 peer-disk:UpToDate
volume:1 peer-disk:UpToDate
test01 role:Secondary
disk:UpToDate
node2 role:Secondary
replication:SyncSource peer-disk:Inconsistent done:5.70
#同步完成后，状态内容如下
[root@node1 ~]# drbdadm status
.drbdctrl role:Primary
volume:0 disk:UpToDate
volume:1 disk:UpToDate
node2 role:Secondary
volume:0 peer-disk:UpToDate
volume:1 peer-disk:UpToDate
test01 role:Secondary
disk:UpToDate
node2 role:Secondary
peer-disk:UpToDate9. Después de configurar el dispositivo DRBD, cree un sistema de archivos y móntelo
#节点1操作
# [/dev/drbd***]的数字,是通过命令[drbdmanage list-volumes]获取的[Minor]值
[root@node1 ~]# mkfs.xfs /dev/drbd100
meta-data=/dev/drbd100 isize=512 agcount=4, agsize=305176 blks
= sectsz=512 attr=2, projid32bit=1
= crc=1 finobt=0, sparse=0
data = bsize=4096 blocks=1220703, imaxpct=25
= sunit=0 swidth=0 blks
naming =version 2 bsize=4096 ascii-ci=0 ftype=1
log =internal log bsize=4096 blocks=2560, version=2
= sectsz=512 sunit=0 blks, lazy-count=1
realtime =none extsz=4096 blocks=0, rtextents=0
[root@node1 ~]# mount /dev/drbd100 /mnt/
[root@node1 ~]# echo "Hello World" > /mnt/test.txt
[root@node1 ~]# ll /mnt/
total 4
-rw-r--r-- 1 root root 12 Nov 26 15:43 test.txt
[root@node1 ~]# cat /mnt/test.txt
Hello World
10. Monte el dispositivo DRBD en el nodo 2 y realice las siguientes operaciones:
#在节点1操作
#卸载/mnt目录，配置为从节点
[root@node1 ~]# umount /mnt/
[root@node1 ~]# drbdadm secondary test01
#在节点2操作
#配置为主节点
[root@node2 ~]# drbdadm primary test01
[root@node2 ~]# mount /dev/drbd100 /mnt/
[root@node2 ~]# df -hT
Filesystem Type Size Used Avail Use% Mounted on
devtmpfs devtmpfs 3.9G 0 3.9G 0% /dev
tmpfs tmpfs 3.9G 0 3.9G 0% /dev/shm
tmpfs tmpfs 3.9G 8.9M 3.9G 1% /run
tmpfs tmpfs 3.9G 0 3.9G 0% /sys/fs/cgroup
/dev/mapper/centos-root xfs 35G 1.5G 34G 5% /
/dev/sda1 xfs 1014M 190M 825M 19% /boot
tmpfs tmpfs 783M 0 783M 0% /run/user/0
/dev/drbd100 xfs 4.7G 33M 4.7G 1% /mnt
[root@node2 ~]# ls -l /mnt/
total 4
-rw-r--r-- 1 root root 12 Nov 26 15:43 test.txt
[root@node2 ~]# cat /mnt/test.txt
Hello World
Preste atención a la cuenta pública de WeChat "Combate en la nube", reciba más preguntas