MySQL分库分表 mycat

其他 2019-04-28 17:44:44 阅读次数: 0
Top

NSD DBA2 DAY06

  1. 案例1：搭建mycat 分片服务器

1 案例1：搭建mycat 分片服务器

1.1 问题

  • 数据库主机 192.168.4.55 使用db1库存储数据
  • 数据库主机 192.168.4.56 使用db2库存储数据
  • 主机 192.168.4.54 运行mycat服务，逻辑库名称为test，连接用户名为admin，密码123456
  • 在主机 192.168.4.254 访问测试配置

1.2 方案

准备四台主机，搭建mycat分片服务器，通过某种特定条件，将存放在一个数据库(主机)中的数据，分散存放到多个数据库(主机)中，已达到分散单台设备负载的效果。其中192.168.4.56作为mycat服务器，192.168.4.54和192.168.4.55作为数据库服务器，192.168.4.254作为客户端。如图-1所示：

图-1

数据分片的拓扑如图-2所示：

图-2

1.3 步骤

实现此案例需要按照如下步骤进行。

步骤一：公共配置

1）关闭防火墙和selinux，配置yum源（系统源），这里不再操作

2）把54，55还原成独立数据库服务器，且只保留默认4个库其他都删除，停止56主机的mha管理服务，下载mycat 软件到56主机

3）在54（主机c2）和55（主机c1）上面创建db1和db2库

  1. [root@c1 ~]# mysql -u root -p123456    
  2. mysql> create database db1;        //c1上面创建db1库
  3. Query OK, 1 row affected (0.00 sec)
  5. [root@c2 ~]# mysql -u root -p123456
  6. mysql> create database db2;        //c2上面创建db2库
  7. Query OK, 1 row affected (0.00 sec)

在54上面授权一个用户

  1. mysql> grant all on *.* to admin@"%" identified by "123456";
  2. Query OK, 0 rows affected, 1 warning (0.00 sec)

在55上面授权一个用户

  1. mysql> grant all on *.* to admin@"%" identified by "123456";
  2. Query OK, 0 rows affected, 1 warning (0.00 sec)

4）修改数据库的配置文件

注意：1代表不区分表名的大小写，0为区分大小写

主机c1上面：

  1. [root@c1 ~]# vim /etc/my.cnf
  2. [mysqld]
  3. lower_case_table_names=1        //表名忽略大小写
  4. [root@c1 ~]# systemctl restart mysqld

主机c2上面：

  1. [root@c2 ~]# vim /etc/my.cnf
  2. [mysqld]
  3. lower_case_table_names=1
  4. [root@c2 ~]# systemctl restart mysqld

5）在56主机上面安装JDK

  1. [root@mycat ~]# rpm -qa | grep -i jdk        //安装自带的即可
  2. java-1.8.0-openjdk-1.8.0.131-11.b12.el7.x86_64
  3. java-1.8.0-openjdk-headless-1.8.0.131-11.b12.el7.x86_64
  4. copy-jdk-configs-2.2-3.el7.noarch
  5. [root@mycat ~]# yum -y install java-1.8.0-openjdk

6）在56主机上面安装mycat

  1. [root@mycat ~]# cd mysql/
  2. [root@mycat mysql]# tar -xf Mycat-server-1.4-beta-20150604171601-linux.tar.gz    //免安装，解压即可使用
  3. [root@mycat mysql]# mv mycat/ /usr/local/
  4. [root@mycat mysql]# ls /usr/local/mycat/
  5. bin catlet conf lib logs version.txt
  6. [root@mycat mysql]# cd /usr/local/mycat/
  7. [root@mycat mycat]# ./bin/mycat --help
  8. Usage: ./bin/mycat { console | start | stop | restart | status | dump }

7）修改配置文件

目录结构说明：

bin mycat命令，如 启动 停止 等

catlet 扩展功能

conf 配置文件

lib mycat使用的jar

log mycat启动日志和运行日志

wrapper.log mycat服务启动日志

mycat.log 记录SQL脚本执行后的报错内容

重要配置文件说明：

server.xml 设置连mycat的账号信息

schema.xml 配置mycat的真实库表

rule.xml 定义mycat分片规则

配置标签说明

<user>.. ..</user> 定义连mycat用户信息

<datanode>.. ..</datanode> 指定数据节点

<datahost>.. ..</datahost> 指定数据库地址及用户信息

查看server.xml配置文件

  1. [root@mycat mycat]# cd conf/
  2. [root@mycat conf]# vim server.xml
  3. </system>
  4. <user name="test">        //连接mycat服务时使用的用户名 test
  5. <property name="password">test</property>        
  6. //使用test用户连接mycat用户时使用的密码
  7. <property name="schemas">TESTDB</property>    
  8. //连接上mycat服务后，可以看到的库名多个时，使用逗号分隔 （是逻辑上的库名,服务器上没有这个库名，随便取，但要记住）
  9. </user>
  12. <user name="user">
  13. <property name="password">user</property>
  14. <property name="schemas">TESTDB</property>
  15. <property name="readOnly">true</property>        
  16. //定义只读权限，使用定义的user用户连接mycat服务后只有读记录的权限,不写这一行则是可读可写
  17. </user>

修改schema.xml配置文件

  1. [root@mycat conf]# vim schema.xml
  2. <table name="travelrecord" dataNode="dn1,dn2" rule="auto-sharding-long" />
  3. //travelrecord（逻辑上的，名字不能随便写，一般不动）表分片到数据节点dn1和dn2，dn1和dn2随便取的名字
  4. <table name="company" primaryKey="ID" type="global" dataNode="dn1,dn2" />
  5. <table name="hotnews" primaryKey="ID" dataNode="dn1,dn2" rule="mod-long" />
  6. <dataNode name="dn1" dataHost="c1" database="db1" />
  7. //数据节点对应的服务器 name="dn1"名称要与上面的对应 dataHost="c1"写本机主机名，database="db1"存在的数据库名,定义分片使用的库，所在的物理主机，真正存储数据的db1库在物理主机mysql55上
  8. <dataNode name="dn2" dataHost="c2" database="db2" />
  9. //定义分片使用的库，所在的物理主机，真正存储数据的db1库在物理主机mysql55上
  13. 指定c1名称主机对应的ip地址
  14. <dataHost name="c1" maxCon="1000" minCon="10" balance="0"
  15. writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
  16. <heartbeat>select user()</heartbeat>
  17. <!-- can have multi write hosts -->
  18. <writeHost host="c1" url="192.168.4.55:3306" user="admin"        
  19. password="123456">
  20. //访问数据库时，mycat服务连接数据库服务器时使用的用户名和密码
  21. <!-- can have multi read hosts -->
  23. </writeHost>
  24. </dataHost>
  27. 指定c2名称主机对应的ip地址
  28. <dataHost name="c2" maxCon="1000" minCon="10" balance="0"
  29. writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
  30. <heartbeat>select user()</heartbeat>
  31. <!-- can have multi write hosts -->
  32. <writeHost host="c2" url="192.168.4.54:3306" user="admin"        
  33. password="123456">
  34. //访问数据库时，mycat服务连接数据库服务器时使用的用户名和密码
  35. <!-- can have multi read hosts -->
  37. </writeHost>
  38. </dataHost>

8）添加PATH路径

  1. [root@mycat conf]# export PATH=/usr/local/mycat/bin:$PATH
  2. [root@mycat conf]# echo "PATH=/usr/local/mycat/bin:$PATH" >> /etc/profile
  3. [root@mycat conf]# source /etc/profile
  4. [root@mycat conf]# echo $PATH
  5. /usr/local/mycat/bin:/usr/local/mycat/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin
  6. [root@mycat conf]# which mycat
  7. /usr/local/mycat/bin/mycat

9）启动服务并查看端口

  1. [root@mycat conf]# mycat start
  2. Starting Mycat-server...
  3. [root@mycat conf]# netstat -antup | grep :8066
  4. tcp6 0 0 :::8066 :::* LISTEN 6421/java
  5. [root@mycat conf]# ps -C java
  6. PID TTY TIME CMD
  7. 6421 ? 00:00:04 java

用admin用户登录

  1. [root@client ~]# mysql -h192.168.4.54 -uadmin -p123456
  2. mysql> show processlist;
  3. +----+-------+--------------------+------+---------+------+----------+------------------+
  4. | Id | User | Host | db | Command | Time | State | Info |
  5. +----+-------+--------------------+------+---------+------+----------+------------------+
  6. | 3 | admin | 192.168.4.56:34580 | db2 | Sleep | 80 | | NULL |
  7. | 4 | admin | 192.168.4.56:34570 | db2 | Sleep | 100 | | NULL |
  8. | 5 | admin | 192.168.4.56:34572 | db2 | Sleep | 40 | | NULL |
  9. | 6 | admin | 192.168.4.56:34562 | db2 | Sleep | 30 | | NULL |
  10. | 7 | admin | 192.168.4.56:34564 | db2 | Sleep | 90 | | NULL |
  11. | 8 | admin | 192.168.4.56:34566 | db2 | Sleep | 60 | | NULL |
  12. | 9 | admin | 192.168.4.56:34574 | db2 | Sleep | 70 | | NULL |
  13. | 10 | admin | 192.168.4.56:34576 | db2 | Sleep | 10 | | NULL |
  14. | 11 | admin | 192.168.4.56:34578 | db2 | Sleep | 20 | | NULL |
  15. | 12 | admin | 192.168.4.56:34568 | db2 | Sleep | 50 | | NULL |
  16. | 14 | admin | 192.168.4.51:58354 | NULL | Query | 0 | starting | show processlist |
  17. +----+-------+--------------------+------+---------+------+----------+------------------+
  18. 11 rows in set (0.00 sec)
  22. [root@client ~]# mysql -h192.168.4.55 -uadmin -p123456
  23. mysql> show processlist;
  24. +----+-------+--------------------+------+---------+------+----------+------------------+
  25. | Id | User | Host | db | Command | Time | State | Info |
  26. +----+-------+--------------------+------+---------+------+----------+------------------+
  27. | 3 | root | localhost | NULL | Sleep | 2352 | | NULL |
  28. | 4 | admin | 192.168.4.56:45148 | db1 | Sleep | 2 | | NULL |
  29. | 5 | admin | 192.168.4.56:45150 | db1 | Sleep | 62 | | NULL |
  30. | 6 | admin | 192.168.4.56:45160 | db1 | Sleep | 12 | | NULL |
  31. | 7 | admin | 192.168.4.56:45162 | db1 | Sleep | 92 | | NULL |
  32. | 8 | admin | 192.168.4.56:45152 | db1 | Sleep | 32 | | NULL |
  33. | 9 | admin | 192.168.4.56:45154 | db1 | Sleep | 42 | | NULL |
  34. | 10 | admin | 192.168.4.56:45156 | db1 | Sleep | 22 | | NULL |
  35. | 11 | admin | 192.168.4.56:45158 | db1 | Sleep | 82 | | NULL |
  36. | 12 | admin | 192.168.4.56:45164 | db1 | Sleep | 52 | | NULL |
  37. | 13 | admin | 192.168.4.56:45166 | db1 | Sleep | 72 | | NULL |
  38. | 14 | admin | 192.168.4.51:32796 | NULL | Query | 0 | starting | show processlist |
  39. +----+-------+--------------------+------+---------+------+----------+------------------+
  40. 12 rows in set (0.00 sec)
  42. [root@mycat conf]# ls /usr/local/mycat/logs/
  43. mycat.log mycat.pid wrapper.log        //wrapper.log为错误日志
  44. [root@mycat conf]# ldconfig -v        //更新加载的模块

10）客户端访问

命令： mysql -hmycat主机的IP -P端口号 -u用户 -p密码

  1. [root@clent ~]# mysql -h192.168.4.56 -P8066 -utest -ptest
  2. mysql> show databases;
  3. +----------+
  4. | DATABASE |
  5. +----------+
  6. | TESTDB |
  7. +----------+
  8. 1 row in set (0.00 sec)
  10. mysql> USE TESTDB;
  11. Reading table information for completion of table and column names
  12. You can turn off this feature to get a quicker startup with -A
  14. Database changed
  15. mysql>
  16. mysql> show tables;
  17. +------------------+
  18. | Tables in TESTDB |
  19. +------------------+
  20. | company |
  21. | customer |
  22. | customer_addr |
  23. | employee |
  24. | goods |
  25. | hotnews |
  26. | orders |
  27. | order_items |
  28. | travelrecord |
  29. +------------------+
  30. 9 rows in set (0.00 sec)

11）客户端测试：

  1. mysql> create table employee(id int not null primary key,name varchar(100),sharding_id int not null);
  2. Query OK, 0 rows affected (0.10 sec)
  4. mysql> insert into employee(id,name,sharding_id) values(1,"bob",10000);
  5. Query OK, 1 row affected (0.03 sec)
  7. mysql> insert into employee(id,name,sharding_id) values(1,"lucy",10010);
  8. Query OK, 1 row affected (0.02 sec)
  10. mysql> select * from employee;
  11. +----+------+-------------+
  12. | id | name | sharding_id |
  13. +----+------+-------------+
  14. | 1 | bob | 10000 |
  15. | 1 | lucy | 10010 |
  16. +----+------+-------------+
  17. 2 rows in set (0.06 sec)

12）在c1上面查看结果

  1. mysql> show databases;
  2. +--------------------+
  3. | Database |
  4. +--------------------+
  5. | information_schema |
  6. | db1 |
  7. | mysql |
  8. | performance_schema |
  9. | sys |
  10. +--------------------+
  11. 5 rows in set (0.00 sec)
  13. mysql> use db1;
  14. Reading table information for completion of table and column names
  15. You can turn off this feature to get a quicker startup with -A
  17. Database changed
  18. mysql> show tables;
  19. +---------------+
  20. | Tables_in_db1 |
  21. +---------------+
  22. | employee |
  23. +---------------+
  24. 1 row in set (0.00 sec)
  26. mysql> select * from employee;        //查看结果
  27. +----+------+-------------+
  28. | id | name | sharding_id |
  29. +----+------+-------------+
  30. | 1 | bob | 10000 |
  31. +----+------+-------------+
  32. 1 row in set (0.00 sec)

13）在c2上面查看结果

  1. mysql> show databases;
  2. +--------------------+
  3. | Database |
  4. +--------------------+
  5. | information_schema |
  6. | db2 |
  7. | mysql |
  8. | performance_schema |
  9. | sys |
  10. +--------------------+
  11. 5 rows in set (0.00 sec)
  13. mysql> use db2;
  14. Reading table information for completion of table and column names
  15. You can turn off this feature to get a quicker startup with -A
  17. Database changed
  18. mysql> show tables;
  19. +---------------+
  20. | Tables_in_db2 |
  21. +---------------+
  22. | employee |
  23. +---------------+
  24. 1 row in set (0.00 sec)
  26. mysql> select * from employee;
  27. +----+------+-------------+
  28. | id | name | sharding_id |
  29. +----+------+-------------+
  30. | 1 | lucy | 10010 |
  31. +----+------+-------------+
  32. 1 row in set (0.00 sec)

猜你喜欢

转载自www.cnblogs.com/tiki/p/10785278.html
今日推荐
《美国对全球网络空间安全与发展的威胁和破坏》报告发布
火速冲上 GitHub 热榜 —— 开源编程语言、框架哪有这么可爱？
北京人形机器人创新中心发布全球首个纯电驱拟人奔跑的全尺寸人形机器人“天工”
LFOSSA 源来如此公开课 | 掌握云原生未来：CNCF 认证全面攻略与备考秘籍
国产云输入法——仅华为无云端数据上传安全问题
开源日报 | 工业开源项目OGG 1.0；姐姐，你要和我一起配置火狐吗；苹果AI遥遥落后？Fedora 40
周排行
购置笔记本常识
从源码看Spring Security之采坑笔记（Spring Boot篇）
大数据学习——高可用配置案例
如何避免选择不专业的建站公司?
Euclid's Game HDU - 1525（博弈）
面试笔记（六）---Js实现eventHandler
Windows 实例搭建的 FTP 在外网无法连接和访问
设计模式 : 桥接模式
USB 设备驱动开发之几个重要结构体分析
14-p14_sqrt求平方根
每日归档
更多
2024-04-29(40)
2024-04-28(0)
2024-04-27(56)
2024-04-26(39)
2024-04-25(22)
2024-04-24(36)
2024-04-23(26)
2024-04-22(39)
2024-04-21(0)
2024-04-20(6)

代码天地 © 2018 codetd.com

境外服务器   最新电视剧2022