Mycat1/3--读写分离

1.下载Mycat

(1)下载Mycat

官方地址不能下载了,但是可以看一下关于Mycat的文档,也是不错的。
官方下载地址

使用下面的地址下载:
最新下载地址
在这里插入图片描述

(2)解压的文件

在这里插入图片描述

(3)配置

conf目录下的server.xml和schema.xml

server.xml

	<user name="root" defaultAccount="true">
		<property name="password">123456</property>
		<property name="schemas">mydb</property>
		<!-- <property name="defaultSchema">TESTDB</property> -->
		<!--No MyCAT Database selected 错误前会尝试使用该schema作为schema,不设置则为null,报错 -->
	</user>

schema.xml

	<!-- 注意:里面的元素一定要按schema 、dataNode 、dataHost的顺序配置 -->
	<schema name="mydb" checkSQLschema="true" sqlMaxLimit="100" randomDataNode="dn1">
		<table name="t_company" primaryKey="id"  autoIncrement="true"
			dataNode="dn1,dn2,dn3" rule="range-sharding-by-members-count"/>	
	</schema>
	
	<dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"
			  writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
		<heartbeat>select user()</heartbeat>
		<writeHost host="hostM1" url="localhost:3306" user="root"
				   password="123">
		<!-- <writeHost host="hostM1" url="jdbc:mysql://localhost:3306" user="root"
				   password="123"> -->
		</writeHost>
		
	</dataHost>

配置图示解析:
在这里插入图片描述

(4)启动mycat

1)直接双击运行
在这里插入图片描述
2)命令行方式运行
建议使用命令行方式运行,在修改配置文件后方便重启。
在这里插入图片描述

(5)测试

1)测试数据库连接
在这里插入图片描述
即可看到根据配置自动生成的表
在这里插入图片描述
2)测试分库

  • 在mysql数据库新建db1、db2、db3三个数据库:
CREATE DATABASE db1 CHARCTER SET 'utf8';
CREATE DATABASE db2 CHARCTER SET 'utf8';
CREATE DATABASE db3 CHARCTER SET 'utf8';

在这里插入图片描述

  • 在上面三个数据库中输入建表语句
CREATE TABLE t_customer(
    id BIGINT PRIMARY KEY,
    name VARCHAR(100) not NULL,
    province int not null
);
  • 输入数据测试:
    db1
insert into  t_customer(id,name,province) values(1,'stephanie01',1001);
insert into  t_customer(id,name,province) values(4,'stephanie04',1004);
insert into  t_customer(id,name,province) values(5,'stephanie05',1005);

db2

insert into  t_customer(id,name,province) values(2,'stephanie02',1002);

db3

insert into  t_customer(id,name,province) values(3,'stephanie03',1003);
  • 结果

发现数据也同步到了mycat 【因为(3)配置中的schema.xml 配置了t_customer同步db1,db2,db3三个节点】
在这里插入图片描述

2.核心概念

数据库中间件:对应用mycat就是数据库服务,mycat是后端数据库集群的代理。
在这里插入图片描述

(1)逻辑概念

逻辑库:mycat数据库服务中定义、管理的数据库。
逻辑表:逻辑库中包含的需分库分表存储的表。
dataNode:数据节点(分片节点),逻辑表分片的存放节点。
dataHost:数据主机(节点主机),数据节点所在的主机。

schema.xml

<mycat:schema>
    <schema name=”testdb”>
        <table name=”orders” primaryKey=”ID”
            type=”global” dataNode=”dn1,dn2” />
    </schema>
    <dataNode name=”dn1” dataHost=”dhost1” database=”db1”/> <dataHost name=”dhostl” ...>
        <heartbeat>select user() </heartbeat>
        <writeHost host=”hostM1” url=”localhost:3306”...
            <readHost host=”hostS2” url=”192.168.1.2:3306”.../> 
        </writeHost>
    </dataHost>
</mycat:schema>

(2)物理概念

writeHost:写主机,真实的数据库服务主机描述
readHost:读主机,真实的数据库服务主机描述

2.schema配置

(1)schema配置

逻辑库schema配置

<?xmlversion=”1.0”?>
<!DOCTYPE mycat:schema SYSTEM ”schema.dtd”>
<mycat:schema xmlns:mycat=”http//io.mycat/”>
    <schema name=”TESTDB” checkSQLschema=”false” sqlMaxLimit=”100”>
    </schema>
</mycat:schema>

MyCat可以有多个逻辑库,每个逻辑库都有自己的相关配置。如果不配置schema标签,所有的表配置,会属于同一个默认的逻辑库。

schema元素属性说明

属性名 数量限制 说明
name String (1) 逻辑数据库名
dataNode String (0…1) 该库中未指定dataNode的表的默认存储节点
checkSQLschema boolean (1) 是否检查SQL语句中库名(select*from TESTDB.orders;),如果设置为true,会检查;当库名与逻辑库名相同时,会去掉语句中的库名前缀。这么做的目的避免发送到后端数据库执行时报( ERROR 1146 (42S02): Table ‘testdb.travelrecord’ doesn’t exist) .
sqlMaxLimit int (1) 对于拆分库的schema,当该值设置为某个数值时,每条执行的SQL语句,如果没有加上limit子句,MyCat会自动加上。例如:设置值为100,执行select*from TESTDB.travelrecord;的效果为 select * from TESTDB.travelrecord limit 100:

(2)table配置

逻辑表table

<schema name=”TESTDB” checkSQLschema=”false” sqlMaxLimit=”100”>
    <table name=”travelrecord” dataNode=”dn1,dn2,dn3” rule=”auto-sharding-long”/>
    <table name=”goods” primaryKey=”ID” type=”global” dataNode=”dn1,dn2”/> 
    <table name=”customer” primaryKey=”ID” dataNode=”dn1,dn2” rule=”sharding-by-intfile”> 
        <childTable name=”orders” primaryKey=”ID” joinKey=”customer_id” parentKey=”id”> 
            <childTable name="order_items" joinKey="order_id" parentKey="id" />
        </childTable>
    </table>
</schema>
  • Table标签定义了MyCat中的逻辑表,所有需要拆分的表都需要通过这个标签定义。
属性名 数量限制 说明
name String (1) 表名,同个schema标签中定义的名字必须唯一。
dataNode String (1.*) 存放表数据的数据节点名。很多难以罗列时,可以这样配置:dataNode=“multipleDn$0-99,multipleDn2$100-199”,$0-99表示0-99 <dataNode name=”multipleDn$0-99” dataHost=”localhostl” database=”db$0-99”></dataNode>
rule String (0…1) 指定逻辑表要使用的分片规则名字,规则名字在rule.xml中定义,必须与tableRule标签中name属性属性值一一对应
ruleRequired boolean (0…1) 该属性用于指定表是否绑定分片规则,如果配置为true,但没有配置具体rule的话,程序会报错。
primaryKey String (1) 该逻辑表对应真实表的主键,当分片的规则是使用非主键进行分片的,那么在使用主键查询的时候,就会发送查询语句到所有配置的DN上,如果使用该属性配置了主键,那么MyCat会缓存主键与具体DN的信息,那么再次使用非主键进行查询的时候就不会进行广播式的查询,会直接发送语句给具体的DN。 注意:尽管配置该属性,如果缓存并没有命中的话,还是会发送语句给具体的DN,来获得数据。
type String (0…1) 定义逻辑表的类型,,目前只有“全局表”和”普通表”两种。对应的配置:全局表:global 普通表:不指定该值为globla的所有表
autolncrement boolean (0…1) 是否使用主键自增长
subTables String (1) 分表,subTables="t_order$1-2,t_order3"。目前分表1.6以后开始支持,并且dataNode在分表条件下只能配置一个,分表条件下不支持各种条件的join语句。
needAddLimit boolean (0…1) 指定表是否需要自动的在每个语句后面加上limit限制。由于使用了分库分表,数据量有时会特别巨大。这时候执行查询语句,若恰巧忘记了加上数量限制,那么想要查询所有的数据,则需要等待一段时间。所以,mycat就自动的为我们加上LIMIT100。当然,如果语句中有limit,就不会再次添加了。这个属性默认为true,你也可以设置成false禁用掉默认行为。

(3)childTable标签

<table name=”customer” primaryKey=”ID” dataNode=”dn1,dn2” rule=”sharding-by-intfile”> 
    <childTable name="orders" primaryKey="ID" joinKey="customer_id" parentKey="id">
        <childTable name="order_items" joinKey="order_id" parentKey="id" />
    </childTable>
</table>

childTable标签用于定义E-R分片的子表,通过标签上的属性与父表进行关联。

属性名 数量限制 说明
name String (1) 子表名
primaryKey String (0…1) 字表的主键列名
joinKey String (1) 字表中与父表关联的列
parentKey String (1) 父表中关联的列

(4)dataHost

<dataHost name=”localhostl” maxCon=”1000” minCon=”10” balance=”0”
        writeType=”0” dbType=”mysql” dbDriver=”native” switchType=”1” slaveThreshold=”100”> 
    <heartbeat>select user()</heartbeat>
    <!-- can have multi write hosts -->
    <writeHost host=”hostM1” url=”localhost:3306” user=”root” password=”123456”>
        <!-- can have multi read hosts -->
        <readHost host=”hostS2” url=”192.168.1.200:3306” user=”root” password=”xxx”/>
    </writeHost>
</dataHost>

dataHost定义Mycat中的数据主机,数据主机定义中定义了具体的数据库服务读写分离配置心跳语句。这是与物理数据库服务关联的地方。

(5)heartbeat

<dataHost name=”localhost1” maxCon=”1000” minCon=”10” balance=”0”       
      writeType=”0” dbType=”mysql” dbDriver=”native” switchType=”1” slaveThreshold=”100”>
    <heartbeat>select user()</heartbeat>   
    <!-- can have multi write hosts --> 
    <writeHost host=”hostM1” url=”localhost:3306” user=”root” password=”123456”> 
         <!-- can have multi read hosts -->     
          <readHost host=”hostS2” url=”192.168.1.200:3306” user=”root” password=”xxx”/>           
    </writeHost>
</dataHost>
  • 这个标签内指明用于和后端数据库进行心跳检查的语句
    例如:MYSQL可以使用selectuser(),Oracle可以使用select1fromdual等。
  • 这个标签还有一个connectionInitSql属性,主要是当使用Oracle数据库时,需要执行的初始化SQL语句就放到这里。
    例如: alter session set nls_date_format=‘yyyy-mm-dd hh24:mi:ss’
  • 主从切换的语句必须是:show slave status

(6)writeHost、 readHost

<dataHost name=”localhost1” maxCon=”1000” minCon=”10” balance=”0”
        writeType=”0” dbType=”mysql” dbDriver=”native” switchType=”1” slaveThreshold=”100”>
    <heartbeat>select user()</heartbeat>
    <!-- can have multi write hosts -->
    <writeHost host=”hostM1” url=”localhost:3306” user=”root” password=”123456”>
        <!-- can have multi read hosts -->
        <readHost host=”hostS2” url=”192.168.1.200:3306” user=”root” password=”xxx”/>
    </writeHost>
</dataHost>

这两个标签都指定后端数据库的相关配置给mycat,用于实例化后端连接池。writeHost指定写实例、readHost指定读实例。
在一个dataHost内可以定义多个writeHost和readHost。但是,如果writeHost指定的后端数据库宕机,那么这个writeHost绑定的所有readHost都将不可用。
另一方面,由于这个writeHost宕机系统会自动的检测到,并切换到备用的writeHost上去。

属性名 数量限制 说明
host String (1) 用于标识不同实例,一般writeHost我们使用Ml,readHost我们用S1。
url String (1) 后端实例连接地址若是用native的dbDriver,则一般为address:port这种形式。若是用JDBC或其他的dbDriver,则需要特殊指定。(当使用JDBC时则可以这么写:jdbc:mysql://localhost:3306/)
user String (1) 连接后端存储实例的用户名
password String (1) 密码

加密密码,执行mycatjar程序(1.4.1以后)

java-cp Mycat-server-1.4.1-dev.jar io.mycat.util.DecryptUtil 1:host:user:password
Mycat-server-1.4.1-dev.jar 为 mycat download 下载目录的jar
1:host:user:password中1为db端加密标志,host为dataHost的host名称

3.Mycat读写分离

配置mysql端主从的数据自动同步,mycat不负责任何的数据同步问题。
Mycat配置读写分离,具体参数参考schema配置。

<dataHost name=”localhostl” maxCon=”1000” minCon=”10” balance=”1” writeType=”0” dbType=”mysql” dbDriver=”native”>
    <heartbeat>select user()</heartbeat>
    <writeHost host=”hostM1” url=”localhost:3306” user=”root” password=”123456”>
        <readHost host=”hostS1” url=”localhost2:3306” user=”root” password=”123456” weight=”1” />
    </writeHost>
</dataHost>
<dataHost name=”localhostl” maxCon=”1000” minCon=”10” balance=”1”
    writeType=”0” dbType=”mysql” dbDriver=”native”>
        <heartbeat>select user()</heartbeat>
        <writeHost host=”hostM1” url=”localhost:3306” user=”root” password=”123456”></writeHost>
        <writeHost host=”hostS1” url=”localhost:3307” user=”root” password=”123456”></writeHost>
</dataHost>

第一种当写挂了读不可用,第二种可以继续使用(配置了mysql端主从数据同步)。事务内部的一切操作都会走写节点,所以读操作不要加事务。

schema.xml

<xml version=”1.0”>
<!DOCTYPE mycat:schema SYSTEM ”schema.dtd”>
<mycat:schema xmlns:mycat=”http://io.mycat/”>
    <!--注意:里面的元素一定要按schema、dataNode、dataHost的顺序配置-->
    <schema name=”mydb1” checkSQLschema=”false” sqlMaxLimit=”100” dataNode=”mydn11”>
    </schema>
    <dataNode name=”mydn1” dataHost=”dhost1” database=”orders” />
    <dataNode name=”mydn2” dataHost=”dhost2” database=”orders” />
    <!--读写分离第一种配置方式-->
    <dataHost name=”dhost1” maxCon=”1000” minCon=”10” balance=”1” 
       writeType=”0” dbtype=”mysql” dbDriver=”native”>
        <heartbeat>select user()</heartbeat>
        <writeHost host=”myhostM1” url=”192.168.100.218:3306” user=”stephanie” password=”stephanie123!”>
        <readHost host=”myhostS1” url=”192.168.100.219:3306” user=”stephanie” pasisword=”stephanie123! ! weight=”1” /></writeHost>
    </dataHost>
    <!--读写分离第二种配置方式(选第一个,第一个宕机后,选择第二个)-->
    <dataHost name=”dhost2” maxCon=”1000” minCon=”10” balance=”1”
        writeType=”0” dbType=”mysql” dbDriver=”native”>
        <heartbeat>select user()</heartbeat>
        <writeHost host=”myhostM2” url=”192.168.100.218:3306” user=”stephanie” password=”stephanie123!”></writeHost>
        <writeHost host=”myhostS2” url=”192.168.100.219:3306” user=”stephanie” passwo rd=”stephanie123!”></writeHost> 
    </dataHost>
</mycat: schema>

server.xml

<mycat>
<user name=”root” defaultAccount=”true”> 
    <property name=”password”>123456</property>
    <property name=”schemas”>mydbl</property>
</mycat:server>

猜你喜欢

转载自blog.csdn.net/a954553391/article/details/107758208
今日推荐