データベースミドルウェアDBLE学習（）導入に基づいて、迅速に建てられました

その他 2019-12-24 16:20:58 訪問数: null

DBLE基本的なアーキテクチャの概要

DBLEをされ上海爱可生信息技术股份有限公司に基づいてmysql、高可用性の分散ミドルウェアスケーラビリティ。ニックネームを送った個人MyCat Plus。オープンソース・アドレス

DBLEアーキテクチャ
我々アーキテクチャ図を初めて目には、NIO / AIOが運営する外部アプリケーションを接続します。ここではまず、我々はNIO / AIOを導入しているすべてのものを概念です。

  • BIOすなわち、従来のブロッキングI / Oは、JDK1.4前に唯一のオプションです。同步阻塞I/O模式低同時処理能力。
  • NIOはまた、ノンブロッキングI / O、JDK1.4バージョンの後にリリースされた新機能として知られています同步非阻塞模式。
  • AIOは、非同期I / O、JDK1.7のバージョンがあるだけで後のサポートとして知られています异步非阻塞I/O模型。

あなたは、解決のためのNIO層を介してSQL解析するために、アプリケーションの起動、第1の動作を見ることができた後。SQLは、生産実行計画を解析し、MySQLのシャーディング、NIO / AIOによって達成される。このプロセスの背景を根底以降の輸送をルーティングデータベースを実行します。各基礎となるデータベースの実行完了を中間層に戻された後、濾過、グループ化、ソート、およびその他の操作、最終的にクライアントに戻されました。

基本的な構造を理解した後、我々は、迅速なセットアップを行います。最初のダウンロード：DBLEダウンロード最新バージョンを2.19.09.0ここでダウンロードすることを選択actiontech-dble-2.19.09.0.tar.gz。私たちは、すぐに環境を設定し、次のようにIPは、次のとおりです。

サーバー IPアドレス 説明
DBLEサーバー 192.168.56.185 DBLE例えば、ミドルウェア、データベース、SQLのルーティング配信を受けるための責任があります
MySQLのAサーバー 192.168.56.181 Aの物理的インスタンスは、DB1、DB3、DB5 3つのスキーマを作成します。
MySQLのBサーバ 192.168.56.182 物理インスタンスBは、DB2、DB4、DB6 3つのスキーマを作成します。

DBLEビルド

DBLEクイックインストール

1.まず、DBLE Serverサーバーに環境変数JAVA1.8を設定する必要があります。

在CentOS 7中默认是安装了JDK1.8的，如果没有安装需要安装一下。我们系统本身已经安装好的环境做一下配置。

export JAVA_HOME=/etc/alternatives/jre_1.8.0_openjdk
PATH=$PATH:$HOME/bin:$JAVA_HOME/bin

[root@mycat bin]# java -version
openjdk version "1.8.0_161"

OpenJDK Runtime Environment (build 1.8.0_161-b14)
OpenJDK 64-Bit Server VM (build 25.161-b14, mixed mode)

2.在dble Server服务器上创建安装目录并解压文件

把安装介质actiontech-dble-2.19.09.0.tar.gz上传到dble server服务器上。

cd /tmp
tar -xvf actiontech-dble-2.19.09.0.tar.gz
mkdir -p /dble
cd /tmp/dele
mv * /dble
cd /dble/conf

接下来需要copy三个模板文件进行修改。这里简单介绍下这三个文件的作用:
| 文件名称 | 作用 |
| --- | --- |
| rule.xml | 对分片的规则进行定义|
| schema.xml | 对具体的分片进行定义，定义table和schema以及dataNode之间的关系，指定每个table将要使用哪种类型的分片方法，定义每个dataNode的连接信息等等 |
| server.xml | dble服务器相关参数定义，包含dble性能、定时任务、端口、用户配置 |

cp -rp server_template.xml server.xml
cp -rp schema_template.xml schema.xml
cp -rp rule_template.xml rule.xml

3.在两套MySQL服务器上配置root用户

为了快捷安装，需要在两台MySQL Server给root可以远程登录的相关操作权限.

MariaDB [(none)]> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION;
Query OK, 0 rows affected (0.000 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.000 sec

4.在dble server上配置schema.xml文件,主要修改下列地方

这里的dataHost是节点名称。我们有两套服务器，需要配置相关writeHost的IP地址，然后Mysql的用户名和密码(为了简单方便这里暂时使用root)。

<dataHost name="dataHost1" maxCon="1000" minCon="10" balance="0" switchType="-1" slaveThreshold="100">
    <heartbeat>show slave status</heartbeat>
    <!-- can have multi write hosts -->
    <writeHost host="hostM1" url="192.168.56.181:3306" user="root" password="123456">
    </writeHost>
</dataHost>
<dataHost name="dataHost2" maxCon="1000" minCon="10" balance="0" switchType="-1" slaveThreshold="100">
    <heartbeat>show slave status</heartbeat>
    <!-- can have multi write hosts -->
    <writeHost host="hostM2" url="192.168.56.182:3306" user="root" password="123456">
    </writeHost>
</dataHost>

5.启动dble

这里通过dble命令就可以启动程序了，启动后，可以查看wrapper.log，显示Server startup successfully则成功启动。

[root@mycat logs]# dble start
Starting dble-server...

---->wrapper.log日志
STATUS | wrapper  | 2019/12/17 23:25:25 | --> Wrapper Started as Daemon
STATUS | wrapper  | 2019/12/17 23:25:25 | Launching a JVM...
INFO   | jvm 1    | 2019/12/17 23:25:26 | Wrapper (Version 3.2.3) http://wrapper.tanukisoftware.org
INFO   | jvm 1    | 2019/12/17 23:25:26 |   Copyright 1999-2006 Tanuki Software, Inc.  All Rights Reserved.
INFO   | jvm 1    | 2019/12/17 23:25:26 | 
INFO   | jvm 1    | 2019/12/17 23:25:28 | Server startup successfully. dble version is [5.6.29-dble-2.19.09.0-fd62e7a27a561169acabc11df32b2f0d13a0b922-20191121135714]. Please see logs in logs/dble.log

6.登录进行验证

その後、我々はルートユーザを管理するために、192.168.56.185ホストデータベースミドルウェアを記録することができるようになります。、リモートホスト181でここからログイン185台の上のノーインストールためMysqlのクライアント。

[root@mysql5 ~]# mysql -uroot -p -P8066 -h192.168.56.185 -p123456
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.6.29-dble-2.19.09.0-fd62e7a27a561169acabc11df32b2f0d13a0b922-20191121135714 dble Server (ActionTech)

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MySQL [(none)]> show databases;
+----------+
| DATABASE |
+----------+
| testdb   |
| testdb2  |
+----------+
2 rows in set (0.002 sec)
MySQL [(none)]> use testdb;
Database changed
MySQL [testdb]> show tables;
Empty set (0.002 sec)

データスライスを作成します。7.

私たちの前にschema.xmlを設定ファイルには、我々は次のデフォルトの構成を有しています。データファイルは、ホスト6スキーマの異なる組の異なる実施例に対応する6つの断片で構成されています。

<!-- <dataNode name="dn1$0-743" dataHost="dataHost1" database="db$0-743" /> -->
<dataNode name="dn1" dataHost="dataHost1" database="db_1"/>
<dataNode name="dn2" dataHost="dataHost2" database="db_2"/>
<dataNode name="dn3" dataHost="dataHost1" database="db_3"/>
<dataNode name="dn4" dataHost="dataHost2" database="db_4"/>
<dataNode name="dn5" dataHost="dataHost1" database="db_5"/>
<dataNode name="dn6" dataHost="dataHost2" database="db_6"/>

この時点では、管理アカウントを介して動作する必要があります。server.xmlファイルを開きます。ユーザーはここで見つけます。最初のユーザー定義の管理ユーザー。デフォルトの管理ポートが9066であるだけでなく、ポートの設定を開始します。

<user name="man1">
        <property name="password">654321</property>
        <property name="manager">true</property>
        <!-- manager user can't set schema-->
</user>

<!--<property name="serverPort">8066</property> -->
<!--<property name="managerPort">9066</property> -->

アカウントMAN1と9066ポートのログインを管理することにより、あなたは管理コマンドを実行することができ、ここではのschema.xmlデータノード計画に従ってスライスを作成します。ここで作成して非常に便利ですが、あなたはDN $ 1-Nの文言をサポートすることができます。

[root@mysql5 ~]# mysql -uman1 -p -P9066 -h192.168.56.185 -p654321
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.6.29-dble-2.19.09.0-fd62e7a27a561169acabc11df32b2f0d13a0b922-20191121135714 dble Server (ActionTech)

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MySQL [(none)]> create database @@dataNode='dn$1-6';
Query OK, 1 row affected (0.049 sec)

その後、我々は検証のMySQL Aにログオンすることができます。例Aでは、我々は、スキーマDB_1、db_3、db_5を作成するために見ることができます。そして、我々の結果は、一貫性のあるschema.xmlを設定ファイルです。

[root@mysql5 ~]# mysql -uroot -S /tmp/mysql.sock1 -p
Enter password: 
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 190
Server version: 10.3.17-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| db_1               |
| db_3               |
| db_5               |
| information_schema |
| mysql              |
| performance_schema |
| test               |
+--------------------+
7 rows in set (0.001 sec)

テストテーブルを作成します8.

confディレクトリのDBLEは以下という設定ファイルを持っているtemplate_table.sql私たちは、いくつかのテストケースをテストするために、このファイルが使用可能です。192.168.56.185にインストールされていないのでMySQL、サービス、サービス管理ポート9066とポート8066は、私たちが192.168.56.181にSCPにこのファイルを配置する必要があり、実際のJava聞いています。181使用してMySQLリモート接続185を操作する手順を。

[root@mycat conf]# ps -ef | grep mysql
root      3670  1287  0 00:28 pts/0    00:00:00 grep --color=auto mysql
[root@mycat conf]# netstat -anp | grep 8066
tcp6       0      0 :::8066                 :::*                    LISTEN      3432/java           
[root@mycat conf]# netstat -anp | grep 9066
tcp6       0      0 :::9066                 :::*                    LISTEN      3432/java   
[root@mycat conf]# scp template_table.sql [email protected]:/root

---登录到181上连接管理端口8066执行脚本。
[root@mysql5 ~]# mysql -uroot -p -P8066 -h192.168.56.185 -p123456
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.6.29-dble-2.19.09.0-fd62e7a27a561169acabc11df32b2f0d13a0b922-20191121135714 dble Server (ActionTech)

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MySQL [(none)]> source /root/template_table.sql

---创建完之后就可以登录到testdb查询创建的表，可以看到表的类型，有全局表和分片表。
MySQL [testdb]> use testdb;
Database changed
MySQL [testdb]> show all tables;
+----------------------+----------------+
| Tables_in_testdb     | Table_type     |
+----------------------+----------------+
| tb_child1            | SHARDING TABLE |
| tb_child2            | SHARDING TABLE |
| tb_child3            | SHARDING TABLE |
| tb_date              | SHARDING TABLE |
| tb_enum_sharding     | SHARDING TABLE |
| tb_global1           | GLOBAL TABLE   |
| tb_global2           | GLOBAL TABLE   |
| tb_grandson1         | SHARDING TABLE |
| tb_grandson2         | SHARDING TABLE |
| tb_hash_sharding     | SHARDING TABLE |
| tb_hash_sharding_er1 | SHARDING TABLE |
| tb_hash_sharding_er2 | SHARDING TABLE |
| tb_hash_sharding_er3 | SHARDING TABLE |
| tb_hash_string       | SHARDING TABLE |
| tb_jump_hash         | SHARDING TABLE |
| tb_mod               | SHARDING TABLE |
| tb_parent            | SHARDING TABLE |
| tb_pattern           | SHARDING TABLE |
| tb_range_sharding    | SHARDING TABLE |
| tb_single            | SHARDING TABLE |
| tb_uneven_hash       | SHARDING TABLE |
+----------------------+----------------+
21 rows in set (0.002 sec)

---接下来可以使用explain来查看分片表的执行情况。这里我不带条件查询tb_mod，可以发现使用了广播sql，会对4个分片进行扫描。为什么会是4个分片，这里我们需要看schema.xml中对表的定义。
<table name="tb_mod" dataNode="dn1,dn2,dn3,dn4" rule="rule_mod"/>[DBLE下载地址](https://github.com/actiontech/dble/releases)，
MySQL [testdb]> explain select * from tb_mod;
+-----------+----------+----------------------+
| DATA_NODE | TYPE     | SQL/REF              |
+-----------+----------+----------------------+
| dn1       | BASE SQL | select * from tb_mod |
| dn2       | BASE SQL | select * from tb_mod |
| dn3       | BASE SQL | select * from tb_mod |
| dn4       | BASE SQL | select * from tb_mod |
+-----------+----------+----------------------+
4 rows in set (0.006 sec)
如果我查询id=2,就会通过分片键进行查询，这里是取模算法，2是放在dn3分片上的。
MySQL [testdb]> explain select * from tb_mod where id=2;
+-----------+----------+---------------------------------+
| DATA_NODE | TYPE     | SQL/REF                         |
+-----------+----------+---------------------------------+
| dn3       | BASE SQL | select * from tb_mod where id=2 |
+-----------+----------+---------------------------------+
1 row in set (0.054 sec)

フレーズの終わり：

DBLE以上インストールされていますが、そのコンセプトや構成XMLビット面倒です。いくつかの注意が必要です。

参考資料

1.dbleマイクロ教室https://opensource.actionsky.com/20191125-dble/ 2.オープンソースの分散ミドルウェアDBLEクイックスタートガイドhttps://www.jianshu.com/p/cd5911058c

おすすめ

転載: www.cnblogs.com/buddy-yuan/p/12091941.html
おすすめ
TIOBE 5 月リスト: Fortran がトップ 10 に「復活」
GCC 14.1 发布
ランキング
Linuxの一般的なコマンドの緊急対応
FPGAの設計者は、5つの基本的なスキルです
Javaの研究では、2019年6月12日ノート
Golang底层原理剖析之内存逃逸
VIM - Viは、プログラマーのテキストエディタを改善しました
魔法書（MagicTable）入門チュートリアルは、CADの一括転送複数のテーブルExcelをExcelを回し--CAD
mockitoとの望ましくないモック
EVE-NG MPLS L2VPN BGP pw -- スタティック ルート、スタティック mpls lsp
抵抗性タッチスクリーンドライバ（II）
PHP 安装扩展 Api Version 和扩展extensions路径不匹配的问题
アーカイブ
もっと
2024-05-08(18)
2024-05-07(34)
2024-05-06(6)
2024-05-05(0)
2024-05-04(18)
2024-05-03(8)
2024-05-02(0)
2024-05-01(4)
2024-04-30(35)
2024-04-29(5)

コードワールド

© 2018 codetd.com