mycat分片配置测试

Posted 2023-02-14

mycat分片配置

• ​​1、需求​​
• ​​2、环境准备​​
• ​​3、配置schema.xml​​
• ​​4、配置server.xml​​
• ​​5、启动MyCat​​

• ​​5.1 通过命令行连接mycat​​

• ​​6、mycat分片测试​​

1、需求

由于 TB_TEST 表中数据量很大, 现在需要对 TB_TEST 表进行数据分片, 分为三个数据节点 , 每一个节点主机位于不同的服务器上, 具体的结构 ,参考下图 :

2、环境准备

准备三台虚拟机 , 且安装好mysql , 并配置好 :

IP 地址列表 : 
  192.168.192.33
  192.168.192.34
  192.168.192.35

3、配置schema.xml

schema.xml 作为MyCat中重要的配置文件之一，管理着MyCat的逻辑库、逻辑表以及对应的分片规则、DataNode以及DataSource。弄懂这些配置，是正确使用MyCat的前提。这里就一层层对该文件进行解析。

属性	含义
schema	标签用于定义MyCat实例中的逻辑库
table	标签定义了MyCat中的逻辑表, rule用于指定分片规则，auto-sharding-long的分片规则是按ID值的范围进行分片 1-5000000 为第1片 5000001-10000000 为第2片…
dataNode	标签定义了MyCat中的数据节点，也就是我们通常说所的数据分片。
dataHost	标签在mycat逻辑库中也是作为最底层的标签存在，直接定义了具体的数据库实例、读写分离配置和心跳语句。

在服务器上创建3个数据库，命名为 db1
修改schema.xml如下：

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">

        <schema name="ITCAST" checkSQLschema="true" sqlMaxLimit="100">
                <!-- auto sharding by id (long) -->
                <table name="TB_TEST" dataNode="dn1,dn2,dn3" rule="auto-sharding-long" />
                <!-- <table name="oc_call" primaryKey="ID" dataNode="dn1$0-743" rule="latest-month-calldate"
                        /> -->
        </schema>
        <!-- <dataNode name="dn1$0-743" dataHost="localhost1" database="db$0-743"
                /> -->
        <dataNode name="dn1" dataHost="localhost1" database="db1" />
        <dataNode name="dn2" dataHost="localhost2" database="db1" />
        <dataNode name="dn3" dataHost="localhost3" database="db1" />


        <dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"
                          writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                <heartbeat>select user()</heartbeat>
                <!-- can have multi write hosts -->
                <writeHost host="hostM1" url="192.168.159.33:3306" user="root"
                                   password="123456">
                </writeHost>
                <!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
        </dataHost>

        <dataHost name="localhost2" maxCon="1000" minCon="10" balance="0"
                          writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                <heartbeat>select user()</heartbeat>
                <!-- can have multi write hosts -->
                <writeHost host="hostM1" url="192.168.159.34:3306" user="root"
                                   password="123456">
                </writeHost>
                <!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
        </dataHost>

        <dataHost name="localhost3" maxCon="1000" minCon="10" balance="0"
                          writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                <heartbeat>select user()</heartbeat>
                <!-- can have multi write hosts -->
                <writeHost host="hostM1" url="192.168.159.35:3306" user="root"
                                   password="123456">
                </writeHost>
                <!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
        </dataHost>

</mycat:schema>

4、配置server.xml

server.xml几乎保存了所有mycat需要的系统配置信息。最常用的是在此配置用户名、密码及权限。在system中添加UTF-8字符集设置，否则存储中文会出现问号

```xml
<property name="charset">utf8</property>

修改user的设置 , 我们这里为 ITCAST 设置了两个用户 :

<user name="root">
    <property name="password">123456</property>
    <property name="schemas">ITCAST</property>
</user>

<user name="test">
    <property name="password">123456</property>
    <property name="schemas">ITCAST</property>
</user>

并且需要将原来的逻辑库的配置 , 替换为 ITCAST逻辑库 ;

5、启动MyCat

启动:

bin/mycat start
bin/mycat stop
bin/mycat status

查看MyCat:

连接端口号 8066

5.1 通过命令行连接mycat

mysql -h 192.168.159.33 -P 8066 -u root -p

2). 通过navicat连接

6、mycat分片测试

进入mycat ，执行下列语句创建一个表

CREATE TABLE TB_TEST (
  id BIGINT(20) NOT NULL,
  title VARCHAR(100) NOT NULL ,
  PRIMARY KEY (id)
) ENGINE=INNODB DEFAULT CHARSET=utf8 ;

我们再查看MySQL的3个库，发现表都自动创建好啦

192.168.159.33

192.168.159.34

192.168.159.35

我们试着插入一些数据：

INSERT INTO TB_TEST(ID,TITLE) VALUES(1,goods1);
INSERT INTO TB_TEST(ID,TITLE) VALUES(2,goods2);
INSERT INTO TB_TEST(ID,TITLE) VALUES(3,goods3);

我们会发现这些数据被写入到第一个节点中了，那什么时候数据会写到第二个节点中呢？

192.168.159.33:

192.168.159.34

192.168.159.35

我们插入下面的数据就可以插入第二个节点了

INSERT INTO TB_TEST(ID,TITLE) VALUES(5000001,goods5000001);

此时的192.168.159.34

因为我们采用的分片规则是每节点存储500万条数据，所以当ID大于5000000则会存储到第二个节点上。

目前只设置了两个节点，如果数据大于1000万条，会怎么样呢？执行下列语句测试一下

INSERT INTO TB_TEST(ID,TITLE) VALUES(10000001,goods10000001);

此时的192.168.159.35