关于mysql的mycat中间件安装配置与python使用mycat例子

我不是女神ヾ 2022-05-16 06:43 648阅读 0赞

### 关于mysql的mycat中间件安装配置与python使用mycat例子 ###

MyCAT是mysql中间件，Mycat数据库分库分表中间件国内最活跃的、性能最好的开源数据库中间件! 它是一款开源的Mysql企业级集群应用，前身是阿里大名鼎鼎的Cobar，Cobar在开源了一段时间后，不了了之。于是MyCAT扛起了这面大旗，在大数据时代，其重要性愈发彰显。

MyCAT提供了类似Mysql的接口，可以平滑的将单机Mysql迁移到Mysql集群上，解决数据存储和业务规模迅速增长情况下的数据瓶颈问题。  
这篇文章主要是MyCAT的入门部署和python使用。  
**一，什么是mycat**

一个彻底开源的，面向企业应用开发的大数据库集群

支持事务、ACID、可以替代MySQL的加强版数据库

一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群

一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server

结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品

一个新颖的数据库中间件产品

以上是官方说明。其实就是数据库的连接池。mysql proxy也是一种连接池，但是效率很低。

**二，mycat 安装**

1，下载地址mycat

2，安装mycat

\# tar zxvf Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz -C /usr/local/

我下载的是Mycat-server-1.5.1-RELEASE-20161130213509-linux.tar.gz

**三，进行mycat配置的前提是已经配置好了，MySQL数据库主从架构，如下：**

1、前提是已经配置了MySQL的主从关系，如下：

在192.168.1.120上MySQL命令行窗口，查看如下：

> mysql> show slave hosts;  
> \+-----------+------+------+-----------+--------------------------------------+  
> | Server\_id | Host | Port | Master\_id | Slave\_UUID                           |  
> \+-----------+------+------+-----------+--------------------------------------+  
> |       121 |      | 3306 |       120 | b8f1101c-9131-11e8-a9bd-000c294283ad |  
> |       122 |      | 3306 |       120 | deb94f66-8cfa-11e8-a1f4-000c29accb8e |  
> |       130 |      | 3306 |       120 | bab165c8-a093-11e8-93ba-000c29e026cb |  
> \+-----------+------+------+-----------+--------------------------------------+  
> 3 rows in set (0.00 sec)

> 在192.168.1.130上MySQL命令行窗口，查看如下：  
> mysql> show slave hosts;  
> \+-----------+------+------+-----------+--------------------------------------+  
> | Server\_id | Host | Port | Master\_id | Slave\_UUID                           |  
> \+-----------+------+------+-----------+--------------------------------------+  
> |       120 |      | 3306 |       130 | c6e0ee48-90e9-11e8-8adb-000c29ba5130 |  
> |       131 |      | 3306 |       130 | ad97775c-a093-11e8-8ba8-000c295e5725 |  
> \+-----------+------+------+-----------+--------------------------------------+  
> 2 rows in set (0.00 sec)

最终架构为（以IP后一段称呼该主机）：

120和130是互为主从  
120的从节点为121和122  
130的从节点是131

**四，配置mycat**

1，配置server.xml

\# vim    /home/hadoop/software/mycat/conf/server.xml //添加以下内容

> <?xml version="1.0" encoding="UTF-8"?>  
>   
> <!DOCTYPE mycat:server SYSTEM "server.dtd">  
> <mycat:server xmlns:mycat="http://org.opencloudb/">  
>         <system>  
>         <property name="defaultSqlParser">druidparser</property>  
>          
>           
>           
>                   
>                   
>                   
>                   
>                   
>                   
>                   
>         </system>  
>           
>         <user name="root">  \#//mycat用户名  
>                 <property name="password">root</property>   //mycat密码  
>                 <property name="schemas">mstest</property>   //mycat虚拟数据库名  
>                 <property name="benchmark">10000</property>   //benchmark:限制前端的整体连接数量，如果值是0表示不限制  
>         </user>
> 
>         <user name="user">  
>                 <property name="password">user</property>  
>                 <property name="schemas">mstest</property>  
>                 <property name="readOnly">true</property>  //只读  
>         </user>  
>         
> 
> </mycat:server>  
>                         
>                         
> 在这里要注意，默认的虚拟数据名是TESTDB，如果schema.xml里面没有配置TESTDB，那就要把TESTDB改成schema.xml里面有的虚拟数据名。  
> 这里定义的用户名和密码，虚拟数据库名，并不是在mysql中真实存在的。

2，配置schema.xml

\# vim    /home/hadoop/software/mycat/conf/schema.xml //添加以下内容

> <?xml version="1.0"?>  
> <!DOCTYPE mycat:schema SYSTEM "schema.dtd">  
> <mycat:schema xmlns:mycat="http://org.opencloudb/" >
> 
>      <schema name="mstest" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">  </schema>   //定义虚拟数据库名mytest
> 
>         <dataNode name="dn1" dataHost="localhost1" database="test" />  //真实数据库名test
> 
>             <dataHost name="localhost1" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">  
>                 <heartbeat>select user()</heartbeat>  
>                   
>                 <writeHost host="hostM1" url="localhost:3306" user="root" password="xx@123456">    //真实数据库的连接方式  
>                           
>                         <readHost host="hostS2" url="192.168.1.121:3306" user="root" password="xx@123456" />   //同上  
>                         <readHost host="hostS2" url="192.168.1.122:3306" user="root" password="xx@123456" />   //同上  
>                 </writeHost>
> 
>                 <writeHost host="hostM2" url="192.168.1.130:3306" user="root" password="xx@123456">  
>                            
>                         <readHost host="hostM2S1" url="192.168.1.131:3306" user="root" password="xx@123456" />  
>                </writeHost>     
> </mycat:schema>

mycat的配置参数，相当的多。重点说一下 balance="1"与writeType="0"

a. balance 属性负载均衡类型，目前的取值有 4 种：

1. balance="0", 不开启读写分离机制，所有读操作都发送到当前可用的 writeHost 上。

2. balance="1"，全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡，简单的说，当双主双从模式(M1 ->S1 ， M2->S2，并且 M1 与 M2 互为主备)，正常情况下， M2,S1,S2 都参与 select 语句的负载均衡。

3. balance="2"，所有读操作都随机的在 writeHost、 readhost 上分发。

4. balance="3"， 所有读请求随机的分发到 wiriterHost 对应的 readhost 执行,writerHost 不负担读压力，注意 balance=3 只在 1.4 及其以后版本有， 1.3 没有。

b. writeType 属性

负载均衡类型，目前的取值有 3 种：

1. writeType="0", 所有写操作发送到配置的第一个 writeHost，第一个挂了切到还生存的第二个

writeHost，重新启动后已切换后的为准，切换记录在配置文件中:dnindex.properties .

2. writeType="1"，所有写操作都随机的发送到配置的 writeHost。

3. writeType="2"，没实现。

具体参数：http://mycat.io/document/Mycat\_V1.6.0.pdf

3，配置主从服务器，就不在这儿说了，博客中有

4，添加真实用户

grant all privileges on test.\* to root@"192.168.%" identified by 'xx@123456';  
flush privileges

在120，130二台机器上添加用户。

5，测试真实用户连接，确保schema.xml中配置的真实用户，能连上真实的数据库。注意防火墙。

**五，启动mycat**

1，常用参数  
./mycat start 启动  
./mycat stop 停止  
./mycat console 前台运行  
./mycat restart 重启服务  
./mycat pause 暂停  
./mycat status 查看启动状态

2，启动，并查看mycat

\# ./mycat start  
Starting Mycat-server...  
   
\# netstat -tpnl |grep 8066  
tcp 0 0 :::8066 :::\* LISTEN 31728/java  
   
\# ./mycat status  
Mycat-server is running (31726).  
**六，测试读写分离**

\# mysql -u root -p -P 8066 -h 127.0.0.1 //一定要带上127.0.0.1

**七，小结**

mycat支持 mysql的分表，分片等等，但是不建议使用。mycat支持的集群不多，如果能配合MHA使用就比较牛B了。

**八、python通过中间件mycat操作mysql代码**

> \#!/usr/bin/python  
> \# -\*- coding: UTF-8 -\*-  
> import MySQLdb
> 
>   
> class MyCatClass(object):  
>     def \_\_init\_\_(self):  
>         \# 打开数据库连接  
>         \#用户名和密码失败塑造出无法访问  
>         \# self.\_\_conn\_db = MySQLdb.connect("192.168.1.120", "work", "xx@123456", charset='utf8', port=3306, db='test')  
>         \# 以下是成功写法  
>         \# 方法一  
>         \# self.\_\_conn\_db = MySQLdb.connect(user='root', passwd='root', host='192.168.1.120', port=8066,db='mstest',charset='utf8')  
>         \# 方法二  
>         \# self.\_\_conn\_db = MySQLdb.connect(user='user', passwd='user', host='192.168.1.120', port=8066, db='mstest', charset='utf8')  
>         \# 方法三  
>         config = \{  
>             'host': '192.168.1.120',  
>             'port': 8066,  
>             'user': 'root',  
>             'passwd': 'root',  
>             'db': 'mstest',  
>             'charset': 'utf8'  
>         \}  
>         self.\_\_conn\_db = MySQLdb.connect(\*\*config)
> 
>         \# 使用cursor()方法获取操作游标  
>         self.\_\_cursor = self.\_\_conn\_db.cursor()
> 
>     \# 使用execute方法执行SQL语句  
>     def excute\_db(self,in\_sql="SELECT VERSION()"):  
>         num=self.\_\_cursor.execute(in\_sql)  
>         if num>0:  
>             data\_list = self.\_\_cursor.fetchall()  
>         return data\_list
> 
>     def show\_dataset(self):  
>         sql="select \* from stu\_info"  
>         data\_list=self.excute\_db(in\_sql=sql)  
>         print data\_list  
>         for each in data\_list:  
>             print each  
>             for e in each:  
>                 print e  
>     def insert\_data(self):  
>         sql\_insert='''insert stu\_info(name,age) values('0813',520)'''  
>         self.\_\_cursor.execute(sql\_insert)  
>         self.\_\_conn\_db.autocommit(True)  
>         \# self.\_\_conn\_db.commit()
> 
>     def \_\_del\_\_(self):  
>         self.\_\_cursor.close()
> 
>   
> if \_\_name\_\_ == '\_\_main\_\_':  
>     obj\_handle\_mycat = MyCatClass()  
>     print obj\_handle\_mycat.excute\_db()  
>     obj\_handle\_mycat.show\_dataset()  
>     obj\_handle\_mycat.insert\_data()  
>     obj\_handle\_mycat.show\_dataset()

参考：http://www.php.cn/mysql-tutorials-363510.html  
            https://www.jianshu.com/p/f15d64fcb2f3