1、Mycat的分片

  两台数据库服务器:

  192.168.80.11

  192.168.80.4

  操作系统版本环境:centos6.5

  数据库版本:5.6

  mycat版本:1.4 release

  数据库:db1,db2,db3

  说明:db1.db2 在192.168.80.11 服务器上 ,db3在192.168.80.4服务器上

------------------------------------------------------------------------------------------------------------------------------

  1、schema.xml配置: 

  Schema.xml作为MyCat中重要的配置文件之一,管理着MyCat的逻辑库、表、分片规则、DataNode以及DataSource。弄懂这些配置,是正确使用MyCat的前提。这里就一层层对该文件进行解析。

  schema 标签用于定义MyCat实例中的逻辑库

  Table 标签定义了MyCat中的逻辑表

  dataNode 标签定义了MyCat中的数据节点,也就是我们通常说所的数据分片。

  dataHost标签在mycat逻辑库中也是作为最底层的标签存在,直接定义了具体的数据库实例、读写分离配置和心跳语句。

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
   <!--起一个名字,作为mycat的数据库名-->
   <schema name="mycat001" checkSQLschema="false" sqlMaxLimit="100">
<!--一个表的名字,以id为分片依据,数据节点:d1,d2,d3,rule拆分规定//此处为默认 -->
<table name="mycat_test" primaryKey="id" dataNode="d1,d2,d3" rule="auto-sharding-long" /> </schema>
<!-- <dataNode name="dn1$0-743" dataHost="localhost1" database="db$0-743"
/> -->
   <!--配置数据节点,name和上面的对照,datahost和下面的对照,database为数据节点中的数据库中的真实名字-->
<dataNode name="d1" dataHost="centos_1" database="db1" />
<dataNode name="d2" dataHost="centos_2" database="db2" />
<dataNode name="d3" dataHost="centos_3" database="db3" />
<!--配置datahost的信息,连接数据库的配置,name和上面的对照,因为db1和db2在一台机器上,可以配置一成台datahost-->
<dataHost name="centos_1" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
     <heartbeat>show slave status</heartbeat><!--配置心跳,保持状态-->
<!-- can have multi write hosts --><!--配置服务器ip和数据库端口,用户名和密码-->
<writeHost host="hostM1" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts --><!--上面的writehost是写-->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> <dataHost name="centos_2" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM2" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts -->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> <dataHost name="centos_3" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM3" url="192.168.80.4:3306" user="root" password="123456">
<!-- can have multi read hosts -->
</writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost> </mycat:schema>

  2、server.xml配置

  配置用户:name="schemas"和前面配置的schemas.xml中的name对应

<user name="dongrunhua">
<property name="password">123456</property>
<property name="schemas">mycat001</property>
<property name="readOnly">false</property>
</user>

  3、rule.xml配置 

  rule.xml里面就定义了我们对表进行拆分所涉及到的规则定义。我们可以灵活的对表使用不同的分片算法,或者对表使用相同的算法但具体的参数不同。这个文件里面主要有tableRule和function这两个标签。在具体使用过程中可以按照需求添加tableRule

和function。

  此配置文件可以不用修改,使用默认即可。

  4、测试: 

  所建的表,要在schemas.xml中的schemas节点内的tables节点配置

  由于配置的分片规则为“auto-sharding-long”,所以mycat会根据此规则自动分片。

  每个datanode中保存一定数量的数据。根据id进行分片

  经测试id范围为:

  db1:1~5000000

  db2:5000001~10000000

  db3:10000001~15000000

  当15000000以上的id插入时报错:

  [Err] 1064 - can't find any valid datanode :mycat_test -> id -> 15000001

  此时需要添加节点了。

----------------------------------------------------------------------------------------------------------------------------

2、mycat配置读写分离

  数据库读写分离对于大型系统或者访问量很高的互联网应用来说,是必不可少的一个重要功能。对于MySQL来说,标准的读写分离是主从模式,一个写节点Master后面跟着多个读节点,读节点的数量取决于系统的压力,通常是1-3个读节点的配置。

  1、先配置MySQL的主从模式

    说明:此配置为192.168.80.11的db1为主,192.168.80.4的db1为从

  2、配置主服务器

  第一步:配置my.cnf文件

  如果在/etc文件先没有my.cnf这个文件,从/usr/share/mysql 下复制一个过来/etc/, 改一下名字即可 my-default.cnf 然后在[mysqld]下面添加:

#配置数据库
binlog-do-db=db1
binlog-ignore-db=mysql
#启用二进制日志
log-bin=mysql-bin
#服务器唯一ID,一般取IP最后一段
server-id=11

  第二步:重启MySQL服务

  service mysql restart

  第三步:建立一个账户并授权slave ,在这个时候一般不会取用root用户,建立一个专用账号。

  可以设置为%表示所有客户端可以连,只要用户名密码正确,也可以设置一个ip代替,加强安全。

  mysql>GRANT FILE ON *.* TO 'backup'@'%' IDENTIFIED BY '123456';

  mysql>GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* to 'backup'@'%' identified by '123456';

  刷新:FLUSH PRIVILEGES;

  查看有哪些用户:

mysql>select user,host from mysql.user;

  第四步:查看master的状态

  mysql> show master status;

  3、配置从服务器

  第一步:修改my.cnf文件,唯一id

  文件路径和上面一样:然后在[mysqld]段下面添加:server-id=4

  第二步:配置从服务器

  mysql>change master to master_host='192.168.80.11',master_port=3306,master_user='backup',master_password='123456',master_log_file='mysql-bin.000003',master_log_pos=2669

  注意:语句中间不要断开,master_host为主服务器的ip,master_port为端口(无引号),master_user为执行同步操作的数据库账户,在此为刚创建的backup, master_log_file为刚刚file内的值,master_log_pos为刚刚position内的值

  启动从服务器的复制功能:

  mysql>start slave;

  检查从服务器的复制功能:

  mysql>show slave status\G

  查看Slave_IO_Running:yes // 此状态必须为yes

    Slave_SQL_Running:yes // 此状态必须yes

  注:Slave_IO及Slave_SQL进程必须正常运行,即YES状态,否则都是错误的状态(如:其中一个NO均属错误)。

  注意:删除slave

    stop slave; // 停止slave

    reset slave all; // 删除slave

    start slave; // 启动slave

    在mysql主从复制时,在192.168.80.4上建一个db1作为从服务器,名字db1和192.168.80.11上的主服务器名字相同,都为db1

-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

  Mycat配置:

  Mycat 1.4 支持MySQL主从复制状态绑定的读写分离机制,让读更加安全可靠,配置如下:

  配置如下:

<dataHost name="centos_1" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
<heartbeat>show slave status</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM1" url="192.168.80.11:3306" user="root" password="123456">
<!-- can have multi read hosts -->
<readHost host="hostS1" url="192.168.80.4:3306" user="root" password="123456" /> </writeHost>
<!-- <writeHost host="hostM2" url="localhost:3316" user="root" password="123456"/> -->
</dataHost>

  说明:

  (1)设置 balance="1"与writeType="0"

  Balance参数设置:

    1. balance=“0”, 所有读操作都发送到当前可用的writeHost上。

    2. balance=“1”,所有读操作都随机的发送到readHost。

    3. balance=“2”,所有读操作都随机的在writeHost、readhost上分发

  WriteType参数设置:

    1. writeType=“0”, 所有写操作都发送到可用的writeHost上。

    2. writeType=“1”,所有写操作都随机的发送到readHost。

    3. writeType=“2”,所有写操作都随机的在writeHost、readhost分上发。

   “readHost是从属于writeHost的,即意味着它从那个writeHost获取同步数据,因此,当它所属的writeHost宕机了,则它也不会再参与到读写分离中来,即“不工作了”,这是因为此时,它的数据已经“不可靠”了。基于这个考虑,目前mycat 1.3和1.4版本中,若想支持MySQL一主一从的标准配置,并且在主节点宕机的情况下,从节点还能读取数据,则需要在Mycat里配置为两个writeHost并设置banlance=1。”

  (2)设置 switchType="2" 与slaveThreshold="100"

  switchType 目前有三种选择:

    -1:表示不自动切换

    1 :默认值,自动切换

    2 :基于MySQL主从同步的状态决定是否切换

  “Mycat心跳检查语句配置为 show slave status ,dataHost 上定义两个新属性: switchType="2" 与slaveThreshold="100",此时意味着开启MySQL主从复制状态绑定的读写分离与切换机制。Mycat心跳机制通过检测 show slave status 中的 "Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running" 三个字段来确定当前主从同步的状态以及Seconds_Behind_Master主从复制时延。“

Mycat入门配置_读写分离配置的更多相关文章

  1. MySQL+MyCat分库分表 读写分离配置

    一. MySQL+MyCat分库分表 1 MyCat简介 java编写的数据库中间件 Mycat运行环境需要JDK. Mycat是中间件.运行在代码应用和MySQL数据库之间的应用. 前身 : cor ...

  2. MySQL一主多从配置和读写分离配置

    一.一主多从配置 此次操作实现的是一主两从的方式.主服务器slave2(2.100),从服务器slave2-1(2.107),slave2-2(2.108);第一:准备主数据库    1. 在不同的机 ...

  3. 通过mycat实现mysql的读写分离

    mysql的主从配置沿用上一篇博客的配置:https://www.cnblogs.com/MasterSword/p/9434169.html mycat下载地址:http://www.mycat.i ...

  4. SpringBoot Mybatis 读写分离配置(山东数漫江湖)

    为什么需要读写分离 当项目越来越大和并发越来大的情况下,单个数据库服务器的压力肯定也是越来越大,最终演变成数据库成为性能的瓶颈,而且当数据越来越多时,查询也更加耗费时间,当然数据库数据过大时,可以采用 ...

  5. MySQL5.6 Replication主从复制(读写分离) 配置完整版

    MySQL5.6 Replication主从复制(读写分离) 配置完整版 MySQL5.6主从复制(读写分离)教程 1.MySQL5.6开始主从复制有两种方式: 基于日志(binlog): 基于GTI ...

  6. Mysql一主多从和读写分离配置简记

    近期开发的系统中使用MySQL作为数据库,由于数据涉及到Money,所以不得不慎重.同时,用户对最大访问量也提出了要求.为了避免Mysql成为性能瓶颈并具备很好的容错能力,特此实现主从热备和读写分离. ...

  7. yii2的数据库读写分离配置

    简介 数据库读写分离是在网站遇到性能瓶颈的时候最先考虑优化的步骤,那么yii2是如何做数据库读写分离的呢?本节教程来给大家普及一下yii2的数据库读写分离配置. 两个服务器的数据同步是读写分离的前提条 ...

  8. mysql读写分离配置(整理)

    mysql读写分离配置 环境:centos7.2 mysql5.7 场景描述: 数据库Master主服务器:192.168.206.100 数据库Slave从服务器:192.168.206.200 M ...

  9. laravel学习:主从读写分离配置的实现

    本篇文章给大家带来的内容是关于laravel学习:主从读写分离配置的实现,有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助. 在DB的连接工厂中找到以下代码.../vendor/larav ...

随机推荐

  1. JQuery Mobile - 自定义图标!

    环境 jquery1.9.1.js jquery mobile 1.4.2版 图标制作 18x18px 底透明的png图标 使用图标,这个过程开始怎么弄都不行,只有个灰色的圆出现,不见图标:或者出现图 ...

  2. Yarn 资源调度框架

    Yarn 资源调度框架    实现对资源的细粒度封装(cpu,内存,带宽)    此外,还可以通过yarn协调多种不同计算框架(MR,Spark)    概述        Apache Hadoop ...

  3. 人工智能-机器学习之Selenium(chrome驱动,火狐驱动)

    selenium是一个用于web应用程序测试的工具,Selenium测试直接运行在浏览器中,就像真正的用户在操作一样.支持的浏览器包括IE.Mozilla Firefox.Mozilla Suite等 ...

  4. python并发编程之进程池,线程池concurrent.futures

    进程池与线程池 在刚开始学多进程或多线程时,我们迫不及待地基于多进程或多线程实现并发的套接字通信,然而这种实现方式的致命缺陷是:服务的开启的进程数或线程数都会随着并发的客户端数目地增多而增多, 这会对 ...

  5. 06-02 Java值传递、数据加密

    值传递: /* 思考题1:看程序写结果,然后分析为什么是这个样子的.并画图讲解.最后总结Java中参数传递规律. Java中的参数传递问题: 基本类型:形式参数的改变对实际参数没有影响.基本类型传递的 ...

  6. Java动态代理总结

    在之前的代码调用阶段,我们用action调用service的方法实现业务即可. 由于之前在service中实现的业务可能不能够满足当先客户的要求,需要我们重新修改service中的方法,但是servi ...

  7. Quarz.net 设置任务并行和任务串行

    如何设置Quarz.net某个任务完成后再继续执行该任务?  Quarz.net 的任务有并行和串行两种: 并行:一个定时任务,当执行时间到了的时候,立刻执行此任务,不管当前这个任务是否在执行中: 串 ...

  8. mysql关于timestamp字段相关内容

    发现5.6和5.7版本的创建表不一致,从5.6导出数据表创建sql文件,然后导入到5.7表会报错,timestamp不能为空 查看的sql_mode mysql5.0以上支持的三种模式 1. ANSI ...

  9. jdk8-stream-并行流的使用

    使用jdk的stream, 可以非常方便的将串行改为并行 1, 判断是否质数 /** * 将一个stream改成简单的并行 */ @Test public void test1() { // 串行 , ...

  10. Iptables之recent模块小结

    Iptables的recent模块用于限制一段时间内的连接数, 是谨防大量请求攻击的必杀绝技! 善加利用该模块可充分保证服务器安全. recent常用参数--name      设定列表名称,即设置跟 ...