这里主要用来了解有关DBProxy方面的部署及基本的配置,以及模拟架构

1 DBProxy方面的安装部署

1)基础环境的部署

# yum install -y Percona-Server-devel-.x86_64 Percona-Server-client-.x86_64 Percona-Server-shared-  jemalloc jemalloc-devel libevent \
libevent-devel openssl openssl-devel lua lua-devel bison flex libtool.x86_64 libffi-devel libffi glib2.x86_64 glib2-devel.x86_64 glib2-fam.x86_64 git

2)由于需要使用到mysql_config,故此,需要下载mysql5.7的repos,然后将对应镜像源的5.6开启,5.7禁用,DBProxy只支持5.5 5.6的版本,故此,请勿在5.7上进行

测试

#rpm -ivh https://repo.mysql.com//mysql57-community-release-el7-9.noarch.rpm
#vim /etc/yum.repos.d/mysql-community.repo
[mysql56-community]
name=MySQL 5.6 Community Server
baseurl=http://repo.mysql.com/yum/mysql-5.6-community/el/7/$basearch/
enabled= #这里改成1
gpgcheck=
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-mysql [mysql57-community]
name=MySQL 5.7 Community Server
baseurl=http://repo.mysql.com/yum/mysql-5.7-community/el/7/$basearch/
enabled= #这里改成0,禁用
gpgcheck=
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-mysql

3)部署安装DBProxy

#git clone https://github.com/Meituan-Dianping/DBProxy.git
#cd DBProxy/
#sh autogen.sh
#sh bootstrap.sh
#make && make install
# ll /usr/local/mysql-proxy/
total
drwxr-xr-x root root Mar : bin
drwxr-xr-x root root Mar : lib

2 架构设计

DBProxy可以配置一主多从的结构,也就是架构中必须有一台主库,0或多个从库,主库上可以进行读写操作,从库只能进行读操作,APP应用的流量可以通过DBProxy中设置规则,将流量路由到适合的数据库中,部署图如下

DBProxy 10.11.10.140

Master    10.11.10.141

Slave01  10.11.10.142

Slave02  10.11.10.143

主从配置此处略掉,配置DBProxy

[root@gzxsd ~]# mkdir /usr/local/mysql-proxy/conf
[root@gzxsd ~]# cd /usr/local/mysql-proxy/
[root@gzxsd mysql-proxy]# cp /data/download/DBProxy/script/source.cnf.samples /usr/local/mysql-proxy/conf/source.cnf

#配置conf文件

[root@gzxsd ~]# mkdir /var/log/dbproxy_log

[mysql-proxy]

#带#号的为非必需的配置项目

#管理接口的用户名
admin-username=guest #管理接口的密码
admin-password=guest #dbproxy后端连接的MySQL主库的IP和端口,可设置多项,用逗号分隔
proxy-backend-addresses=10.11.10.141: #dbproxy后端连接的MySQL从库的IP和端口,@后面的数字代表权重,用来作负载均衡,若省略则默认为1,可设置多项,用逗号分隔
proxy-read-only-backend-addresses=10.11.10.142:,10.11.10.143: #用户名与其对应的加密过的MySQL密码,密码使用PREFIX/bin目录下的加密程序encrypt加密,下行的user1和user2为示例,将其替换为你的MySQL的用户名和加密密码! #这个需要执行/data/download/DBProxy/script/encrypt guest
#需要在master上做一次grant all privileges on *.* to dbproxy@'10.11.10.140' identidified by 'xxxx';
pwds=dbproxy:uqmOY9A= #设置dbproxy的运行方式,设为true时为守护进程方式,设为false时为前台方式,一般开发调试时设为false,线上运行时设为true
daemon=true #设置dbproxy的运行方式,设为true时dbproxy会启动两个进程,一个为monitor,一个为worker,monitor在worker意外退出后会自动将其重启,设为false时只有worker,没有monitor,一般开发调试时设为false,线上运行时设为true
keepalive=true #工作线程数,对dbproxy的性能有很大影响,可根据情况适当设置
event-threads= #日志级别,分为message、warning、critical、error、debug五个级别
log-level=message #日志存放的路径
log-path=/var/log/dbproxy_log/ #SQL日志的开关,可设置为OFF、ON、REALTIME,OFF代表不记录SQL日志,ON代表记录SQL日志,REALTIME代表记录SQL日志且实时写入磁盘,默认为OFF
sql-log=ON #SELECT无where条件的限制,分为ON,OFF
select-where-limit = OFF #实例名称,用于同一台机器上多个dbproxy实例间的区分
instance=source #dbproxy监听的工作接口IP和端口
proxy-address=0.0.0.0: #dbproxy监听的管理接口IP和端口
admin-address=0.0.0.0: #分表设置,此例中person为库名,mt为表名,id为分表字段,3为子表数量,可设置多项,以逗号分隔,若不分表则不需要设置该项
#tables = person.mt.id. #默认字符集,设置该项后客户端不再需要执行SET NAMES语句
#charset=utf8 #dbproxy前面挂接的LVS的物理网卡的IP(注意不是虚IP),若有LVS且设置了client-ips则此项必须设置,否则可以不设置
#lvs-ips = 192.168.1.1 max-connections= #长时等待阈值,同步等待时间超过该阈值则认为是长时等待
long-wait-time= #慢查询阈值,查询执行时间超过该阈值则认为是慢查询
long-query-time= #:不统计,:仅统计总体的响应时间,其中包括慢查询,:进行直方图统计;默认为1。
query-response-time-stats= #SQL日志文件最大大小,单位为字节,默认为1G
sql-log-file-size= #保留的最大SQL日志文件个数,默认为0,不保留历史文件,仅保留当前文件
sql-log-file-num= #后台MySQL版本号,默认为5.
mysql-version=5.5 #后台MySQL最大连接数,默认为0,表示不限制
backend-max-thread-running= #后台MySQL连接超过backend-max-thread-running后,每次sleep的时间,单位为ms
thread-running-sleep-delay= #SQL过滤统计缓存的SQL模板数,默认为0
lastest-query-num= #SQL过滤的时间阈值
query-filter-time-threshold= #SQL过滤的频率阈值
query-filter-frequent-threshold= #SQL过滤频率统计时间窗口内的最小执行次数,根据频率和该参数计算时间窗口
access-num-per-time-window = #手动过滤SQL是否生效,默认为OFF
manual-filter-flag=OFF #自动过滤SQL是否生效,默认为OFF
auto-filter-flag=OFF

#启动DBProxy

[root@gzxsd conf]# /usr/local/mysql-proxy/bin/mysql-proxy --defaults-file=/usr/local/mysql-proxy/conf/source.cnf
[root@gzxsd conf]# ss -ant
State Recv-Q Send-Q Local Address:Port Peer Address:Port
LISTEN 0 128 *:3307 *:*
LISTEN 0 128 *:3308 *:*
LISTEN 0 128 *:22 *:*
LISTEN 0 100 127.0.0.1:25 *:*
ESTAB 0 52 10.11.10.140:22 10.11.20.31:49783
LISTEN 0 128 :::22 :::*
LISTEN 0 100 ::1:25 :::*

#连接测试

[root@gzxsd ~]# mysql -uguest -p -h10.11.10. -P3308
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is
Server version: 5.0.-agent-admin Copyright (c) , , Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. [guest@10.11.10.140][(none)]> select * from help;
[root@gzxsd ~]# mysql -udbproxy -p -h10.11.10.140 -P3307
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.5.35-33.0-log MySQL Community Server (GPL) Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. [dbproxy@10.11.10.140][(none)]> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| performance_schema |
+--------------------+
3 rows in set (0.01 sec)

DBProxy 入门到精通系列(二):DBProxy快速入门教程的更多相关文章

  1. DBProxy 入门到精通系列(一):DBProxy概述

    DBProxy概述 DBProxy是支持分库分表,读写分离的中间件,博客内容除了阅读github官方文档外,还会附加上本人个人测试的结果,但了解一个中间件,需要对这个中间件有一个基本的认识,方便控制. ...

  2. redis入门到精通系列(二):redis操作的两个实践案例

    在前面一篇博客中我们已经学完了redis的五种数据类型操作,回顾一下,五种操作类型分别为:字符串类型(string).列表类型(list).散列类型(hash).集合类型(set).有序集合类型(so ...

  3. Selenium 入门到精通系列:二

    Selenium 入门到精通系列 PS:用户登录 例子 #!/usr/bin/env python # -*- coding: utf-8 -*- # @Date : 2019-04-23 16:12 ...

  4. Jenkins pipeline 入门到精通系列文章

    Jenkins2 入门到精通系列文章. Jenkins2 下载与启动jenkins2 插件安装jenkins2 hellopipelinejenkins2 pipeline介绍jenkins2 jav ...

  5. 办公软件Office PPT 2010视频教程从入门到精通系列教程(22课时)

    办公软件Office PPT 2010视频教程从入门到精通系列教程(22课时) 乔布斯的成功离不开美轮美奂的幻灯片效果,一个成功的商务人士.部门经理也少不了各种各样的PPT幻灯片.绿色资源网给你提供了 ...

  6. NHibernate从入门到精通系列

    http://www.cnblogs.com/GoodHelper/archive/2011/02/17/1948744.html NHibernate从入门到精通系列(4)——持久对象的生命周期(上 ...

  7. ElasticSearch实战系列八: Filebeat快速入门和使用---图文详解

    前言 本文主要介绍的是ELK日志系统中的Filebeat快速入门教程. ELK介绍 ELK是三个开源软件的缩写,分别表示:Elasticsearch , Logstash, Kibana , 它们都是 ...

  8. ArcGIS10从入门到精通系列实验图文教程(附配套实验数据持续更新)

    @ 目录 1. 专栏简介 2. 专栏地址 3. 专栏目录 1. 专栏简介 本教程<ArcGIS从入门到精通系列实验教程>内容包括:ArcGIS平台简介.ArcGIS应用基础.空间数据的采集 ...

  9. redis入门到精通系列(四):Jedis--使用java操作redis详解

    (一)前言 如果不把数据库和后端语言联系起来,就起不到数据库应该要起到的作用.Java语言通过JDBC操作mysql,用Jedis操作redis.当然了,java操作redis的方式不止jedis一种 ...

随机推荐

  1. 读书笔记 effective c++ Item 6 如果你不想使用编译器自动生成的函数,你需要明确拒绝

    问题描述-阻止对象的拷贝 现实生活中的房产中介卖房子,一个服务于这个中介的软件系统很自然的会有一个表示要被销售的房屋的类: class HomeForSale { ... }; 每个房产中介会立刻指出 ...

  2. matlab中小技巧

    关于matlab中可能遇到的小知识点 一.字符串的比较 不能使用“==”,需要使用函数strcmp() %matlab中字符串的比较 %字符串比较要用strcmp.相同则返回1,不相同则返回0. cl ...

  3. Azure机器学习入门(三)创建Azure机器学习实验

    在此动手实践中,我们将在Azure机器学习Studio中一步步地开发预测分析模型,首先我们从UCI机器学习库的链接下载普查收入数据集的样本并开始动手实践: http://archive.ics.uci ...

  4. [UWP]附加属性1:概述

    1. 什么是附加属性(attached property ) 附加属性依赖属性的一种特殊形式,常见的Grid.Row,Canvas.Left都是附加属性. /// <summary> // ...

  5. jQuery选择器课堂随笔

      $(function(){   //并集选择器   /*   $("h2,ul").css("background","pink");* ...

  6. &与&& C语言

    &是一个位运算符,就是将两个二进制的数逐位相与,就是都是1才是1,只要有一个为0则为0,结果是相与之后的结果.&&是一个逻辑运算符,就是判断两个表达式的真假性,只有两个表达式同 ...

  7. iOS 快速集成启动页广告

    前言 由于项目中要用到启动页广告,所以做了简单的研究,同时借鉴网易新闻和蘑菇街的交互写了一个简单的demo,现在写出来供大家参考,可能由于个人局限会有一些bug和不完善的地方,也希望大家能够友善提醒和 ...

  8. Python脚本收集腾讯云CDN日志,并入ELK日志分析

    负责搭建公司日志分析,一直想把CDN日志也放入到日志分析,前些日志终于达成所愿,现在贴出具体做法: 1.收集日志 腾讯云CDN日志一般一小时刷新一次,也就是说当前只能下载一小时之前的日志数据,但据本人 ...

  9. ABP Zero 多租户管理

    ABPZero - 多租户管理 启用多租户 ASP.NET Boilerplate和module-zero可以运行多租户或单租户模式.多租户默认为禁用.我们可以在我们的模块PreInitialize方 ...

  10. Java源码ExtJS 5 SpringMVC 4Hibernate 4通用后台管理开发框架

    需要源码,请加QQ:858-048-581 一.特色1.采用Spring MVC的静态加载缓存功能,在首页将Javascript文件.CSS文件和图片等静态资源文件加载进来放进内存,极大提高ExtJS ...