读写分离(AMOEBA)
博主本人平和谦逊,热爱学习,读者阅读过程中发现错误的地方,请帮忙指出,感激不尽
1. 环境准备:
1.1新增一台虚拟机
amoeba:192.168.247.80
架构(使用图片源自其它博文):
1.2下载地址(amoeba)
https://liquidtelecom.dl.sourceforge.net/project/amoeba/Amoeba%20for%20mysql/3.x/amoeba-mysql-3.0.5-RC-distribution.zip
1.3配置jdk
[root@amoeba~]# mkdir /usr/local/java -p [root@amoeba~]# tar -zxvf jdk-8u202-linux-x64.tar.gz -C /usr/local/java/ 设置环境变量: [root@amoeba~]# vim /etc/profile 在最后输入: export JAVA_HOME=/usr/local/java/jdk1..0_202 export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib export PATH=$JAVA_HOME/bin:$PATH 生效: [root@amoeba~]# source /etc/profile 验证: [root@amoeba~]# java -version java version "1.8.0_202" Java(TM) SE Runtime Environment (build 1.8.0_202-b08) Java HotSpot(TM) -Bit Server VM (build 25.202-b08, mixed mode) [root@amoeba~]#
1.4关闭SELinux
1.5设置时间同步
timedatectl set-timezone Asia/Shanghai date
1.6amoeba简介(参考自其它博文)
Mysql的读写分离可以使用MySQL Proxy,也可以使用Amoeba。Amoeba(变形虫)项目是一个类似MySQL Proxy的分布式数据库中间代理层软件 Amoeba专注分布式数据库proxy开发。Amoeba身处在Client、DB Server(s)之间,对客户端透明,具有负载均衡、高可用性、sql过滤、读写分离、可路由相关的query到目标数据库、可并发请求多台数据库合并结果。 Amoeba主要解决: )降低 数据切分带来的复杂多数据库结构 )提供切分规则并降低 数据切分规则 给应用带来的影响 )降低db 与客户端的连接数 )读写分离 为什么要用Amoeba 目前要实现mysql的主从读写分离,主要有以下几种方案: )通过程序实现,网上很多现成的代码,比较复杂,如果添加从服务器要更改多台服务器的代码。 )通过mysql-proxy来实现,由于mysql-proxy的主从读写分离是通过lua脚本来实现,目前lua的脚本的开发跟不上节奏,而写没有完美的现成的脚本,因此导致用于生产环境的话风险比较大,据网上很多人说mysql-proxy的性能不高。 )自己开发接口实现,这种方案门槛高,开发成本高,不是一般的小公司能承担得起。 )利用阿里巴巴的开源项目Amoeba来实现,具有负载均衡、高可用性、sql过滤、读写分离、可路由相关的query到目标数据库,并且安装配置非常简单。经测试,性能相比mysql-proxy较高。 amoeba不足之处: )暂时不支持存储过程 )不适合从amoeba导数据的场景或者对大数据量查询的query并不合适(比如一次请求返回10w以上甚至更多数据的场合) )暂时不支持分库分表,amoeba只做到分数据库实例,每个被切分的节点需要保持库表结构一致: )amoeba目前无人维护,这是最大的安全隐患 )还不支持事务
1.7amoeba现状
目前并没有大型企业使用,我写博文的目的是为了记录安装过程,深入一些可以了解其思想和架构,但是本文并无深入研究
1. 安装amoeba
2.1解压安装
[root@amoeba amoeba]# pwd /opt/amoeba [root@amoeba amoeba]# unzip -o amoeba-mysql--RC-distribution.zip [root@amoeba amoeba]# mkdir /usr/local/amoeba -p [root@amoeba amoeba]# mv amoeba-mysql--RC /usr/local/amoeba/ .2设置配置 [root@amoeba amoeba]# cd /usr/local/amoeba/amoeba-mysql--RC/conf [root@amoeba conf]# vim dbServers.xml 修改如下(提前在数据库主库上创建amoebadb):
[root@amoeba conf]# vim amoeba.xml
修改如下:
[root@amoeba conf]# cd /usr/local/amoeba/amoeba-mysql-3.0.5-RC
[root@amoeba amoeba-mysql-3.0.5-RC]# vim jvm.properties
修改如下(java8可以将其注释):
JVM_OPTIONS="-server -Xms1024m -Xmx1024m -Xss256k -XX:PermSize=16m -XX:MaxPermSize=96m"
如果启动报错,则可以将这行配置注释掉,因为java8可以不用我们自己配置这些参数
3.启动服务
3.1启动
.1启动 [root@amoeba amoeba-mysql--RC]# ./bin/launcher [root@amoeba ~]# /usr/local/amoeba/amoeba-mysql--RC/bin/launcher Java HotSpot(TM) -Bit Server VM warning: ignoring option PermSize=16m; support was removed in 8.0 Java HotSpot(TM) -Bit Server VM warning: ignoring option MaxPermSize=96m; support was removed in 8.0 -- :: [INFO] Project Name=Amoeba-MySQL, PID= , starting... log4j:WARN log4j config load completed -RC/conf/log4j.xml -- ::, INFO context.MysqlRuntimeContext - Amoeba -mysql-amoeba-proxy--BETA log4j:WARN ip access config load completed -RC/conf/access_list.conf -- ::, INFO net.ServerableConnectionManager - Server listening on .
3.2不挂断启动
[root@amoeba ~]# nohup /usr/local/amoeba/amoeba-mysql--RC/bin/launcher & >>/usr/local/amoeba/amoeba-mysql--RC/logs/console.log >&
3.3设置防火墙
[root@amoeba ~]# firewall-cmd --permanent --add-port=/tcp [root@amoeba ~]# firewall-cmd --permanent --add-port=/udp [root@amoeba ~]# firewall-cmd --reload
4.测试验证
4.1连接验证
mysql -uroot -p123456 -h mysql> show databases; mysql> select version(); ERROR (): poolName=slaves, no valid pools 报错解决方案: dbServers.xml中的用户,需要在主从机上分配权限。同时注意该文件中的 <property name="schema">test</property> test数据库肯定是要存在的。 mysql> GRANT ALL PRIVILEGES ON *.* TO ' WITH GRANT OPTION; mysql> flush privileges; 关闭主库,则系统无法进行写操作,关闭从库,则系统无法进行读操作,表示读写分离验证完毕 第一次查询显示slave1库,第二次查询显示slave2库,表示轮询配置验证完成 轮询配置验证具体如下:
在主库上面的amoebadb上建表test01(247.53):
mysql> use amoebadb;
mysql> create table test01(id int(10));
在slave1上insert数据(247.54):
mysql> use amoebadb;
mysql> insert into test01 values(9587); (在slave1上手动插入一条数据)
返回amoeba上查询test01: mysql> select * from test; (第一次查询得到数据,也就是slave1上面的数据) +------+ | id | +------+ | | +------+ row in set (0.00 sec) mysql> select * from test01; Empty set (0.00 sec) (查询不到数据,也就是查询的是slave2上面的表)
转载需注明出处
读写分离(AMOEBA)的更多相关文章
- 数据库读写分离Amoeba
1.理解读写分离的原理 Amoeba(变形虫)项目,该开源框架于2008发布一款Amoeba for mysql软件,该软件致力于mysql的分布式数据库前端代理层,主要的作用是应用服务访问mysql ...
- Mysql数据库读写分离Amoeba
1.理解读写分离的原理 随着一个网站的业务不断扩展,数据不断增加,数据库的压力也会越来越大,对数据库或者SQL的基本优化可能达不到最终的效果,我们可以采用读写分离的策略来改变现状.读写分离现在被大量应 ...
- 数据库的读写分离(Amoeba)
目录 Amoeba Amoeba读写分离的配置 Amoeba Amoeba(变形虫) 项目,该开源框架于2008年开始发布一款 Amoeba for Mysql软件. 这个软件基于Java致力于MyS ...
- MySQL搭建Amoeba_读写分离
一.背景知识 Amoeba(变形虫)项目,专注 分布式数据库 proxy 开发.座落与Client.DB Server(s)之间.对客户端透明.具有负载均衡.高可用性.sql过滤.读写分离.可路由相关 ...
- MySQL的读写分离的几种选择
MySQL的读写分离的几种选择 MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践 原址如下: http://heylinux.com/archives/1004. ...
- LAMP企业架构读写分离
1.1 LAMP企业架构读写分离 LAMP+Discuz+Redis缓解了MYSQL的部分压力,但是如果访问量非常大,Redis缓存中第一次没有缓存数据,会导致MYSQL数据库压力增大,此时可以基于 ...
- 30.Mysql主从复制、读写分离
Mysql主从复制.读写分离 目录 Mysql主从复制.读写分离 读写分离 读写分离概述 为什么要读写分离 什么时候要读写分离 主从复制与读写分离 mysql支持的复制类型 主从复制的工作过程 初始环 ...
- MySQL+Amoeba实现数据库主从复制和读写分离
MySQL读写分离是在主从复制的基础上进一步通过在master上执行写操作,在slave上执行读操作来实现的.通过主从复制,master上的数据改动能够同步到slave上,从而保持了数据的一致性.实现 ...
- 使用Amoeba for mysql实现mysql读写分离
Amoeba主要在应用层访问MySQL的时候充当query 路由功能,专注 分布式数据库 proxy 开发.座落与Client.DB Server(s)之间.对客户端透明.具有负载均衡.高可用性.Qu ...
- Amoeba for MySQL读写分离配置
一. 安装和运行Amoeba 1. Amoeba for MySQL 架构: 2. 验证Java的安装Amoeba框架是基于Java SE1.5开发的,建议使用Java SE1.5以上的版本 ...
随机推荐
- POJ 3659 再谈树形DP
Cell Phone Network Time Limit: 1000MS Memory Limit: 65536K Total Submissions: 5325 Accepted: 188 ...
- Bugku 逆向
1.入门逆向 下载解压,在文件夹中打开命令行窗口执行一下:baby.exe 发现输出了一串字符,在将其放到IDA中然后是这样: 发现上面有一串输出和我们命令行窗口中的一样,但是下面为什么又多了一大溜东 ...
- maxima安装&使用
环境: mint 19 或者 > ubuntu 18 源代码安装的好处, 可以使用最新版. mint 19.1 下面, 利用apt 直接安装的maxima版本太老,不支持 draw 函数. lo ...
- 神经网络 参数计算--直接解析CKPT文件读取
1.tensorflow的模型文件ckpt参数获取 import tensoflow as tf from tensorflow.python import pywrap_tensorflow mod ...
- JavaWeb之Servlet入门(二)
1. 准备 在JavaWeb之Servlet入门(一)中,我们完成了第一个Servlet程序,完成了从URL到后台控制器的中转过程,接下来我们延续JavaWeb之Servlet入门(一)学习下如何传参 ...
- DFS判断连通图
因为是连通图,所以从任意一点出发,一定可以通过一遍深度优先遍历就能走过所有的点和边,就可以利用这个性质来很容易的通过DFS判断图是否为连通图 下面是具体算法:
- zabbix使用短信猫实现报警
因为公司运维的对象是政府单位,所以在实际的监控过程中无法连接到外网,所以最后报警选择的媒介是短信猫,下边就是具体的实施过程. 一.面临的问题 因为手头上的设备是串口的短信猫,但是zabbix serv ...
- Windows下将Python源代码.py文件封装成exe可执行文件方法
安装pyinstaller cmd中使用pip安装 pip install pyinstaller 同时会自动安装pywin32(pip真慢50M这里就走20KB),可以进行切换为国内源进行提速. 就 ...
- 吴裕雄--天生自然ShellX学习笔记:Shell 流程控制
和Java.PHP等语言不一样,sh的流程控制不可为空,如(以下为PHP流程控制写法): <?php if (isset($_GET["q"])) { search(q); ...
- ZJNU 2204 - dzj的数学作业
我猜这个数列可以直接从大到小凑…… 推出帕多瓦数列每一项,从大到小循环 遇到小于等于x的项就减掉这一项 全部循环完毕后判断x是否为0即可 #include<stdio.h> typedef ...