PHP CodeIgniter框架实现读写分离
一、目标
当前服务器只做了主从,未配置读写分离,读写分离的功能就只有交给程序来实现,本文主要谈谈Codeigniter怎么实现读写分离,并且需要满足以下两点:
1、读写分离对开发应该透明。
网上有方案通过手动load多个DB来实现读写分离,这样的分离跟业务关联太紧,增加了开发难度也不利于维护,我们要做的是默认读重库,写则写主库,读写分离对开发者透明
2、配置简单。
保留现有的配置方式,通过增加一个数组来配置读写分离,不影响原有使用方式。
二、实现思路
- 1、要实现读写分离最简单的思路就是在最终执行查询的地方根据查询语句判断是插入主库还是读取从库,所以需要找到该函数。
- 2、应该只连接一次数据库,下次操作该链接应当可复用。也就是连一次重库后所有的读操作都可用,不需再次连接,主库同理。所以我们可以将链接放在CI超级对象中。
- 3、主从的判断是根据最终执行的SQL语句来判断的,所以数据库配置中的自动链接autoinit参数就不用设置为true了,如果默认连接了而又不需要操作该库就浪费资源了。
- 4、模型中可以使用$this->db来直接操作查询,不需要其他调整。
- 5、不直接修改system下的文件
三、实现读写分离
CI的DB类固定为读取system下的文件,我们可以通过适当的重写来实现。首先是Loader.php,其中的database方法用来加载数据库对象,固定引用了system/database/DB.php文件,我们判断下是否存在自定义DB.php文件,存在则引入。
3.1 重写Loader.php
- public function database($params = '', $return = FALSE, $active_record = NULL)
- {
- $CI =& get_instance();
- if (class_exists('CI_DB') AND $return == FALSE AND $active_record == NULL AND isset($CI->db) AND is_object($CI->db)) {
- return FALSE;
- }
- if(file_exists(APPPATH.'core/database/DB.php')) {
- require_once(APPPATH.'core/database/DB.php');
- } else {
- require_once(BASEPATH.'database/DB.php');
- }
- if ($return === TRUE) {
- return DB($params, $active_record);
- }
- $CI->db = '';
- $CI->db =& DB($params, $active_record);
- }
- /* End of file MY_Loader.php */
- /* Location: ./application/core/MY_Loader.php */
接着我们在application/core下创建database/DB.php,该文件只有一个DB方法,用来读取配置文件并进行初始化工作。同样有两处地方需要重写下:
3.2 重写DB.php
- //DB_driver.php为所有驱动方式的父类,最终执行查询的方法在该文件中
- //第一处修改为判断自定义的DB_driver.php是否存在,存在则引入
- if(file_exists(APPPATH.'core/database/DB_driver.php')) {
- require_once(APPPATH.'core/database/DB_driver.php');
- } else {
- require_once(BASEPATH.'database/DB_driver.php');
- }
- //第二处 $params['dbdriver'].'_driver.php' 该文件可不调整,实际未修改该文件,为了方便调试也加了
- //mysql驱动对应system/database/drivers/mysql/mysql_driver.php,mysql的最后执行方法在这里,
- //包括数据库打开和关闭、查询等,可以该文件增加相应日志查看读写分离是否有效
- if(file_exists(APPPATH.'core/database/drivers/'.$params['dbdriver'].'/'.$params['dbdriver'].'_driver.php')) {
- require_once(APPPATH.'core/database/drivers/'.$params['dbdriver'].'/'.$params['dbdriver'].'_driver.php');
- } else {
- require_once(BASEPATH.'database/drivers/'.$params['dbdriver'].'/'.$params['dbdriver'].'_driver.php');
- }
- //将当前group name赋值给param,方便判断
- $params['group_name'] = $active_group;
- /* End of file DB.php */
- /* Location: ./application/core/database/DB.php */
整个DB.php调整的也基本上是文件的引入,group name的引入是为了方便后面的判断, 不引入则可以通过主机、数据库名称这些来配置。如果想强制关闭autoint,可以在DB.php中删掉下面这段:
- if ($DB->autoinit == TRUE)
- {
- $DB->initialize();
- }
接下来就是最核心的地方。根据查询语句实现读写分离。DB_driver.php中的simple_query方法可以理解为最后执行SQL语句的方法,我们可以在这里进行数据库链接的判断。
3.3 重写DB_driver.php
- //增加属性,表示当前组
- var $active_group;
- //增加属性,使用强制使用主库
- var $db_force_master;
- //该方法为执行查询的必经之地,我们可以在这里根据类型判断使用哪个链接。
- function simple_query($sql)
- {
- //load_db_proxy_setting方法这里写在helper中,也可以直接写在该类中,写在helper中则需要在自动加载中加载该helper
- //该方法的作用是根据当前链接group name 和sql读写类型,以及是否强制使用主库判断使用哪个链接。使用主库 OR 重库?
- //主重库的负载均衡,单点故障都可以在这里考虑。也就是根据3个参数返回一个可用的配置数组。
- $proxy_setting = load_db_proxy_setting($this->group_name, $this->is_write_type($sql), $this->db_force_master);
- if(is_array($proxy_setting) && ! empty($proxy_setting)) {
- $proxy_setting_key = key($proxy_setting);
- $this->group_name = $proxy_setting_key;
- //将当前配置重新赋值给类的属性,如果database.php配置的是DSN字符串,则需要在load_db_proxy_setting中做处理
- foreach($proxy_setting[$proxy_setting_key] as $key => $val) {
- $this->$key = $val;
- }
- //定义链接ID为conn_前缀
- $proxy_conn_id = 'conn_'.$proxy_setting_key;
- $CI = & get_instance();
- //赋值给CI超级对象或者直接从CI超级对象中读取
- if(isset($CI->$proxy_conn_id) && is_resource($CI->$proxy_conn_id)) {
- $this->conn_id = $CI->$proxy_conn_id;
- } else {
- $this->conn_id = false;
- $this->initialize();
- $CI->$proxy_conn_id = $this->conn_id;
- }
- //强制只一次有效,下次查询失效,防止一直强制主库
- $this->reset_force_master();
- }
- if ( ! $this->conn_id)
- {
- $this->initialize();
- }
- return $this->_execute($sql);
- }
- //某些情况会强制使用主库,先执行该方法即可
- public function force_master()
- {
- $this->db_force_master = TRUE;
- }
- public function reset_force_master()
- {
- $this->db_force_master = FALSE;
- }
- /* End of file DB_driver.php */
- /* Location: ./application/core/database/DB_driver.php */
到这里读写分离即基本实现了,但做事情得善始善终,链接的数据库对象需要关闭,可以在公用控制器中执行完毕后关掉连接。DB_driver.php中也有close方法,可以考虑下是否可以在该方法中关闭?这里认为是不行的。
3.4 关闭数据库链接
- class MY_Controller extends CI_Controller
- {
- public function __construct()
- {
- parent::__construct();
- $this->load->service('common/helper_service', NULL, 'helper');
- //下面这段为关闭CI超级对象中的数据库对象和数据库链接,db的对象Codeigniter.php中会关闭
- register_shutdown_function(function(){
- foreach(get_object_vars($this) as $key => $val) {
- if(substr($key, 0, 3) == 'db_' && is_object($this->{$key}) && method_exists($this->{$key}, 'close')) {
- $this->{$key}->close();
- }
- if(substr($key, 0, 5) == 'conn_' && is_resource($this->{$key})) {
- $this->db->_close($val);
- unset($this->{$key});
- }
- }
- });
- }
- }
- /* End of file MY_Controller.php */
- /* Location: ./application/core/MY_Controller.php */
模型中的使用,为了使每个model中都可使用$this->db,以及不多次连接数据库,这里也是将链接放在CI超级对象中。这里就算不读写分离也可以这么处理,可以很方便的连接多个DB,具体的model要使用其他库只需要在构造函数中传入group name即可。
3.5 模型调整
- public function __construct($group_name = '')
- {
- parent::__construct();
- $this->initDb($group_name);
- }
- private function initDb($group_name = '')
- {
- $db_conn_name = $this->getDbName($group_name);
- $CI = & get_instance();
- if(isset($CI->{$db_conn_name}) && is_object($CI->{$db_conn_name})) {
- $this->db = $CI->{$db_conn_name};
- } else {
- $CI->{$db_conn_name} = $this->db = $this->load->database($group_name, TRUE);
- }
- }
- private function getDbName($group_name = '')
- {
- if($group_name == '') {
- $db_conn_name = 'db';
- } else {
- $db_conn_name = 'db_'.$group_name;
- }
- return $db_conn_name;
- }
- /* End of file MY_Model.php */
- /* Location: ./application/core/MY_Model.php */
最后的数据库配置方式,只需要在原有的基础上配置一个数组即可。是使用双主还是一主多从就看这里的配置方式。最开始想到直接在原配置上加键名来处理,但主与从的对应关系还是没有这样子明了,这里的定义方式决定了load_db_proxy_setting的实现方式。
3.6 database.php配置
- $_master_slave_relation = array(
- 'default_master' => array('default_slave1', 'default_slave2', 'default_slave3'),
- );
- /* End of file database.php */
- /* Location: ./application/config/database.php */
最开始的数据库链接并未放到CI超级对象中,发现load多个模型时每次都会打开链接,所以完成读写分离之后一定要测试,可以在数据库链接打开和关闭的地方查看是否按预期执行(方法对应application/core/database/drivers/mysql/mysql_driver.php中的db_connect和_close)。整个调整过程最重要的两点就是simple_query方法以及构造函数中关闭数据库链接。模型中的调整是为了更方便的链接多个库,未实现读写分离时也是这么调整的,常用的方法独立成一个文件,MY_Model去继承。
实现MYSQL读写分离的中间件挺多,在没有用到这些时可以通过程序上的控制来实现读写分离。当然这里只是实现了读写分离,可以强制使用主库。如果想要更好的分配方式,可以好好想想load_db_proxy_setting中的分配方式。
文章转自:http://itopic.org/codeigniter-mysql-proxy.html
关注微信公众号:lovephp
PHP CodeIgniter框架实现读写分离的更多相关文章
- Phalcon框架数据库读写分离的实现方法
Phalcon框架和Yaf类似,是一款用C实现的拓展级别的框架,不过其功能实现更加丰富,设计思路基于依赖注入.容器等方式,更符合现代框架思想.本文主要针对Phalcon框架数据库层的读写分离进行说明, ...
- AntData.ORM框架 之 读写分离
环境准备 准备2台机器配置好Master Slaver模式 我是用vmware 2台虚拟机配置的.有需要请联系. Master:192.168.11.130 Slaver:192.168.11.133 ...
- Laravel 数据库读写分离
config/database.php ... 'mysql' => [ 'driver' => 'mysql', 'host' => env('DB_HOST', 'localho ...
- MHA + Maxscale 数据库的高可用和读写分离
MySQL 常见发行版本 MySQL 标准化.自动化部署 深入浅出MySQL备份与恢复 深入理解MySQL主从复制 MySQL构架设计与容量规划 MHA Maxscale MySQL 常见发行版本 M ...
- Akka-CQRS(0)- 基于akka-cluster的读写分离框架,构建gRPC移动应用后端架构
上一篇我们讨论了akka-cluster的分片(sharding)技术.在提供的例子中感觉到akka这样的分布式系统工具特别适合支持大量的带有内置状态的,相对独立完整的程序在集群节点上分布运算.这里重 ...
- Phalcon框架如何实现读写分离
Phalcon框架如何实现读写分离 假设你已经在DI容器里注册了俩 db services,如下: <?php // 主库 $di->setShared('dbWrite', functi ...
- SSM/SSH框架的MySQL 读写分离实现的一种简单方法
简介 MySQL已经是使用最为广泛的一种数据库,往往实际使用过程中,为实现高可用及高性能,项目会采用主丛复制的方式实现读写分离.MySQL本身支持复制,通过简单的配置即可实现一主多从的配置,具体实现可 ...
- Codeigniter开发技巧:连接多个数据库(可实现DB读写分离)
在开发中,我们有时候会遇到在同一程序中链接多个数据库的需求,这对Codeigniter框架来说是很简单的,我们只需要在 database.php文件中配置少许参数即可. 默认情况下,CI配置的是链接一 ...
- J2EE 项目读写分离
先回答下 1.为啥要读写分离? 大家都知道最初开始,一个项目对应一个数据库,基本是一对一的,但是由于后来用户及数据还有访问的急剧增多, 系统在数据的读写上出现了瓶颈,为了让提高效率,想读和写不相互影响 ...
随机推荐
- 三、gridView增删改查
1. 新增或修改一条数据 1.1 添加 新增或修改按钮 <div style="width: 120px; float: right; padding-top: 3px"&g ...
- 移动端纯CSS3制作圆形进度条所遇到的问题
近日在开发的页面中,需要制作一个动态的圆形进度条,首先想到的是利用两个矩形,宽等于直径的一半,高等于直径,两个矩形利用浮动贴在一起,设置overflow:hidden属性,作为盒子,内部有一个与其宽高 ...
- 对DOM操作的一些总结
一.DOM节点 分为三大类: 1.元素节点 :<html>.<body>.<p>等标签 2.文本节点 :标签内的文本.例如<p>这就是文本节点</ ...
- Android自定义控件 -- 带边框的TextView
使用xml实现边框 原来使用带边框的TextView时一般都是用XML定义来完成,在drawable目录中定义如下所示的xml文件: <?xml version="1.0" ...
- SpringBoot的运行原理
SpringBoot关于自动配置的源码在spring-boot-autoconfigure-xxxxx.jar中 <源码解析> 查看当前项目中已启用的和未启用的自动配置的报告的三种方法: ...
- Struts2_Struts标签
1.property <s:property value="username" /> 一般访问,访问ValueStack中的第一个username <s:prop ...
- lrzsz的使用
可以方便的在本地PC机和远程服务器之间传输文件. 1.下载 直接在centos上执行命令yum -y install lrzsz 2.上传文件 rz // 上传文件,执行命令rz,会跳出文件选择窗口, ...
- 2018.9.8pat秋季甲级考试
第一次参加pat考试,结果很惨,只做了中间两道题,还有一个测试点错误,所以最终只得了不到50分.题目是甲级练习题的1148-1151. 考试时有些紧张,第一题第二题开始测试样例都运行不正确,但是调试程 ...
- BestCoder Round #91 1001 Lotus and Characters
题目链接:http://acm.hdu.edu.cn/showproblem.php?pid=6011 题意: Lotus有nn种字母,给出每种字母的价值以及每种字母的个数限制,她想构造一个任意长度的 ...
- 导航栏上的item的位置设置
/** leftItem */ UIButton *leftbtn = [[UIButton alloc]initWithFrame:CGRectMake(, , , )]; [leftbtn set ...