数据库连接池php-cp介绍
php-cp(php-connect-pool)是用php扩展写的一个数据库连接池。
我们知道php开发速度快,适合创业快速迭代,但当流量大了之后,php大量的短连接给db层造成多余的消耗,而php处理请求过程中连接会一直持有再加上进程之间不能共享tcp连接会导致撑高mysql的连接,mysql的性能会随着连接数的升高而急速下降,所以很多大公司都强转java,这很大一部分原因是php没有连接池!当然你可以用开源的数据库中间件来缓解这个问题,但是本项目和现有的开源产品有以下几点不同。
一.它不同于市面上其他的开源数据库中间件产品:
1.它不需要单独部署中间件集群,是跑在应用服务器上的代理进程,减少了一层外部依赖,这样使得架构更加简单、清爽、可靠。
2.性能更高,减少了一次网络传输,它通过高效的ipc方式和php进程通信,并且避免了协议解析的消耗。
3.同时支持redis和mysql,不需要部署2套单独的中间件系统。
二.简单原理图:
数据库连接池php-cp介绍
三。 技术特性
1.支持最大最小连接数配置。
2.支持压力小自动回收连接(力度和频率可配置)。
3.支持平滑重启。
4.支持连接用光的排队机制。
5.同时支持mysql和redis。
6.使用简单,框架简单整合后(修改new 方法),现有业务一行代码都不用改即可用上连接池。
7.提供了get_disable_list函数,来获得不可用的宕机ip列表,这样负载均衡也可以做在客户端(配置文件全部的ip和宕机ip做差集,然后再随机即可)。
btw:你也可以用lvs,但是lvs转发在系统架构上引入了依赖,dr模式不能跨网段又限制了扩容,而且后端db出问题只能知道lvs的vip。
8.连接池进程会启动ping进程来监听宕机列表,如果可用会反映到get_disable_list函数的返回值上.
9.做了大量优化,虽然请求经过连接池进程转发,但是基本无qps损耗。
四.使用它
1.把pool.ini文件放到 /etc/ 并按需修改里面的配置。
2.启动代理进程
./pool_server start
支持 "start" "stop" "restart" "reload"命令
3.修改php脚本
$db = new PDO(xxxxx);
修改成 $db = new pdo_connect_pool(xxxx);//dont use persistent
$redis = new Redis();
修改成 $redis = new redis_connect_pool();//dont use pconnect
提示:尽早调用$db/$redis->release() 来释放这个进程占用的连接到池子里面;
五.API
get_disable_list($pdo_config,CP_DEFAULT_PDO_PORT);
get_disable_list($redis_conf,CP_DEFAULT_REDIS_PORT);
- 第一个参数是你的配置文件.
- 如果配置文件变了,不可用列表将会被清空
- 返回失效的数据库ip.
六.压力测试:
1.带有连接池:
php脚本如下:
$obj = new pdo_connect_pool('mysql:host=192.168.20.130;dbname=test1',"admin","admin");
$stmt = $obj->query("show tables");
$data = $stmt->fetchAll();
var_dump($data);
$obj->release();
30s完成的请求数:
数据库连接池php-cp介绍 完成了大概19w次请求
mysql服务器cpu占用:
数据库连接池php-cp介绍mysql服务器消耗52%的cpu
2.短连接压测,不带连接池
php脚本如下:
$obj = new PDO('mysql:host=192.168.20.130;dbname=test1',"admin","admin");
$stmt = $obj->query("show tables");
$data = $stmt->fetchAll();
var_dump($data);
30S完成请求:
数据库连接池php-cp介绍 完成了大概12w次请求
mysql服务器cpu占用:
数据库连接池php-cp介绍 cpu占用大概122%
可见连接池虽然经过请求转发,但是减少了建立和释放tcp的时间,总的QPS有大幅提升,同时对mysql服务器的负载有大幅降低。
以上压测机器为debian,4core机器。
七.安装:
phpize=>./configure=>make install=>echo "extensions=xx/connect_pool.so">php.ini
需要:
PHP 5.3 +(no zts)
linux 2.6+
并且已经安装了pdo和redis扩展
原文地址:http://blog.sina.com.cn/s/blog_9eaa0f400102v9fd.html
数据库连接池php-cp介绍的更多相关文章
- 数据库连接池Druid的介绍,配置分析对比总结
Druid的简介 Druid首先是一个数据库连接池.Druid是目前最好的数据库连接池,在功能.性能.扩展性方面,都超过其他数据库连接池,包括DBCP.C3P0.BoneCP.Proxool.JBos ...
- JBDC—③数据库连接池的介绍、使用和配置
首先要知道数据库连接(Connection对象)的创建和关闭是非常浪费系统资源的,如果是使用常规的数据库连接方式来操作数据库,当用户变多时,每次访问数据库都要创建大量的Connnection对象,使用 ...
- 数据库连接池:Druid
转自: http://www.cnblogs.com/windlaughing/p/3287501.html Java连接数据库方法概述 java.sql提供了一些接口和类,用于支持数据库增删改查等相 ...
- JAVA基础知识之JDBC——JDBC数据库连接池
JDBC数据库连接池 数据库的连接和关闭是很耗费资源的操作,前面介绍的DriverManager方式获取的数据库连接,一个Connection对象就对应了一个物理数据库连接,每次操作都要打开一个连接, ...
- java数据库连接池技术原理(浅析)
在执行数据库SQL语句时,我们先要进行数据连接:而每次创建新的数据库的连接要消耗大量的资源,这样,大家就想出了数据库连接池技术.它的原理是,在运行过程中,同时打开着一定数量的数据库连接,形成数据连接池 ...
- [数据库连接池] Java数据库连接池--DBCP浅析.
前言对于数据库连接池, 想必大家都已经不再陌生, 这里仅仅设计Java中的两个常用数据库连接池: DBCP和C3P0(后续会更新). 一. 为何要使用数据库连接池假设网站一天有很大的访问量,数据库服务 ...
- 使用Java中的动态代理实现数据库连接池
2002 年 12 月 05 日 作者通过使用JAVA中的动态代理实现数据库连接池,使使用者可以以普通的jdbc连接的使用习惯来使用连接池. 数据库连接池在编写应用服务是经常需要用到的模块,太过频繁的 ...
- mysql 线程池 数据库连接池
当客户端请求的数据量比较大的时候,使用线程池可以节约大量的系统资源,使得更多的CPU时间和内存可以高效地利用起来.而数据库连接池的使用则将大大提高程序运行效率,同时,我们可以通过其自身的管理机制来监视 ...
- JDBC 学习笔记(三)—— 数据源(数据库连接池):DBCP数据源、C3P0 数据源以及自定义数据源技术
本文目录: 1.应用程序直接获取连接的缺点(图解) 2.使用数据库连接池优化程序性能(图解) 3.可扩展增强某个类方法的功能的三种方式 4.自定 ...
随机推荐
- java汉字转拼音以及得到首字母通用方法
package oa.common.utils; import net.sourceforge.pinyin4j.PinyinHelper; import net.sourceforge.piny ...
- [liu yanling]测试方法
1.定义 是把所有可能的输入数据,即程序的输入域划分成若干部分(子集),然后从每一个子集中选取少数具有代表性的数据作为测试用例.该方法是一种重要的,常用的黑盒测试用例设计方法. 2.划分等价类 等价类 ...
- selenium WebDriver 获取disabled文本框内容(转)
有这样一个元素:<input name="name" id="id" type="text" disabled="true& ...
- Android 不能勾选 Project Build Target
再勾选完project bulid target,从新返回这个页面,发现还是没有被勾选上. 从新刷新一下项目,原因是project.properties配置文件没有加载上. 下回导入的项目第一件事就是 ...
- codeforce 621C Wet Shark and Flowers
题意:输入个n和质数p,n个区间,每个区间可以等概率的任选一个数,如果选的这个区间和它下个区间选的数的积是p的倍数的话(n的下个是1),就挣2000,问挣的期望 思路:整体的期望可以分成每对之间的期望 ...
- qualcomm platform camera porting
转载自http://www.cnblogs.com/thjfk/p/4086001.html camera基本代码架构 Camera原理:外部光线穿过lens后,经过color filter滤波后照射 ...
- Hadoop框架下MapReduce中的map个数如何控制
控制map个数的核心源码 long minSize = Math.max(getFormatMinSplitSize(), getMinSplitSize(job)); //getFormatMinS ...
- 问题-[致命错误] Project1.dpr(1): Unit not found: 'System.pas' or binary equivalents (DCU,DPU)
问题现象:[致命错误] Project1.dpr(1): Unit not found: 'System.pas' or binary equivalents (DCU,DPU) 问题原因:由于删除D ...
- maven依赖规则
1.就近原则,传递依赖 A-B-C -> A-C 2.先声明原则 A-B-C D-E-C 依赖的规则阻止了jar包冲突
- centos中MySQL,VmTools安装,使用及异常
Linux(CentOS)中常用软件安装,使用及异常--MySQL,VmTools 本文主要是为了记录在工作中遇到的常用软件的安装过程,方便以后遇到相同情形时可以快速的查阅.主要讲述了MySQL, V ...