数据库连接池php-cp介绍
php-cp(php-connect-pool)是用php扩展写的一个数据库连接池。
我们知道php开发速度快,适合创业快速迭代,但当流量大了之后,php大量的短连接给db层造成多余的消耗,而php处理请求过程中连接会一直持有再加上进程之间不能共享tcp连接会导致撑高mysql的连接,mysql的性能会随着连接数的升高而急速下降,所以很多大公司都强转java,这很大一部分原因是php没有连接池!当然你可以用开源的数据库中间件来缓解这个问题,但是本项目和现有的开源产品有以下几点不同。
一.它不同于市面上其他的开源数据库中间件产品:
1.它不需要单独部署中间件集群,是跑在应用服务器上的代理进程,减少了一层外部依赖,这样使得架构更加简单、清爽、可靠。
2.性能更高,减少了一次网络传输,它通过高效的ipc方式和php进程通信,并且避免了协议解析的消耗。
3.同时支持redis和mysql,不需要部署2套单独的中间件系统。
二.简单原理图:
数据库连接池php-cp介绍
三。 技术特性
1.支持最大最小连接数配置。
2.支持压力小自动回收连接(力度和频率可配置)。
3.支持平滑重启。
4.支持连接用光的排队机制。
5.同时支持mysql和redis。
6.使用简单,框架简单整合后(修改new 方法),现有业务一行代码都不用改即可用上连接池。
7.提供了get_disable_list函数,来获得不可用的宕机ip列表,这样负载均衡也可以做在客户端(配置文件全部的ip和宕机ip做差集,然后再随机即可)。
btw:你也可以用lvs,但是lvs转发在系统架构上引入了依赖,dr模式不能跨网段又限制了扩容,而且后端db出问题只能知道lvs的vip。
8.连接池进程会启动ping进程来监听宕机列表,如果可用会反映到get_disable_list函数的返回值上.
9.做了大量优化,虽然请求经过连接池进程转发,但是基本无qps损耗。
四.使用它
1.把pool.ini文件放到 /etc/ 并按需修改里面的配置。
2.启动代理进程
./pool_server start
支持 "start" "stop" "restart" "reload"命令
3.修改php脚本
$db = new PDO(xxxxx);
修改成 $db = new pdo_connect_pool(xxxx);//dont use persistent
$redis = new Redis();
修改成 $redis = new redis_connect_pool();//dont use pconnect
提示:尽早调用$db/$redis->release() 来释放这个进程占用的连接到池子里面;
五.API
get_disable_list($pdo_config,CP_DEFAULT_PDO_PORT);
get_disable_list($redis_conf,CP_DEFAULT_REDIS_PORT);
- 第一个参数是你的配置文件.
- 如果配置文件变了,不可用列表将会被清空
- 返回失效的数据库ip.
六.压力测试:
1.带有连接池:
php脚本如下:
$obj = new pdo_connect_pool('mysql:host=192.168.20.130;dbname=test1',"admin","admin");
$stmt = $obj->query("show tables");
$data = $stmt->fetchAll();
var_dump($data);
$obj->release();
30s完成的请求数:
数据库连接池php-cp介绍 完成了大概19w次请求
mysql服务器cpu占用:
数据库连接池php-cp介绍mysql服务器消耗52%的cpu
2.短连接压测,不带连接池
php脚本如下:
$obj = new PDO('mysql:host=192.168.20.130;dbname=test1',"admin","admin");
$stmt = $obj->query("show tables");
$data = $stmt->fetchAll();
var_dump($data);
30S完成请求:
数据库连接池php-cp介绍 完成了大概12w次请求
mysql服务器cpu占用:
数据库连接池php-cp介绍 cpu占用大概122%
可见连接池虽然经过请求转发,但是减少了建立和释放tcp的时间,总的QPS有大幅提升,同时对mysql服务器的负载有大幅降低。
以上压测机器为debian,4core机器。
七.安装:
phpize=>./configure=>make install=>echo "extensions=xx/connect_pool.so">php.ini
需要:
PHP 5.3 +(no zts)
linux 2.6+
并且已经安装了pdo和redis扩展
原文地址:http://blog.sina.com.cn/s/blog_9eaa0f400102v9fd.html
数据库连接池php-cp介绍的更多相关文章
- 数据库连接池Druid的介绍,配置分析对比总结
Druid的简介 Druid首先是一个数据库连接池.Druid是目前最好的数据库连接池,在功能.性能.扩展性方面,都超过其他数据库连接池,包括DBCP.C3P0.BoneCP.Proxool.JBos ...
- JBDC—③数据库连接池的介绍、使用和配置
首先要知道数据库连接(Connection对象)的创建和关闭是非常浪费系统资源的,如果是使用常规的数据库连接方式来操作数据库,当用户变多时,每次访问数据库都要创建大量的Connnection对象,使用 ...
- 数据库连接池:Druid
转自: http://www.cnblogs.com/windlaughing/p/3287501.html Java连接数据库方法概述 java.sql提供了一些接口和类,用于支持数据库增删改查等相 ...
- JAVA基础知识之JDBC——JDBC数据库连接池
JDBC数据库连接池 数据库的连接和关闭是很耗费资源的操作,前面介绍的DriverManager方式获取的数据库连接,一个Connection对象就对应了一个物理数据库连接,每次操作都要打开一个连接, ...
- java数据库连接池技术原理(浅析)
在执行数据库SQL语句时,我们先要进行数据连接:而每次创建新的数据库的连接要消耗大量的资源,这样,大家就想出了数据库连接池技术.它的原理是,在运行过程中,同时打开着一定数量的数据库连接,形成数据连接池 ...
- [数据库连接池] Java数据库连接池--DBCP浅析.
前言对于数据库连接池, 想必大家都已经不再陌生, 这里仅仅设计Java中的两个常用数据库连接池: DBCP和C3P0(后续会更新). 一. 为何要使用数据库连接池假设网站一天有很大的访问量,数据库服务 ...
- 使用Java中的动态代理实现数据库连接池
2002 年 12 月 05 日 作者通过使用JAVA中的动态代理实现数据库连接池,使使用者可以以普通的jdbc连接的使用习惯来使用连接池. 数据库连接池在编写应用服务是经常需要用到的模块,太过频繁的 ...
- mysql 线程池 数据库连接池
当客户端请求的数据量比较大的时候,使用线程池可以节约大量的系统资源,使得更多的CPU时间和内存可以高效地利用起来.而数据库连接池的使用则将大大提高程序运行效率,同时,我们可以通过其自身的管理机制来监视 ...
- JDBC 学习笔记(三)—— 数据源(数据库连接池):DBCP数据源、C3P0 数据源以及自定义数据源技术
本文目录: 1.应用程序直接获取连接的缺点(图解) 2.使用数据库连接池优化程序性能(图解) 3.可扩展增强某个类方法的功能的三种方式 4.自定 ...
随机推荐
- bootstrap -- 一个标签中,同时有 col-xs , col-sm , col-md , col-lg
.col-xs- 超小屏幕 手机 (<768px) .col-sm- 小屏幕 平板 (≥768px) .col-md- 中等屏幕 桌面显示器 (≥992px) .col-lg- 大屏幕 大桌面显 ...
- 【转】Kinect使用
文章转自http://blog.csdn.net/yangtrees/article/details/16106271 Kinect中深度值最大为4096mm (0x0fff) 微软建议在开发中使用1 ...
- 解决:javah 无法访问引用Android对象的问题
无法访问android.view.View 是没有引入android.jar包 javah的参数中 有一个-bootclasspath参数 让他指向android.jar包 例如 javah -jni ...
- ionic如何uglify和minify你的js,css,image,png....
Install: 1.ionic start myapp blank 2.cd myapp 3.npm install cordova-uglify or npm install ...
- #pragma once
这是一个比较常用的C/C++杂注,只要在头文件的最开始加入这条杂注,就能够保证头文件只被编译一次. #pragma once是编译器相关的,就是说即使这个编译系统上有效,但在其他编译系统也不一定可以, ...
- HW3.16
public class Solution { public static void main(String[] args) { int randomValue = (int)(Math.random ...
- A Tour of Go Multiple results
A function can return any number of results. This function returns two strings. package main import ...
- BOM 和 JavaScript 中的 trim
今天遇到一个 IE7 下 JSON.parse 失败的问题.经过排查发现:服务端某个配置文件编码是 UTF-8 + BOM,输出的字符串最开始包含了 BOM 字符,不是合法的 JSON. IE7 不支 ...
- hdoj 2803 The MAX【简单规律题】
The MAX Time Limit: 4000/2000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others)Total Sub ...
- jsp <c:forEach> 判断第一条 或 最后一条记录
<c:forEach>标签具有以下一些属性: var:迭代参数的名称.在迭代体中可以使用的变量的名称,用来表示每一个迭代变量.类型为String. items:要进行迭代的集合.对于它所支 ...