PHP共享内存的应用shmop系列
简单的说明
可能很少情况会使用PHP来操控共享内存,一方面在内存的控制上,MC已经提供了一套很好的方式,另一方面,自己来操控内存的难度较大,内存的读写与转存,包括后面可能会用到的存储策略,要是没有一定计算机组成原理的基础,想做这些不是一件容易的事情。那为什么还要使用它呢?如果我想进行管道通信,为其它的应用服务准备数据;我想建立自己的数据缓存体系,使用MC有点大炮打苍蝇的感觉。那么shmop会是一个选择,当然,在操作内存前,一定要谨慎。
系统要求
shmop系列函数只是在unix/Linux下可用,可以通过命令:
- ipcs -m
来查看当前的共享内存使用情况。其中,各个部分解释如下:
key :共享内存的唯一的key值,共享内存通过该key来判断你读取的是哪一块内存。
shmid:当使用key来获取内存时,你获得的是这个id的值。它作为你操作内存块的标识。
owner:创建该共享内存块的用户
perms:该共享内存的读写权限,8禁止,可以是777,与文件的读写权限一致。
bytes:该内存块的大小
nattch:连接该内存块的进程数
status:当前状态,如:dest,即将删除等。
使用示例
具体的使用说明,在PHP手册中有详细介绍,这里不进行赘述。这里将写一些简单的操作例子。
写入
- <?php
- /**
- * SHMOP共享内存操作示例
- * @author monkee
- **/
- $key = 0x4337b700;
- $size = 4096;
- $shmid = @shmop_open($key, 'c', 0644, $size);
- if($shmid === FALSE){
- exit('shmop_open error!');
- }
- $data = '世界,你好!我将写入很多的数据,你能罩得住么?';
- $length = shmop_write($shmid, pack('a*',$data), 0);
- if($length === FALSE){
- exit('shmop_write error!');
- }
- @shmop_close($shmid);
- exit('succ');
- ?>
读取
- <?php
- /**
- * SHMOP共享内存操作示例
- * @author monkee
- **/
- $key = 0x4337b700;
- $size = 256;
- $shmid = @shmop_open($key, 'c', 0644, $size);
- if($shmid === FALSE){
- exit('shmop_open error!');
- }
- $data = unpack('a*', shmop_read($shmid, 0, 256));
- if($data === FALSE){
- exit('shmop_read error!');
- }
- @shmop_close($shmid);
- exit($data[1]);
- ?>
这里使用到了函数:pack() 这个函数用来将内存里的内容转化为二进制内容,具体请查看手册内容。
多服务器内存同步
已经在本地做好了这个服务,现在需要在多台服务器上进行内存数据同步。虽然这个时候可以放弃共享内存的方式来处理数据了,然而你被要求需要这么做。于是,同步我想不是问题,做好“主-从”的架构,我同步好的内存及时推送过去就可以了。然而,我是不是需要在从机上做一个监听程序呢?这样的代价有点大,好的一点是,从机上有apache。也就是说可以使用HTTP协议来进行通信了。
同步策略
如何同步?看似无聊的问题,却又产生了疑惑。同步数据呗,但是同步什么数据!一种方式是主机的内存改变后,程序读取所有内存数据然后发送到从机进行同步;如果我只是更改一些简单的操作位的话,那么小的更新却要引起整个内存块的同步,似乎有些浪费。还有一种,是更新变化。将变化进行更新。这种比较复杂,因为你需要定义每一种操作的处理。幸运的是,你需要操作的数据并不多,还有,你要定义的操作也不多:write,delete(read可以不要,因为你很少会从从机上读取数据)。那么好了,我们选择其中一种来做吧。
主机发送
- <?php
- /**
- * 共享内存操作,支持远程内存同步。
- * @author hufeng@
- * @since 2011-08-10
- *
- */
- define('PSHMOP_HOST', '192.168.0.1');
- define('PSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
- class Pshmop
- {
- static private $data = array();
- static public function write($key, $offset, $data, $size = 0){
- $h = array('key' => $key, 'offset' => $offset, 'size' => $size, 'ac' => 'write');
- return self::add($h, $data);
- }
- static public function del($key){
- $h = array('key' => $key, 'ac' => 'delete');
- return self::add($h);
- }
- static private function add($dataheader, $databody=''){
- self::$data[] = serialize($dataheader)."\n".$databody;
- }
- static private function send(){
- $d = & self::$data;
- if(count($d) == 0){
- return ;
- }
- $http_entity_body = join(PSHMOP_SEPE, $d);
- $http_entity_length = strlen($http_entity_body);
- $fp = fsockopen(PSHMOP_HOST, 80, $errno, $error);
- if(!$fp){
- return -1;
- }
- fputs($fp, "PUT /pshmop.php HTTP/1.1\r\n");
- fputs($fp, 'Host: '.PSHMOP_HOST."\r\n");
- fputs($fp, "Content-Type: application/x-www-form-urlencoded\r\n");
- fputs($fp, "Content-Length: {$http_entity_length}\r\n");
- fputs($fp, "Connection: close\r\n\r\n");
- fputs($fp, $http_entity_body . "\r\n\r\n");
- $d = '';
- while(!feof($fp)){
- $d .= fgets($fp, 4096);
- }
- fclose($fp);
- return $d;
- }
- }
使用的时候,进行:
- Pshmop::write();
- Pshmop::write();
- Pshmop::write();
- Pshmop::send();
PS:为了支持多个更新一次传递的原则,以上便是举例。
从机监听
- <?php
- /**
- * 共享内存远程处理类
- * 对从远端传输到的数据进行处理、内存同步更新
- * @author hufeng@
- * @since 2011-08-11
- **/
- define('RSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
- class Rshmop
- {
- static public function run($data){
- $items = @explode(RSHMOP_SEPE, $data);
- if($items === NULL){
- return -1;
- }
- $result = array('succ' => 0, 'error' => 0);
- foreach($items as $k => $i){
- self::op($i) === 0 ? $result['succ']++ : $result['error']++;
- unset($items[$k]);
- }
- return $result;
- }
- static public function op($str){
- $p = strpos($str, "\n");
- $header = @unserialize(substr($str, 0, $p));
- if($header === FALSE){
- return 'Data Format Error!';
- }
- $body = substr($str, $p+1);
- $shmid = null;
- if($header['size'] > 0){
- $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
- }
- if(!$shmid){
- $cmd = "ipcs -m | grep '{$header['key']}'";
- $em = exec($cmd);
- $em = preg_replace('/ +/', ' ', $em);
- $ems = explode(' ', $em);
- $header['size'] = intval($ems[4]);
- if($header['size'] == 0){
- if($headerreturn ['ac'] == 'delete'){
- return 0;
- }else{
- return 'Param `size` required!';
- }
- }
- $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
- }
- if($header['ac'] == 'write'){
- shmop_write($shmid, $body, $header['offset']);
- }
- if($header['ac'] == 'delete'){
- shmop_delete($shmid);
- }
- shmop_close($shmid);
- return 0;
- }
- }
如果遇到主机有而从机未有的数据块(可能由网络问题造成,也可以有其它解决办法),可以选择delete然后再进行其它操作。
缓存使用的策略
觉得使用MC代价有点高,可以自己来控制内存和使用。当然,小部分的数据可以容易使用,但是当数据多的时候,决定哪部分数据进入内存,哪部分数据进入硬盘都是值得商榷的。这也就是为什么要提策略。
常见的策略无非是 FIFO,LUR,LAR等,但并不是说这些策略就是好的。实际情况中,根据具体的业务需求,来组织相应的策略。最常见的,我们是将从数据库查询时间长的、获取数据耗时(从其它机器上获取)、计算耗时的、需要及时使用的放入内存中。
这部分的代码就不写了,希望有所帮助。
转载自:http://tubaluer.iteye.com/blog/1349797 作者 tubaluer
PHP共享内存的应用shmop系列的更多相关文章
- PHP共享内存详解
前言 在PHP中有这么一族函数,他们是对UNIX的V IPC函数族的包装. 它们很少被人们用到,但是它们却很强大.巧妙的运用它们,可以让你事倍功半. 它们包括: 信号量(Semaphores) 共享内 ...
- php简单使用shmop函数创建共享内存减少服务器负载
在之前的一篇博客[了解一下共享内存的概念及优缺点]已经对共享内存的概念做了说明.下面就来简单使用共享内存(其实也可以用其他工具,比如redis) PHP做内存共享有两套接口.一个是shm,它实际上是变 ...
- c/c++ linux 进程间通信系列4,使用共享内存
linux 进程间通信系列4,使用共享内存 1,创建共享内存,用到的函数shmget, shmat, shmdt 函数名 功能描述 shmget 创建共享内存,返回pic key shmat 第一次创 ...
- 作为phper既然了解共享内存函数shmop的使用方法,那么就必须要了解一下信号量是什么,以及信号量使用的代码案例
在单独的一个PHP进程中读写.创建.删除共享内存方面上你应该没有问题了.但是实际运行中不可能只是一个PHP进程在运行中.如果在多个进程的情况下你还是沿用单个进程的处理方法,你一定会碰到问题--著名的并 ...
- 给PHP开启shmop扩展实现共享内存
在项目开发中,想要实现PHP多个进程之间共享数据的功能,让客户端连接能够共享一个状态,需要开启共享内存函数shmop.如果预期考虑会遇到这方面需求,那么最好在编译PHP的时候添加--with-shmo ...
- POSIX 共享内存和 系列函数
在前面介绍了system v 共享内存的相关知识,现在来稍微看看posix 共享内存 和系列函数. 共享内存简单来说就是一块真正的物理内存区域,可以使用一些函数将这块区域映射到进程的地址空间进行读写, ...
- php 共享内存学习(shmop函数)
问题:希望可以在进程间共享变量,为共享数据提供快速访问 解决方案:除了可以使用APC模块,还可以用shmop或System V共享内存 //创建键 //将一个可访问的文件路径名转换为一个可供 shmo ...
- 【VxWorks系列】任务间同步与通信之共享内存
在开始之前先说明三个概念,任务间的同步,互斥,通信. 同步,是指一个任务等待某个条件发生,而另外一个任务引发这个条件后,等待的任务会被触发执行相应的处理.这就是一个任务与另一任务之间的同步控制. 互斥 ...
- php操作共享内存shmop类及简单使用测试(代码)
SimpleSHM 是一个较小的抽象层,用于使用 PHP 操作共享内存,支持以一种面向对象的方式轻松操作内存段.在编写使用共享内存进行存储的小型应用程序时,这个库可帮助创建非常简洁的代码.可以使用 3 ...
随机推荐
- IOS 响应者链条 and UIGestureRecognizer 手势识别器)
一次完整的触摸事件的传递响应的过程 UIAppliction --> UIWiondw -->递归找到最适合处理事件的控件 控件调用touches方法-->判断是否实现touches ...
- POJ 1703 Find them, Catch them(并查集,等价关系)
DisjointSet保存的是等价关系,对于某个人X,设置两个变量Xa,Xb.Xa表示X属于a帮派,Xb类似. 如果X和Y不是同一个帮派,那么Xa -> Yb,Yb -> Xa... (X ...
- 【BZOJ4001】[TJOI2015] 概率论(卡特兰数)
点此看题面 大致题意: 问你一棵\(n\)个节点的有根二叉树叶节点的期望个数. 大致思路 看到期望,比较显然可以想到设\(num_i\)为\(i\)个节点的二叉树个数,\(tot_i\)为所有\(i\ ...
- python基础一 day16 内置函数
# 数据类型 :int bool ...# 数据结构 : dict list tuple set str reversed()l = [1,2,3,4,5]l.reverse()print(l)l = ...
- python_37_文件修改
f=open('yesterday','r',encoding='utf-8') f_new=open('yesterday_update','w',encoding='utf-8') for lin ...
- 客户端(springmvc)调用netty构建的nio服务端,获得响应后返回页面(同步响应)
后面考虑通过netty做一个真正意义的简约版RPC框架,今天先尝试通过正常调用逻辑调用netty构建的nio服务端并同步获得返回信息.为后面做铺垫 服务端实现 我们先完成服务端的逻辑,逻辑很简单,把客 ...
- 更改zabbix-server的端口
1.前言zabbix-server的默认端口号是10051.如果存在端口号冲突,需要更改端口号. 以下为更改端口号的步骤. 2.更改配置文件 通常用安装包,也就是yum方式部署的话,其默认的配置文件是 ...
- JSON.parse(text[, reviver])
1. JSON.parse(text[, reviver])text 必需 有效的json字符串reviver 可选 函数 2. 举栗子1) 只有第一个参数 let objStr = '{" ...
- SummerVocation_Learning--java的基本概念
基本数据类型:四类八种. 四类:整数型(默认int),浮点型(默认double),逻辑型(布尔型),文本型(字符型). 八种:int, byte, short, long; double, float ...
- Ralph W. Tyler【拉尔夫·泰勒】
Ralph W. Tyler Anyone who cares about what schools and colleges teach and how their student learn wi ...