【NodeJS线程】Boss和他的职员们
>>>【说明】还是一如既往的,这篇文章是从我的个人博客里挪过来的。原文参见:http://www.jscon.co/coding/frontend/nodejs_fork_child_process.html
Child Process模块还提供一个用于创建一个也是Node.js的子进程,并提供父子进程具备通信通道的能力,这个方法称为 fork() ,相当于spawn('node', ['./child.js'])。与默认的spawn不同的是,fork会在父进程与子进程直接建立一个 IPC管道 ,用于父子进程之间的通信。
使用 fork() 的开销在于每个子进程是个全新的V8实例,Node.js文档提到,每一个进程需要花费30ms 启动并占用 10MB 内存,所以能启动多少个子进程取决于计算机有多少内存。
1、一个例子
【举例】现在我们模拟Boss向职员分配任务的过程。情景是这样的:Boss现在有三个任务让三个职员去做,一个负责一个。这三个职员不能并行处理这三个任务,只有当完成一个任务后,Boss才会分配给另外一个职员下一个任务。
(苦逼码农:我的Boss向来让我一个人顶仨~~)
这里的Boss是父线程,职员是子线程。我们一步一步来完成这个情节的代码。
【注意】
fork函数有一个问题,就是它只能运行JavaScript代码,如果你喜欢用CoffeeScript(或者其他任何编译到js的语言),是无法通过fork调用的。
文章《Node.js中的child_process及进程通信》提供了一种方法,不过我没有成功,大家可以试试:
一个简单的方法是把代码编译到JavaScript再运行,但是很不方便,有没有什么办法呢?
答案是可以的,还是得回到spawn函数。spawn函数除了接受command, args外,还接受一个options参数。通过把options参数的stdio设为['ipc'],即可在父子进程之间建立IPC管道。例如子进程使用CoffeeScript:
child_process = require('child_process') options = stdio: ['ipc'] child = child_process.spawn 'coffee', ['./child.coffee'], options
因此下面的程序虽是用CoffeeScript编写的,但最后都编译成js文件再运行。
2、创建基础父子进程
CoffeeScript代码:
父进程所在文件:(removed.coffee)
fork = require("child_process").fork # 引入fork组件 child = fork "child.js" # 生成child子进程 console.log "parent pid:",process.pid child.on "message",(m)-> #定义父进程收到子进程发来消息时的动作 console.log "receive message:",m setTimeout ()-> child.kill "SIGINT" #子进程完成任务了,过3秒后杀死child进程 ,3000 child.on 'exit',(code,sig)-> #当子进程退出时所触发的动作 console.log code,":",sig child.send "task1" # OK,开始向子进程发送消息!
子进程所在文件:(child.coffee)
console.log "===========================" console.log "child pid:",process.pid process.on 'message',(m)-> #定义子进程收到父进程发来消息时的动作 console.log process.pid,'start new task:',m console.log "start process.....Done" console.log "communiate with parent...." process.send "done" #子进程完成任务后,向父进程汇报
上面的代码大部分是装饰形的log代码,其中有注释的代码才是关键的。
代码解释:
上面的代码讲了这么一个故事:Boss通过fork生成一个子进程,给子进程喊了一句“task1”后,子进程就屁颠屁颠得去做任务。子进程完成后向父进程汇报“done”,父进程得知职员办事给力,一高兴,3秒钟之后kill了这个进程,然后,就没有然后了….
(这是在拍《风云》的节奏啊…..)
运行结果:
3、完成进程管理
上面的代码只生成了一个子进程,说好的三个呢?有了上面的基础代码,完成题目的要求就比较简单了,这次我们只稍微修改父进程所在的脚本即可:
CoffeeScript代码:
父进程所在文件:(removed.coffee)
fork = require("child_process").fork child = fork "child.js" console.log "parent pid:",process.pid rebuild = (child)-> # 将两个事件侦听器包装秤rebuild函数 child.on "message",(m)-> console.log "receive message:",m setTimeout ()-> child.kill "SIGINT" # kill 子进程 child = fork "child.js" # 重生成子进程 rebuild(child) # 给生成的子进程绑定侦听器 child.send "task1" # 父进程给子进程发消息 ,3000 child.on 'exit',(code,sig)-> console.log code,":",sig rebuild(child) child.send "task1"
代码解释:
这是“稍微修改”的意思?果然呵,男人都是骗子!
通过现象看本质,看一下修改的步骤:
① 这里把前一部分的事件侦听器代码(就是那两个 on 什么的啦)包装了一下,命名成一个 rebuild函数 。这里的重点是然后再在递归使用。因为我们在每一次任务完成后会kill掉子进程,所以被kill掉的子进程的侦听器自然跟着消亡,所以每次fork之后就需要重新绑定事件(就是那两个 on 什么的啦):
child.kill "SIGINT" child = fork "child.js" rebuild(child) child.send "task"+count
也许通过这四行代码你就会发现,俺家之所以将该函数取名为rebuild函数是有原因的:凤凰涅槃,浴火重生;第一句kill上次的child,接着fork一个新的child,同时rebuild出该新函数的事件侦听器(就是那两个 on 什么的啦),接着父元素有向这个新生的child发出“task1”信号….
② 猜想的出来执行之后的效果么?如果认为会出现刷屏代码的话,说明你已经懂了
运行结果:
很明显上面的代码不是我们所想要的,我们只要三个子进程即可!好吧,杜绝超生,那只能计划生育了。加个count变量,加个 if… else… 语句就行了。不多说,翠花,上代码:
CoffeeScript代码:
父进程所在文件:(removed.js)
fork = require("child_process").fork child = fork "child.js" console.log "parent pid:",process.pid count = 0 rebuild = (child)-> child.on "message",(m)-> count += 1 if count < 3 console.log "receive message:",m setTimeout ()-> child.kill "SIGINT" child = fork "child.js" rebuild(child) child.send "task"+count ,3000 else console.log "receive message:",m console.log "task over" setTimeout ()-> child.kill "SIGINT" ,3000 child.on 'exit',(code,sig)-> console.log code,":",sig rebuild(child) child.send "task"+count
运行结果:
[caption id="" align="aligncenter" width="364"] 完成有限的进程管理[/caption]
4、传递参数
如果仅仅这样单纯的管理的话,父子进程(为啥我总打成“父子进城”呢??)其实不过尔尔,花拳绣腿罢了。一般的情形父进程往往会附带一些详细的指令给子进程,比如“去城里买些菜回来”~~
传递的message可以是JSON格式,真的是JSON,不骗你,不带解析的!
CoffeeScript代码:
父进程所在文件 removed.coffee 修改的地方较少,只有两处但很关键:
child.send "task"+count
改成:
child.send {where:"城市"+count,fn:"buy"}
没错,传送的就是JSON格式的数据。
子进程所在文件:(child.coffee)
console.log "===========================" console.log "child pid:",process.pid exports.buy = ()-> "买菜" #定义buy函数 process.on 'message',(m)-> console.log process.pid,'start new task:',m console.log "到",m.where,",",exports[m.fn]() #字符串和函数 console.log "start process.....Done" console.log "communiate with parent...." process.send "done"
这里我想表达的意思有两个:
① 父子线程间的通信可以是JSON格式的,不用解析可以直接使用;
② 你看出来了么,“buy”是父进程传给子进程的一个字符串量,但在子进程中调用了其buy函数~~
运行结果:
[caption id="" align="aligncenter" width="454"] 进程通信中的传递参数[/caption]
故事的结尾,为了响应Boss的号召,这三个职员就真的去三个城市买菜,卖完菜后,Boss很十分感动, 就kill 它们了,然后,就没有然后了….
(汗…………………………………………………………….. The End)
【NodeJS线程】Boss和他的职员们的更多相关文章
- nodejs上传图片并显示的例子
目标 1. 在浏览器地址栏输入“http://demos/start”,进入欢迎页面,页面有一个文件上传表单: 2. 选择一张图片并提交表单,文件被上传到"http://demos/uplo ...
- nodeJs学习过程之一个图片上传显示的例子
目标 1. 在浏览器地址栏输入“http://demos/start”,进入欢迎页面,页面有一个文件上传表单: 2. 选择一张图片并提交表单,文件被上传到"http://demos/uplo ...
- Netty多线程处理机制
技术点描述 本文主要研究NioServerSocketChannelFactory类和NioDatagramChannelFactory类, 以及这两个类的各自作用. 由于基于pipelineFact ...
- 一篇文章,读懂Netty的高性能架构之道
一篇文章,读懂Netty的高性能架构之道 Netty是由JBOSS提供的一个java开源框架,是一个高性能.异步事件驱动的NIO框架,它提供了对TCP.UDP和文件传输的支持,作为一个异步NIO框架, ...
- netty12---线程池简单源码
package com.cn; import java.io.IOException; import java.nio.channels.Selector; import java.util.Queu ...
- Netty框架原理
用这张图表示的就是一个基本的Netty框架 通过创建两个线程池,一个负责接入, 一个负责处理 public class Start { public static void main(String[] ...
- DotNetty实现WebSocket的简单使用
工作中项目是物联网项目的,管理平台又是bs架构. 如果用 Socket 的话,Web 端还需要转发,就全部统一采用了 WebSocket . DotNet 平台上的 WebSocket 实现有很多种, ...
- Nodejs事件引擎libuv源码剖析之:高效线程池(threadpool)的实现
声明:本文为原创博文,转载请注明出处. Nodejs编程是全异步的,这就意味着我们不必每次都阻塞等待该次操作的结果,而事件完成(就绪)时会主动回调通知我们.在网络编程中,一般都是基于Reactor线程 ...
- (三)Netty源码学习笔记之boss线程处理流程
尊重原创,转载注明出处,原文地址:http://www.cnblogs.com/cishengchongyan/p/6160194.html 本文我们将先从NioEventLoop开始来学习服务端的 ...
随机推荐
- Android 获取渠道名称
直接看代码, //获取渠道名称public static String getChannelName(Activity ctx) { if (ctx == null) { return null; } ...
- apache commons math 示例代码
apache commons Math是一组偏向科学计算为主的函数,主要是针对线性代数,数学分析,概率和统计等方面. 我虽然是数学专业毕业,当年也是抱着<数学分析>啃,但是好久不用,这些概 ...
- HttpClient 版本变化 转载
转载地址:http://my.oschina.net/u/577453/blog/173724 最近用到了HttpClient写爬虫,可能我有新版本强迫症,老是喜欢用新版本的东西(虽说新版本不一定好用 ...
- Graphics平移缩放旋转(转载)+点睛
点睛:可以进行多次旋转和平移,也就是平移以后再平移,旋转以后再旋转,有时候一次达不到要求,如果你想一次调整完美的话很麻烦,所以最好多次,上代码 private void btnTranslate_Cl ...
- oracle wrapped 代码解密工具 unwraper
Oracle中的Wrap 功能是为了不让别人看到函数/存储过程的SQL源码的明文, 作为技术宅,有的时候想看源码但是看不到的那种心情是可以理解的, 发一个简单易用的 Oracle wrapped 解码 ...
- python学习之网页数据获取
由于需要学习机器学习的内容,了解到python在机器学习中使用很方便,开始学习之,机器学习目前主要在学<机器学习实战>这本书.python是在MOOC中学习<用python玩转数据& ...
- 求排列组合数C(n,m) φ(゜▽゜*)♪
我们可以先预处理出1~n的阶乘以及阶乘的逆元: 对于阶乘的逆元,我们可以直接由费马小定理,用快速幂求出: (吐槽快速幂…………一定要开long long,不然会爆零
- 我的nodejs学习之路1
距离上次写文章类东西已经有4-5年了,猛然写东西有种提笔忘字的感觉. 言归正传,这是一篇记录我自己学习nodejs的文章,在写下这篇文章的时候我也不是什么大牛,也不是很了解nodejs这项技术.之所以 ...
- Kanzi编程基础1 - 定时器Timer
Kanzi虽然发生了比较多的版本更迭,api也发生了很多变化,但定时器的头文件一直都在一个地方:#include "user/include/user/ui/message/kzu_mess ...
- VC++常用数据类型转化
char* 转换成 LPCTSTR const char* dibFileName; , , dibFileName, -, NULL, ); wchar_t *wide = new wchar_t[ ...