【NodeJS线程】Boss和他的职员们
>>>【说明】还是一如既往的,这篇文章是从我的个人博客里挪过来的。原文参见:http://www.jscon.co/coding/frontend/nodejs_fork_child_process.html
Child Process模块还提供一个用于创建一个也是Node.js的子进程,并提供父子进程具备通信通道的能力,这个方法称为 fork() ,相当于spawn('node', ['./child.js'])。与默认的spawn不同的是,fork会在父进程与子进程直接建立一个 IPC管道 ,用于父子进程之间的通信。
使用 fork() 的开销在于每个子进程是个全新的V8实例,Node.js文档提到,每一个进程需要花费30ms 启动并占用 10MB 内存,所以能启动多少个子进程取决于计算机有多少内存。
1、一个例子
【举例】现在我们模拟Boss向职员分配任务的过程。情景是这样的:Boss现在有三个任务让三个职员去做,一个负责一个。这三个职员不能并行处理这三个任务,只有当完成一个任务后,Boss才会分配给另外一个职员下一个任务。
(苦逼码农:我的Boss向来让我一个人顶仨~~)
这里的Boss是父线程,职员是子线程。我们一步一步来完成这个情节的代码。
【注意】
fork函数有一个问题,就是它只能运行JavaScript代码,如果你喜欢用CoffeeScript(或者其他任何编译到js的语言),是无法通过fork调用的。
文章《Node.js中的child_process及进程通信》提供了一种方法,不过我没有成功,大家可以试试:
一个简单的方法是把代码编译到JavaScript再运行,但是很不方便,有没有什么办法呢?
答案是可以的,还是得回到spawn函数。spawn函数除了接受command, args外,还接受一个options参数。通过把options参数的stdio设为['ipc'],即可在父子进程之间建立IPC管道。例如子进程使用CoffeeScript:
child_process = require('child_process') options = stdio: ['ipc'] child = child_process.spawn 'coffee', ['./child.coffee'], options
因此下面的程序虽是用CoffeeScript编写的,但最后都编译成js文件再运行。
2、创建基础父子进程
CoffeeScript代码:
父进程所在文件:(removed.coffee)
fork = require("child_process").fork # 引入fork组件
child = fork "child.js" # 生成child子进程
console.log "parent pid:",process.pid
child.on "message",(m)-> #定义父进程收到子进程发来消息时的动作
console.log "receive message:",m
setTimeout ()->
child.kill "SIGINT" #子进程完成任务了,过3秒后杀死child进程
,3000
child.on 'exit',(code,sig)-> #当子进程退出时所触发的动作
console.log code,":",sig
child.send "task1" # OK,开始向子进程发送消息!
子进程所在文件:(child.coffee)
console.log "==========================="
console.log "child pid:",process.pid
process.on 'message',(m)-> #定义子进程收到父进程发来消息时的动作
console.log process.pid,'start new task:',m
console.log "start process.....Done"
console.log "communiate with parent...."
process.send "done" #子进程完成任务后,向父进程汇报
上面的代码大部分是装饰形的log代码,其中有注释的代码才是关键的。
代码解释:
上面的代码讲了这么一个故事:Boss通过fork生成一个子进程,给子进程喊了一句“task1”后,子进程就屁颠屁颠得去做任务。子进程完成后向父进程汇报“done”,父进程得知职员办事给力,一高兴,3秒钟之后kill了这个进程,然后,就没有然后了….
(这是在拍《风云》的节奏啊…..)
运行结果:

3、完成进程管理
上面的代码只生成了一个子进程,说好的三个呢?有了上面的基础代码,完成题目的要求就比较简单了,这次我们只稍微修改父进程所在的脚本即可:
CoffeeScript代码:
父进程所在文件:(removed.coffee)
fork = require("child_process").fork
child = fork "child.js"
console.log "parent pid:",process.pid
rebuild = (child)-> # 将两个事件侦听器包装秤rebuild函数
child.on "message",(m)->
console.log "receive message:",m
setTimeout ()->
child.kill "SIGINT" # kill 子进程
child = fork "child.js" # 重生成子进程
rebuild(child) # 给生成的子进程绑定侦听器
child.send "task1" # 父进程给子进程发消息
,3000
child.on 'exit',(code,sig)->
console.log code,":",sig
rebuild(child)
child.send "task1"
代码解释:
这是“稍微修改”的意思?果然呵,男人都是骗子!
通过现象看本质,看一下修改的步骤:
① 这里把前一部分的事件侦听器代码(就是那两个 on 什么的啦)包装了一下,命名成一个 rebuild函数 。这里的重点是然后再在递归使用。因为我们在每一次任务完成后会kill掉子进程,所以被kill掉的子进程的侦听器自然跟着消亡,所以每次fork之后就需要重新绑定事件(就是那两个 on 什么的啦):
child.kill "SIGINT"
child = fork "child.js"
rebuild(child)
child.send "task"+count
也许通过这四行代码你就会发现,俺家之所以将该函数取名为rebuild函数是有原因的:凤凰涅槃,浴火重生;第一句kill上次的child,接着fork一个新的child,同时rebuild出该新函数的事件侦听器(就是那两个 on 什么的啦),接着父元素有向这个新生的child发出“task1”信号….
② 猜想的出来执行之后的效果么?如果认为会出现刷屏代码的话,说明你已经懂了
运行结果:
无尽地循环执行任务 [/caption]
很明显上面的代码不是我们所想要的,我们只要三个子进程即可!好吧,杜绝超生,那只能计划生育了。加个count变量,加个 if… else… 语句就行了。不多说,翠花,上代码:
CoffeeScript代码:
父进程所在文件:(removed.js)
fork = require("child_process").fork
child = fork "child.js"
console.log "parent pid:",process.pid
count = 0
rebuild = (child)->
child.on "message",(m)->
count += 1
if count < 3
console.log "receive message:",m
setTimeout ()->
child.kill "SIGINT"
child = fork "child.js"
rebuild(child)
child.send "task"+count
,3000
else
console.log "receive message:",m
console.log "task over"
setTimeout ()->
child.kill "SIGINT"
,3000
child.on 'exit',(code,sig)->
console.log code,":",sig
rebuild(child)
child.send "task"+count
运行结果:
[caption id="" align="aligncenter" width="364"]
完成有限的进程管理[/caption]
4、传递参数
如果仅仅这样单纯的管理的话,父子进程(为啥我总打成“父子进城”呢??)其实不过尔尔,花拳绣腿罢了。一般的情形父进程往往会附带一些详细的指令给子进程,比如“去城里买些菜回来”~~
传递的message可以是JSON格式,真的是JSON,不骗你,不带解析的!
CoffeeScript代码:
父进程所在文件 removed.coffee 修改的地方较少,只有两处但很关键:
child.send "task"+count
改成:
child.send {where:"城市"+count,fn:"buy"}
没错,传送的就是JSON格式的数据。
子进程所在文件:(child.coffee)
console.log "==========================="
console.log "child pid:",process.pid
exports.buy = ()-> "买菜" #定义buy函数
process.on 'message',(m)->
console.log process.pid,'start new task:',m
console.log "到",m.where,",",exports[m.fn]() #字符串和函数
console.log "start process.....Done"
console.log "communiate with parent...."
process.send "done"
这里我想表达的意思有两个:
① 父子线程间的通信可以是JSON格式的,不用解析可以直接使用;
② 你看出来了么,“buy”是父进程传给子进程的一个字符串量,但在子进程中调用了其buy函数~~
运行结果:
[caption id="" align="aligncenter" width="454"]
进程通信中的传递参数[/caption]
故事的结尾,为了响应Boss的号召,这三个职员就真的去三个城市买菜,卖完菜后,Boss很十分感动, 就kill 它们了,然后,就没有然后了….
(汗…………………………………………………………….. The End)
【NodeJS线程】Boss和他的职员们的更多相关文章
- nodejs上传图片并显示的例子
目标 1. 在浏览器地址栏输入“http://demos/start”,进入欢迎页面,页面有一个文件上传表单: 2. 选择一张图片并提交表单,文件被上传到"http://demos/uplo ...
- nodeJs学习过程之一个图片上传显示的例子
目标 1. 在浏览器地址栏输入“http://demos/start”,进入欢迎页面,页面有一个文件上传表单: 2. 选择一张图片并提交表单,文件被上传到"http://demos/uplo ...
- Netty多线程处理机制
技术点描述 本文主要研究NioServerSocketChannelFactory类和NioDatagramChannelFactory类, 以及这两个类的各自作用. 由于基于pipelineFact ...
- 一篇文章,读懂Netty的高性能架构之道
一篇文章,读懂Netty的高性能架构之道 Netty是由JBOSS提供的一个java开源框架,是一个高性能.异步事件驱动的NIO框架,它提供了对TCP.UDP和文件传输的支持,作为一个异步NIO框架, ...
- netty12---线程池简单源码
package com.cn; import java.io.IOException; import java.nio.channels.Selector; import java.util.Queu ...
- Netty框架原理
用这张图表示的就是一个基本的Netty框架 通过创建两个线程池,一个负责接入, 一个负责处理 public class Start { public static void main(String[] ...
- DotNetty实现WebSocket的简单使用
工作中项目是物联网项目的,管理平台又是bs架构. 如果用 Socket 的话,Web 端还需要转发,就全部统一采用了 WebSocket . DotNet 平台上的 WebSocket 实现有很多种, ...
- Nodejs事件引擎libuv源码剖析之:高效线程池(threadpool)的实现
声明:本文为原创博文,转载请注明出处. Nodejs编程是全异步的,这就意味着我们不必每次都阻塞等待该次操作的结果,而事件完成(就绪)时会主动回调通知我们.在网络编程中,一般都是基于Reactor线程 ...
- (三)Netty源码学习笔记之boss线程处理流程
尊重原创,转载注明出处,原文地址:http://www.cnblogs.com/cishengchongyan/p/6160194.html 本文我们将先从NioEventLoop开始来学习服务端的 ...
随机推荐
- 161226、js日期格式化
JavaScript Date format(js日期格式化) 方法一:// 对Date的扩展,将 Date 转化为指定格式的String // 月(M).日(d).小时(h).分(m).秒(s).季 ...
- Python基础操作-函数
本节内容 1. 函数基本语法及特性2. 参数与局部变量3. 返回值4.递归5.高阶函数 1.函数基本语法及特性函数是什么? 函数一词来源于数学,但编程中的「函数」概念,与数学中的函数是有很大不同的,具 ...
- 如何选择合适的CRM客户关系管理软件?
面对日益激烈的市场竞争,很多企业管理者不断通过各种途径和方式,试图寻找一个合适并行之有效的解决方案,以帮助他们解决企业管理难题,不断提高企业的业绩,获得持续的成功. 企业管理软件的出现填补了企业管理领 ...
- android微信支付总结+自己搭建服务器
1.前期注册操作 1-1:微信开发平台:https://open.weixin.qq.com/ 1-2:创建移动应用 签名获取: 1.将自己的apk签名打包,运行到手机上. 2.将微信支付的签名工具, ...
- 用STM32CubeMX创建FreeRTOS项目
1. 目标, PG13,PG14双线程双闪灯. 2. 测试平台 stm32f429i-disco keil v5.13.0.0 CubeMx 4.8.0 3. 步骤 3.1 打开cube, PG13, ...
- 阅读笔记 火球UML大战需求分析3
在复习回顾的以前所学的UML 统一建模语言之后,要将他们融会贯通起来,必定要进行一次事件,这样才能更好地运用各种UML,所以,了解了所有的UML图之后,就要开始接收一个练习的项目了. 这里作者给的例子 ...
- 聊聊 virtualenv 和 virtualenvwrapper 实践
各位 Python 的小伙伴肯定多多少少接触过 virtualenv.本文将介绍 virtualenv 以及如何更科学更优雅地使用 virtualenv. virtualenv 首先来聊一下 virt ...
- R12供应商地点层付款方法SQL
--R12供应商地点层付款方法SQL:SELECT ipmv.payment_method_name , ipmv.payment_method_code , 'N' primary_ ...
- 合并excel中多个sheet
Sub 合并当前工作簿下的所有工作表() Application.ScreenUpdating = False For j = 1 To Sheets.Count If Sheets(j).Name ...
- Analyzer报表里显示的 * 星号、红叉、#井号的意义
声明:原创作品,转载时请注明文章来自SAP师太技术博客( 博/客/园www.cnblogs.com):www.cnblogs.com/jiangzhengjun,并以超链接形式标明文章原始出处,否则将 ...