本文重点介绍push stream模块的构成,至于nginx如何启动、维护该模块不会详细阐述,以后有时间会做详细阐述。 
一、模块定义 
1.1.  模块配置

通用nginx模块的配置struct有三种,分别是main,server和location。本模块会涉及到main和location两个域的配置。名称分别为:ngx_http_push_stream_main_conf_t和ngx_http_push_stream_loc_conf_t.

具体模块配置请参考nginx官网:http://wiki.nginx.org/HttpPushStreamModule 
1.2.  模块指令 
  模块的指令是定义在一个叫做ngx_command_t的静态数组中的,或用于在nginx配置文件中设定模块的相关参数或处理相应请求,先简单来说下ngx_command_t的定义:

  1. struct ngx_command_t {
  2. ngx_str_t             name;//指令名称
  3. ngx_uint_t            type;//指令类型——该指令可用于ngx conf的哪个域——main?server?location?
  4. /*命令所对应的处理函数指针,参数
  5. @指向结构体 ngx_conf_t 的指针, 这个结构体里包含需要传递给指令的参数;
  6. @指向结构体 ngx_command_t 的指针;
  7. @指向模块自定义配置结构体的指针
  8. */
  9. char               *(*set)(ngx_conf_t *cf, ngx_command_t *cmd, void *conf);
  10. ngx_uint_t            conf;//指定参数存储区域(main?server?loc?)
  11. ngx_uint_t            offset;//指定数据保存位置
  12. void                 *post;//指向模块在读配置的时候需要的一些零碎变量
  13. };

比如:

  1. { ngx_string("push_stream_publisher"),
  2. NGX_HTTP_LOC_CONF|NGX_CONF_NOARGS|NGX_CONF_TAKE1,//指令用在location域,没有参数或1个参数
  3. ngx_http_push_stream_publisher,//发布处理函数
  4. NGX_HTTP_LOC_CONF_OFFSET,//参数存储在location域
  5. offsetof(ngx_http_push_stream_loc_conf_t, location_type),
  6. NULL },
  7. { ngx_string("push_stream_subscriber"),
  8. NGX_HTTP_LOC_CONF|NGX_CONF_NOARGS|NGX_CONF_TAKE1,
  9. ngx_http_push_stream_subscriber,
  10. NGX_HTTP_LOC_CONF_OFFSET,
  11. offsetof(ngx_http_push_stream_loc_conf_t, location_type),
  12. NULL },

1.3.  模块上下文 
       静态的ngx_http_module_t结构体,包含一大坨函数引用,用来创建和合并三段配置 (main,server,location):

  1. static ngx_http_module_t    ngx_http_push_stream_module_ctx = {
  2. NULL,                                       /* preconfiguration */
  3. ngx_http_push_stream_postconfig,            /* postconfiguration */
  4. ngx_http_push_stream_create_main_conf,      /* create main configuration */
  5. ngx_http_push_stream_init_main_conf,        /* init main configuration */
  6. NULL,                                       /* create server configuration */
  7. NULL,                                       /* merge server configuration */
  8. ngx_http_push_stream_create_loc_conf,       /* create location configuration */
  9. ngx_http_push_stream_merge_loc_conf,        /* merge location configuration */
  10. };

1.4.  模块定义

  1. ngx_module_t    ngx_http_push_stream_module = {
  2. NGX_MODULE_V1,
  3. &ngx_http_push_stream_module_ctx,           /* module context */
  4. ngx_http_push_stream_commands,              /* module directives */
  5. NGX_HTTP_MODULE,                            /* module type */
  6. NULL,                                       /* init master */
  7. ngx_http_push_stream_init_module,           /* init module */
  8. ngx_http_push_stream_init_worker,           /* init process */
  9. NULL,                                       /* init thread */
  10. NULL,                                       /* exit thread */
  11. ngx_http_push_stream_exit_worker,           /* exit process */
  12. ngx_http_push_stream_exit_master,           /* exit master */
  13. NGX_MODULE_V1_PADDING
  14. };

二、初始化 
        由上文可以看出,nginx初始化时会调用ngx_http_push_stream_init_module和ngx_http_push_stream_init_worker两个函数,下面看下它们都干了什么 
2.1.  模块初始化(init_module)

  1. static ngx_int_t
  2. ngx_http_push_stream_init_module(ngx_cycle_t *cycle)
  3. {
  4. ngx_core_conf_t                         *ccf = (ngx_core_conf_t *) ngx_get_conf(cycle->conf_ctx, ngx_core_module
  5. );
  6. if ((ngx_http_push_stream_module_main_conf == NULL) || !ngx_http_push_stream_module_main_conf->enabled) {
  7. ngx_log_error(NGX_LOG_NOTICE, cycle->log, 0, "ngx_http_push_stream_module will not be used with this configu
  8. ration.");
  9. return NGX_OK;
  10. }
  11. // initialize our little IPC
  12. return ngx_http_push_stream_init_ipc(cycle, ccf->worker_processes);
  13. }

代码很简单

  • 获取conf
  • 初始化IPC

2.1.1 IPC 
       该模块的IPC是对nginx的master与worker间IPC的扩展,有关nginx的进程间通信请参见http://simohayha.iteye.com/blog/467940 
       简单来讲,master与worker直接的通信模型为:

  • master每次创建worker之前,创建一个channel(socketpair),fork后worker继承该socketpair
  • master保留所有worker的socketpair从而可以向所有worker发送控制指令。
  • worker继承socketpair时,仅保留master为自己创建的socketpair的读端以及master为其他worker创建的socketpair的写端,从而可实现worker间的进程间通信
  • 由于worker创建时序的不同,先创建的worker无法获悉后创建worker的chaneel信息,为此master每次创建channel后以将新创建的channel信息以指令的形式通知先前创建的worker

由于master为worker创建的channel(socketpair)只处理特定的指令,push stream模块创建了供自己使用的socketpair:

  • 模块初始化时为所有worker创建一个socketpair
  • master创建worker时,worker会完全继承由模块创建的socketpair读端与写端。
  • worker可借助由push stream模块创建的socketpair实现全双工通信

2.  ngx worker初始化(ngx_http_push_stream_init_worker)

nginx-push-stream模块源码学习(二)——模块初始化的更多相关文章

  1. vue 源码学习二 实例初始化和挂载过程

    vue 入口 从vue的构建过程可以知道,web环境下,入口文件在 src/platforms/web/entry-runtime-with-compiler.js(以Runtime + Compil ...

  2. Dubbo源码学习(二)

    @Adaptive注解 在上一篇ExtensionLoader的博客中记录了,有两种扩展点,一种是普通的扩展实现,另一种就是自适应的扩展点,即@Adaptive注解的实现类. @Documented ...

  3. Vue源码学习二 ———— Vue原型对象包装

    Vue原型对象的包装 在Vue官网直接通过 script 标签导入的 Vue包是 umd模块的形式.在使用前都通过 new Vue({}).记录一下 Vue构造函数的包装. 在 src/core/in ...

  4. python 协程库gevent学习--gevent源码学习(二)

    在进行gevent源码学习一分析之后,我还对两个比较核心的问题抱有疑问: 1. gevent.Greenlet.join()以及他的list版本joinall()的原理和使用. 2. 关于在使用mon ...

  5. 以太坊 layer2: optimism 源码学习(二) 提现原理

    作者:林冠宏 / 指尖下的幽灵.转载者,请: 务必标明出处. 掘金:https://juejin.im/user/1785262612681997 博客:http://www.cnblogs.com/ ...

  6. Spring 源码学习 04:初始化容器与 DefaultListableBeanFactory

    前言 在前一篇文章:创建 IoC 容器的几种方式中,介绍了四种方式,这里以 AnnotationConfigApplicationContext 为例,跟进代码,看看 IoC 的启动流程. 入口 从 ...

  7. [spring源码学习]二、IOC源码——配置文件读取

    一.环境准备 对于学习源码来讲,拿到一大堆的代码,脑袋里肯定是嗡嗡的,所以从代码实例进行跟踪调试未尝不是一种好的办法,此处,我们准备了一个小例子: package com.zjl; public cl ...

  8. ngx-push-stream模块源码学习(五)——内存清理

    1.定时器         采用nginx自身的定时器管理机制,具体细节待学习过nginx源码后加以补充 2.channel的生成周期 (0).初始(诞生)         发布.订阅均有可能产生ch ...

  9. ngx-push-stream模块源码学习(四)——订阅

    一.概述 push stream模块允许三种模式的订阅者: longpolling:每收到服务端响应数据即断开连接然后迅速重连,连接耗时可以忽略 stream:与服务端保持长连接,持续不断的请求-&g ...

随机推荐

  1. C语言qsort函数算法性能测试

    对于该算法的复杂性.一个直接的方法是测量的一定量的算法级数据的执行时间的感知. 随着C语言提供qsort对于示例.随着100一万次的数据,以测试其计算量.感知O(nlg(n))时间成本: C码如下面: ...

  2. 深入解析java乱码

    1.什么是编码 ,为什么要编码 先前从没有思考这么深入的问题,觉得一切理所当然,直到有一天java的乱码让我跪了,他不在听我的话,到处是乱码,这次我不打算放过它,我要收拾了它. 大家都知道,文本文件, ...

  3. hdu(2062)-Subset sequence 组合数学

    意甲冠军:查找集合{1,2,3...n}第一m一个排列子. 收集的线索所行的大小. 例两个元素的排列子集合按字典树排列是:{1},{1,2},{2},{2,1}: 解法:一个一个元素来确定,每次把剩余 ...

  4. php设计模式(一):简介及创建型模式

    我们分三篇文章来总结一下设计模式在PHP中的应用,这是第一篇创建型模式. 一.设计模式简介 首先我们来认识一下什么是设计模式: 设计模式是一套被反复使用.容易被他人理解的.可靠的代码设计经验的总结. ...

  5. iframe的各项參数

    iframe的各项參数: <iframe src="test.jsp" width="100″ height="50″ frameborder=" ...

  6. iOS 学习资料汇总

    (适合初学者入门) 本文资料来源于GitHub 一.视频教程(英文) Developing iOS 7 Apps for iPhone and iPad斯坦福开放教程之一, 课程主要讲解了一些 iOS ...

  7. Pki原则

    核心提示: 公开密钥和公开密钥证明书,产生的私钥client要么server证书.加密的公共密钥才能解密私钥文件只.私钥只能解密公开的加密文件.公众认为,它是开放的.所有的人都能够得到它.私人还表明, ...

  8. 逗比学树莓派之GPIO

           wiringPi适合那些具有C语言基础,在接触树莓派之前已经接触过单片机或者嵌入式开发的人群.wiringPi的API函数和arduino很相似,这也使得它广受欢迎.作者给出了大量的说明 ...

  9. asp.net web api2.0 ajax跨域解决方案

    asp.net web api2.0 ajax跨域解决方案 Web Api的优缺点就不说了,直接说怎么跨域,我搜了一下,主要是有两种.  一,ASP.NET Web API支持JSONP,分两种 1, ...

  10. 文件合并工具DiffMerge发布4.2版本

    DiffMerge一直是文件对比合并工具的佼佼者,其最大特点是多文件对比与合并,并提供可视化界面用于编辑. 此次DiffMerge v4.2发布,提高了文件差异对比,并提供了快速匹配功能,以及更好的用 ...