运行多个Tornado实例

  • 网页响应不是特别的计算密集型处理

  • 多个实例充分利用 CPU

  • 多端口怎么处理

  • Linux 常见应用服务配置模式 nginx 和 supervisord:采用主配置文件 + 项目配置文件

使用Supervisor监控Tornado进程

安装(如果用pip安装注意看是否需要指定使用python2版本)

supervisor 默认只支持 Python2

sudo apt-get install supervisor

或者 激活 Python3 的 virtualenv 后执行,安装支持 Python3 版本的 supervisor

pip install git+https://github.com/Supervisor/supervisor.git

  • 检查主配置文件 deploy/supervisord.conf (如果目录不存在需要创建)

  • 使用命令生成一个主服务配置文件 echo_supervisord_conf > deploy/supervisord.conf (如果没有 deploy 目录就建立)

    检查是否 inculde 配置,没有就加上

    [include]
    files = super/*.conf

    如果 sudo 没有权限就用当前目录生成,然后

    sudo cp deploy/supervisord.conf /etc/supervisor/supervisord.conf 过去

  • 增加 Supervisor 项目运行配置文件(名字如 tudo_super.conf)到 /etc/supervisor/super

  • 把这个文件复制到到  /etc/supervisor/super 下
  • sudo cp deploy/todo_super.conf /etc/supervisor/super
  • 找到启动目录
  • 到项目目录下 pwd 打印出路径
  • 还要找到 python 的路径

    which python

todo_super.conf 文件, 这里要改的是 程序启动路径,启动命令

# 增加一个tornadoes组
[group:tornadoes]
programs = tornado-,tornado-,tornado- # 分别定义三个tornado的进程配置 [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8000.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8001.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8002.log
loglevel = info

启动和管理

启动supervisor

一定要先启动 daemon 程序 (supervisord) 才能执行管理操作,否则会报错

使用默认的主配置文件/etc/supervisor/supervisord.conf

sudo supervisord

明确指定主配置文件

sudo supervisord -c /home/pyvip/working/supervisord.conf 使用 user 用户启动supervisord

使用 user 用户启动supervisord

sudo supervisord -u user

查看、操作进程状态

(tornado) pyvip@Vip:~/ws/tudo$ sudo supervisorctl [sudo] password for pyvip: tornadoes:tornado-8000 RUNNING pid 17652, uptime 0:00:28 tornadoes:tornado-8001 RUNNING pid 17653, uptime 0:00:28 tornadoes:tornado-8002 RUNNING pid 17654, uptime 0:00:28

# 停止运行tornado-8001服务器进程 supervisor> stop tornadoes:tornado-8001 tornados:tornado-8001: stopped

# 停止运行整个tornado服务器进程组

supervisor> stop tornadoes: tornadoes:tornado-8000: stopped tornadoes:tornado-8001: stopped tornadoes:tornado-8002: stopped supervisor> status tornadoes:tornado-8000 STOPPED Jun 26 07:43 PM tornadoes:tornado-8001 STOPPED Jun 26 07:43 PM tornadoes:tornado-8002 STOPPED Jun 26 07:43 PM

supervisorctl 命令介绍

停止某一个进程,program_name 为 [program:x] 里的 x supervisorctl stop program_name 启动某个进程 supervisorctl start program_name 重启某个进程 supervisorctl restart program_name 结束所有属于名为 groupworker 这个分组的进程 (start,restart 同理) supervisorctl stop groupworker: 结束 groupworker:name1 这个进程 (start,restart 同理) supervisorctl stop groupworker:name1 停止全部进程,注:start、restart、stop 都不会载入最新的配置文件 supervisorctl stop all 载入最新的配置文件,停止原有进程并按新的配置启动、管理所有进程 supervisorctl reload 根据最新的配置文件,启动新配置或有改动的进程,配置没有改动的进程不会受影响而重启 supervisorctl update

使用 Nginx 作为反向代理

搭配 tornado 服务使用

安装和运行

  • 安装 sudo apt-get install nginx

  • 检测配置文件正确可用 sudo nginx -t

  • 运行 sudo nginx

  • 修改或增加了配置文件后重启 sudo nginx -s reload

nginx 配置文件

主配置文件是 /etc/nginx/nginx.conf

项目对应的配置文件放到 /etc/nginx/conf.d/*.conf 或者 /etc/nginx/sites-enabled/*

比如 tudo_nginx 文件

upstream tornadoes{
   server 127.0.0.1:8000;   # 本地访问,只用 127.0.0.1
   server 127.0.0.1:8001;
   server 127.0.0.1:8002;
}

proxy_next_upstream error;

server {
   listen 8888;   # 一般是 80
   server_name 127.0.0.1; # 根据实际情况填写对应ip

   location /{
       proxy_pass_header Server;
       proxy_set_header Host $http_host;
       proxy_redirect off;
       proxy_set_header X-Real-IP $remote_addr;
       proxy_set_header X-Scheme $scheme;
       # 把请求方向代理传给tornado服务器,负载均衡
       proxy_pass http://tornadoes;
  }
}

复制到 这个路径下

sudo cp /home/binbin/tornado25/deploy/todo_nginx /etc/nginx/sites-enabled/

常见问题

  1. Linux 目录和文件的操作

  2. 命令的输入 tab 键补全的操作

  3. 按文档操作的顺序 (supervisord 没有启动的报错)

  4. supervisor 的 web 管理界面

  5. 配置文件修改定制应用的套路

  6. nginx 配置解释,conf 文件的作用

  7. vim 的使用和 sudo

  8. 为什么要用 nginx

潭州课堂25班:Ph201805201 tornado 项目 第十二课 项目部署(课堂笔记)的更多相关文章

  1. 潭州课堂25班:Ph201805201 django 项目 第二十六课 docker简介 (课堂笔记)

    官方文档: https://docs.docker.com/install/linux/docker-ce/ubuntu/#set-up-the-repository 1,更新下sudo apt-ge ...

  2. 潭州课堂25班:Ph201805201 django 项目 第二十二课 文章主页 新闻列表页面滚动加载,轮播图后台实现 (课堂笔记)

    新建static/js/news/index.js文件 ,主要用于向后台发送请求, // 新建static/js/news/index.js文件 $(function () { // 新闻列表功能 l ...

  3. 潭州课堂25班:Ph201805201 django 项目 第十八课 前台 注解 (课堂笔记)

    在静态文件 js/user上当下,的 auth.js 文件中 $(function () { let $username = $('#user_name'); // 选择id为user_name的网页 ...

  4. 潭州课堂25班:Ph201805201 爬虫高级 第十二 课 Scrapy-redis分布 项目实战 (课堂笔记)

    建代理池, 1,获取多个网站的免费代理IP, 2,对免费代理进行检测,>>>>>携带IP进行请求, 3,检测到的可用IP进行存储, 4,实现api接口,方便调用, 5,各 ...

  5. 潭州课堂25班:Ph201805201 django框架 第十二课 自定义中间件,上下文处理,admin后台 (课堂笔记)

    中间件 在项目主目录下的配置文件 在项目主目录下创建文件 写个自定义异常处理 方法1 要让其生效,要在主目录下,的中间件中进行注册 主目录下.该文件名.类名 在进入视图函数之前进行判断,  给 req ...

  6. 潭州课堂25班:Ph201805201 爬虫基础 第十四课 js破解 (课堂笔记)

    打断点 找要的数据 鼠标的点击事件 新浪微博登录 表单提交分析 : 先佃输入错误密码开始调式 f10 往下走, f11 进入函数 sh + f11 跳出函数 # -*- coding: utf-8 - ...

  7. 潭州课堂25班:Ph201805201 爬虫基础 第十二课 点触验证码二 (课堂笔记)

    为上次代码添加 模拟人操作 的鼠标的移动轨迹 # -*- coding:utf-8 -*- # 斌彬电脑 # @Time : 2018/9/14 0014 上午 8:08 from selenium ...

  8. FromBottomToTop第十二周项目博客

    FromBottomToTop第十二周项目博客 本周项目计划 设计整体架构,收集素材,制作出静态界面部分 项目进展 已完成游戏整体架构设计 已完成游戏界面.背景音乐等素材的收集 正在进行静态界面部分的 ...

  9. 潭州课堂25班:Ph201805201 django 项目 第五课 静态页面转为模板 (课堂笔记)

    一.分析静态页面   1.静态vs动态 条目 静态页面 动态页面 网站内容 固定不变 经常变动 浏览器加载速度 更快(无需向服务器发起请求) 更慢 改变网站内容 很难(修改或者创建新的html页面) ...

随机推荐

  1. nginx日志相关的查询

    IP相关统计 统计IP访问量(独立ip访问数量) awk '{print $1}' access.log | sort -n | uniq | wc -l 查看某一时间段的IP访问量(4-5点) gr ...

  2. halcon预处理函数

    颜色空间变换 trans_from_rgb(ImageRed, ImageGreen, ImageBlue :ImageResult1, ImageResult2, ImageResult3 : Co ...

  3. c/c++学习系列之memset()函数

    [转载] memset 函数是内存赋值函数,用来给某一块内存空间进行赋值的: 包含在<string.h>头文件中,可以用它对一片内存空间逐字节进行初始化: 原型为 : void *mems ...

  4. matlab里面如何保留小数特定位数

    [转载]Matlab取整函数有: fix, floor, ceil, round.取整函数在编程时有很大用处. 一.取整函数 1.向零取整(截尾取整) fix-向零取整(Round towards z ...

  5. “HtmlAgilityPack”已拥有为“System.Net.Http”定义的依赖项的解决方案

    #事故现场 在vs2013上用nuget安装 HtmlAgilityPack -Version 1.8.9时,报错如下: Install-Package : “HtmlAgilityPack”已拥有为 ...

  6. MySQL数据库学习2 - 数据库的操作

    一.系统数据库 二.创建数据库 三.数据库相关操作 四.了解内容 一.系统数据库 执行如下命令,查看系统库 show databases; information_schema: 虚拟库,不占用磁盘空 ...

  7. apache中 sed 指定文件中某字符串增加行

    #!/bin/bash #在 servername 域名 字符串后面添加指定字符串 servername=`grep ServerName httpd-vhosts.conf |awk '{print ...

  8. vue之生命周期函数例子

    执行代码看生命周期函数的执行顺序 <!-- 根组件 --> <!-- vue的模板内,所有内容要被一个根节点包含起来 App.vue --> <template> ...

  9. IDEA15 下运行Scala遇到问题以及解决办法

    为了让Scala运行起来还是很麻烦,为了大家方便,还是记录下来: 1.首先我下载的是IDEA的社区版本,版本号为15. 2.下载安装scala插件: 2.1 进入设置菜单. 2.2 点击安装JetBr ...

  10. python:函数和循环判断

    输出显示 先说一下最基础的输出: print('hello world') 唯一值得提到是字符串的format函数. format函数代替了C中的%s. print('{0} say:{0} {1}. ...