运行多个Tornado实例

  • 网页响应不是特别的计算密集型处理

  • 多个实例充分利用 CPU

  • 多端口怎么处理

  • Linux 常见应用服务配置模式 nginx 和 supervisord:采用主配置文件 + 项目配置文件

使用Supervisor监控Tornado进程

安装(如果用pip安装注意看是否需要指定使用python2版本)

supervisor 默认只支持 Python2

sudo apt-get install supervisor

或者 激活 Python3 的 virtualenv 后执行,安装支持 Python3 版本的 supervisor

pip install git+https://github.com/Supervisor/supervisor.git

  • 检查主配置文件 deploy/supervisord.conf (如果目录不存在需要创建)

  • 使用命令生成一个主服务配置文件 echo_supervisord_conf > deploy/supervisord.conf (如果没有 deploy 目录就建立)

    检查是否 inculde 配置,没有就加上

    [include]
    files = super/*.conf

    如果 sudo 没有权限就用当前目录生成,然后

    sudo cp deploy/supervisord.conf /etc/supervisor/supervisord.conf 过去

  • 增加 Supervisor 项目运行配置文件(名字如 tudo_super.conf)到 /etc/supervisor/super

  • 把这个文件复制到到  /etc/supervisor/super 下
  • sudo cp deploy/todo_super.conf /etc/supervisor/super
  • 找到启动目录
  • 到项目目录下 pwd 打印出路径
  • 还要找到 python 的路径

    which python

todo_super.conf 文件, 这里要改的是 程序启动路径,启动命令

# 增加一个tornadoes组
[group:tornadoes]
programs = tornado-,tornado-,tornado- # 分别定义三个tornado的进程配置 [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8000.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8001.log
loglevel = info [program:tornado-]
directory = /home/binbin/tornado25/; 程序的启动目录
command = /home/binbin/.virtualenvs/tornado_1/bin/python /home/binbin/tornado25/app.py --port= ; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = ; 启动 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = ; 启动失败自动重试次数,默认是
user = binbin ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8002.log
loglevel = info

启动和管理

启动supervisor

一定要先启动 daemon 程序 (supervisord) 才能执行管理操作,否则会报错

使用默认的主配置文件/etc/supervisor/supervisord.conf

sudo supervisord

明确指定主配置文件

sudo supervisord -c /home/pyvip/working/supervisord.conf 使用 user 用户启动supervisord

使用 user 用户启动supervisord

sudo supervisord -u user

查看、操作进程状态

(tornado) pyvip@Vip:~/ws/tudo$ sudo supervisorctl [sudo] password for pyvip: tornadoes:tornado-8000 RUNNING pid 17652, uptime 0:00:28 tornadoes:tornado-8001 RUNNING pid 17653, uptime 0:00:28 tornadoes:tornado-8002 RUNNING pid 17654, uptime 0:00:28

# 停止运行tornado-8001服务器进程 supervisor> stop tornadoes:tornado-8001 tornados:tornado-8001: stopped

# 停止运行整个tornado服务器进程组

supervisor> stop tornadoes: tornadoes:tornado-8000: stopped tornadoes:tornado-8001: stopped tornadoes:tornado-8002: stopped supervisor> status tornadoes:tornado-8000 STOPPED Jun 26 07:43 PM tornadoes:tornado-8001 STOPPED Jun 26 07:43 PM tornadoes:tornado-8002 STOPPED Jun 26 07:43 PM

supervisorctl 命令介绍

停止某一个进程,program_name 为 [program:x] 里的 x supervisorctl stop program_name 启动某个进程 supervisorctl start program_name 重启某个进程 supervisorctl restart program_name 结束所有属于名为 groupworker 这个分组的进程 (start,restart 同理) supervisorctl stop groupworker: 结束 groupworker:name1 这个进程 (start,restart 同理) supervisorctl stop groupworker:name1 停止全部进程,注:start、restart、stop 都不会载入最新的配置文件 supervisorctl stop all 载入最新的配置文件,停止原有进程并按新的配置启动、管理所有进程 supervisorctl reload 根据最新的配置文件,启动新配置或有改动的进程,配置没有改动的进程不会受影响而重启 supervisorctl update

使用 Nginx 作为反向代理

搭配 tornado 服务使用

安装和运行

  • 安装 sudo apt-get install nginx

  • 检测配置文件正确可用 sudo nginx -t

  • 运行 sudo nginx

  • 修改或增加了配置文件后重启 sudo nginx -s reload

nginx 配置文件

主配置文件是 /etc/nginx/nginx.conf

项目对应的配置文件放到 /etc/nginx/conf.d/*.conf 或者 /etc/nginx/sites-enabled/*

比如 tudo_nginx 文件

upstream tornadoes{
   server 127.0.0.1:8000;   # 本地访问,只用 127.0.0.1
   server 127.0.0.1:8001;
   server 127.0.0.1:8002;
}

proxy_next_upstream error;

server {
   listen 8888;   # 一般是 80
   server_name 127.0.0.1; # 根据实际情况填写对应ip

   location /{
       proxy_pass_header Server;
       proxy_set_header Host $http_host;
       proxy_redirect off;
       proxy_set_header X-Real-IP $remote_addr;
       proxy_set_header X-Scheme $scheme;
       # 把请求方向代理传给tornado服务器,负载均衡
       proxy_pass http://tornadoes;
  }
}

复制到 这个路径下

sudo cp /home/binbin/tornado25/deploy/todo_nginx /etc/nginx/sites-enabled/

常见问题

  1. Linux 目录和文件的操作

  2. 命令的输入 tab 键补全的操作

  3. 按文档操作的顺序 (supervisord 没有启动的报错)

  4. supervisor 的 web 管理界面

  5. 配置文件修改定制应用的套路

  6. nginx 配置解释,conf 文件的作用

  7. vim 的使用和 sudo

  8. 为什么要用 nginx

潭州课堂25班:Ph201805201 tornado 项目 第十二课 项目部署(课堂笔记)的更多相关文章

  1. 潭州课堂25班:Ph201805201 django 项目 第二十六课 docker简介 (课堂笔记)

    官方文档: https://docs.docker.com/install/linux/docker-ce/ubuntu/#set-up-the-repository 1,更新下sudo apt-ge ...

  2. 潭州课堂25班:Ph201805201 django 项目 第二十二课 文章主页 新闻列表页面滚动加载,轮播图后台实现 (课堂笔记)

    新建static/js/news/index.js文件 ,主要用于向后台发送请求, // 新建static/js/news/index.js文件 $(function () { // 新闻列表功能 l ...

  3. 潭州课堂25班:Ph201805201 django 项目 第十八课 前台 注解 (课堂笔记)

    在静态文件 js/user上当下,的 auth.js 文件中 $(function () { let $username = $('#user_name'); // 选择id为user_name的网页 ...

  4. 潭州课堂25班:Ph201805201 爬虫高级 第十二 课 Scrapy-redis分布 项目实战 (课堂笔记)

    建代理池, 1,获取多个网站的免费代理IP, 2,对免费代理进行检测,>>>>>携带IP进行请求, 3,检测到的可用IP进行存储, 4,实现api接口,方便调用, 5,各 ...

  5. 潭州课堂25班:Ph201805201 django框架 第十二课 自定义中间件,上下文处理,admin后台 (课堂笔记)

    中间件 在项目主目录下的配置文件 在项目主目录下创建文件 写个自定义异常处理 方法1 要让其生效,要在主目录下,的中间件中进行注册 主目录下.该文件名.类名 在进入视图函数之前进行判断,  给 req ...

  6. 潭州课堂25班:Ph201805201 爬虫基础 第十四课 js破解 (课堂笔记)

    打断点 找要的数据 鼠标的点击事件 新浪微博登录 表单提交分析 : 先佃输入错误密码开始调式 f10 往下走, f11 进入函数 sh + f11 跳出函数 # -*- coding: utf-8 - ...

  7. 潭州课堂25班:Ph201805201 爬虫基础 第十二课 点触验证码二 (课堂笔记)

    为上次代码添加 模拟人操作 的鼠标的移动轨迹 # -*- coding:utf-8 -*- # 斌彬电脑 # @Time : 2018/9/14 0014 上午 8:08 from selenium ...

  8. FromBottomToTop第十二周项目博客

    FromBottomToTop第十二周项目博客 本周项目计划 设计整体架构,收集素材,制作出静态界面部分 项目进展 已完成游戏整体架构设计 已完成游戏界面.背景音乐等素材的收集 正在进行静态界面部分的 ...

  9. 潭州课堂25班:Ph201805201 django 项目 第五课 静态页面转为模板 (课堂笔记)

    一.分析静态页面   1.静态vs动态 条目 静态页面 动态页面 网站内容 固定不变 经常变动 浏览器加载速度 更快(无需向服务器发起请求) 更慢 改变网站内容 很难(修改或者创建新的html页面) ...

随机推荐

  1. Django 2.0.4 微博第三方登录

    三方登录逻辑 理解第三方登录的流程: 用户向本地应用商城发起请求,我要用微博进行登录 我们的商城凑一个url让用户跳转到第三方应用的url(微博的登录页面) 用户在该界面点击输入用户名密码之后,点击授 ...

  2. 解决每次从cmd进入sqlplus,都得重新设置pagesize、linesize的问题

    https://blog.csdn.net/u012127798/article/details/34146143/ Oracle里的set零零碎碎的,这里整理归纳一下 SQL> set tim ...

  3. 结合别人的文章,做RocketMQ的一点原理分析,结合源码(尽量)----未完待续

    Broker 与Namesrv的关系 1.从namesrv获取配置信息 /** * BrokerConfig类 * * broker每隔30秒(此时间无法更改)向所有nameserver发送心跳,心跳 ...

  4. mysql My SQL获取某个表的列名

    My SQL获取某个表的列名 DESC TableName SHOW COLUMNS FROM TableName SELECT COLUMN_NAME  FROM information_schem ...

  5. [Luogu P1144]最短路计数

    emmmm这个题看起来非常复杂,实际上仔细一分析发现到一个点最短路的个数就是所有前驱最短路个数之和.如果在图上表示也就是以1为根的bfs搜索树,一个点的最短路个数等于每一个能够向它扩展的所有点的最短路 ...

  6. on duplicate key update简单使用

    1.最近在做项目的时候,遇到这样的一个问题,就是我每做完一件事情,都要更新一下统计表,然而要更新统计表,就要根据主键去统计表里面去查询是否已经有这样的一条记录,如果有那么就更新,如果没有那么就插入一条 ...

  7. mask rcnn

    Mask RCNN Mask RCNN 中主要改进是在faster rcnn中box regression 的branch 上加入mask prediction branch,能够得到点到点的预测. ...

  8. Contest2161 - 2019-3-21 高一noip基础知识点 测试4 题解版

    传送门 预计得分:100+100+100+10=310 实际得分:100+0+82+10=192 你们基础知识不行啊——by wxg T1 一看数据范围就是搜索 但是不能因为数据范围就断送了dp的心 ...

  9. Java中谈尾递归--尾递归和垃圾回收的比较

    一.首先我们讲讲递归 1.递归的本质是,某个方法中调用了自身,本质还是调用了一个方法,只是这个方法正好是自身而已 2.递归因为是在自身中调用自身,所以会带来以下三个显著特点:    1.调用的是同一个 ...

  10. 【Java】Java随手记

    System.out.printf() : System.out.printf("%d",x);               输出整数 System.out.printf(&quo ...