Shell中并没有真正意义的多线程,要实现多线程可以启动多个后端进程,最大程度利用cpu性能。

直接看代码示例吧。

(1) 顺序执行的代码

  1. #!/bin/bash
  2. date
  3. for i in `seq `
  4. do
  5. {
  6. echo "sleep 5"
  7. sleep
  8. }
  9. done
  10. date

输出:

  1. Sat Nov :: CST
  2. sleep
  3. sleep
  4. sleep
  5. sleep
  6. sleep
  7. Sat Nov :: CST

(2) 并行代码

使用'&'+wait 实现“多进程”实现

  1. #!/bin/bash
  2. date
  3. for i in `seq `
  4. do
  5. {
  6. echo "sleep 5"
  7. sleep
  8. } &
  9. done
  10. wait ##等待所有子后台进程结束
  11. date

输出:

  1. Sat Nov :: CST
  2. sleep
  3. sleep
  4. sleep
  5. sleep
  6. sleep
  7. Sat Nov :: CST

(3) 对于大量处理任务如何实现启动后台进程的数量可控?

  简单的方法可以使用2层for/while循环实现,每次wait内层循环的多个后台程序执行完成

  但是这种方式的问题是,如果内层循环有“慢节点”可能导致整个任务的执行执行时间长。

  更高级的实现可以看(4)

(4) 使用命名管道(fifo)实现每次启动后台进程数量可控。

  1. #!/bin/bash
  2.  
  3. function my_cmd(){
  4. t=$RANDOM
  5. t=$[t%]
  6. sleep $t
  7. echo "sleep $t s"
  8. }
  9.  
  10. tmp_fifofile="/tmp/$$.fifo"
  11. mkfifo $tmp_fifofile # 新建一个fifo类型的文件
  12. exec <>$tmp_fifofile # 将fd6指向fifo类型
  13. rm $tmp_fifofile #删也可以
  14.  
  15. thread_num= # 最大可同时执行线程数量
  16. job_num= # 任务总数
  17.  
  18. #根据线程总数量设置令牌个数
  19. for ((i=;i<${thread_num};i++));do
  20. echo
  21. done >&
  22.  
  23. for ((i=;i<${job_num};i++));do # 任务数量
  24. # 一个read -u6命令执行一次,就从fd6中减去一个回车符,然后向下执行,
  25. # fd6中没有回车符的时候,就停在这了,从而实现了线程数量控制
  26. read -u6
  27.  
  28. #可以把具体的需要执行的命令封装成一个函数
  29. {
  30. my_cmd
  31. } &
  32.  
  33. echo >& # 当进程结束以后,再向fd6中加上一个回车符,即补上了read -u6减去的那个
  34. done
  35.  
  36. wait
  37. exec >&- # 关闭fd6
  38. echo "over"

参考:http://lawrence-zxc.github.io/2012/06/16/shell-thread/

linux shell 多线程执行程序的更多相关文章

  1. [转]linux shell 多线程实现

    情景 shell脚本的执行效率虽高,但当任务量巨大时仍然需要较长的时间,尤其是需要执行一大批的命令时.因为默认情况下,shell脚本中的命令是串行执行的.如果这些命令相互之间是独立的,则可以使用“并发 ...

  2. shell多线程(2)之基于管道实现并发

    在shell脚本里批量执行程序是比较常见的方式,如果程序很多,每个执行时间比较长,则顺序执行需要花费大量的时间. 此时并发就成为我们考虑的方向. 上篇<shell多线程>中我们已经简单实现 ...

  3. Linux Shell脚本教程

    v\:* {behavior:url(#default#VML);} o\:* {behavior:url(#default#VML);} w\:* {behavior:url(#default#VM ...

  4. 【原】用PHP搭建基于swoole扩展的socket服务(附PHP扩展的安装步骤及Linux/shell在线手册)

    最近公司的一项目中,需要用PHP搭建一个socket服务. 本来PHP是不适合做服务的,因为和第三方合作,需要采用高效而稳定的TCP协议进行数据通信.经过多次尝试,最终选择了开源的PHP扩展:swoo ...

  5. 详细介绍Linux shell脚本基础学习

    Linux shell脚本基础学习这里我们先来第一讲,介绍shell的语法基础,开头.注释.变量和 环境变量,向大家做一个基础的介绍,虽然不涉及具体东西,但是打好基础是以后学习轻松地前提.1. Lin ...

  6. Linux Shell 笔记

    1.查看进程的环境变量 普通:$cat /proc/1642/environ  换行:$cat /proc/1642/environ | tr '\0' '\n' tr的命令格式是tr SET1 SE ...

  7. Linux Shell编程、变量、控制语句

    为什么要学习Shell编程 1)Linux运维工程师在进行服务器集群管理时,需要编写Shell程序来进行服务器管理. 2)对于JavaEE和Python程序员来说,工作的需要,你的老大会要求你编写一些 ...

  8. Linux Shell 程序调试

    Linux Shell 程序调试 Shell程序的调试是通过运行程序时加入相关调试选项或在脚本程序中加入相关语句,让shell程序在执行过程中显示出一些可供参考的“调试信息”.当然,用户也可以在she ...

  9. Linux Shell编程与编辑器使用详解

    <Linux Shell编程与编辑器使用详解> 基本信息 作者: 刘丽霞 杨宇 出版社:电子工业出版社 ISBN:9787121207174 上架时间:2013-7-22 出版日期:201 ...

随机推荐

  1. css页面点击文字出现蓝色底色去掉方法

    -moz-user-select: none; /*火狐*/     -webkit-user-select: none; /*webkit浏览器*/     -ms-user-select: non ...

  2. 修改ubuntu DNS的步骤(图文)

    有时候连接上VPN服务器后,还是打不开某些网站,这时候,需要对DNS进行更改,一般是修改成为谷歌提供的免费DNS:8.8.8.8  8.8.4.4,在windows下更改比较简单(点击查看“连接上VP ...

  3. android4.3 Bluetooth(le)分析之startLeScan分析

    BluetoothAdapter.java中有low enery(le)的一些方法,android提供了这些方法,但源码中并未找到这些方法的调用之处.本文档主要分析这类方法的执行流程,来了解下le到底 ...

  4. jsp 和jspf

    http://www.cnblogs.com/liaojie970/p/5035077.html

  5. java操作word,excel,pdf

    在平常应用程序中,对office和pdf文档进行读取数据是比较常见的功能,尤其在很多web应用程序中.所以今天我们就简单来看一下java对word.excel.pdf文件的读取.本篇博客只是讲解简单应 ...

  6. 开不了的窗_____window.open

    window.open()是原来常用的新开窗口的方式,但是呢,现在会被大多数浏览器阻止掉,默认为是非用户意愿的打开窗口,即广告之类的. 但是通过a链接的事件来open是可以的,因为这样会认为是用户主观 ...

  7. 【状压dp】【bitset】bzoj1688 [Usaco2005 Open]Disease Manangement 疾病管理

    vs(i)表示患i这种疾病的牛的集合. f(S)表示S集合的病被多少头牛患了. 枚举不在S中的疾病i,把除了i和S之外的所有病的牛集合记作St. f(S|i)=max{f(S)+((St|vs(i)) ...

  8. 冒泡排序优化JAVA

    本文对传统的冒泡排序进行了一些优化,减少了循环次数. 时间复杂度 若文件的初始状态是正序的,一趟扫描即可完成排序.所需的关键字比较次数 C 和记录移动次数 M 均达到最小值: C(min)=n-1 , ...

  9. zabbix监控tomcat

    服务端配置修改 编译zabbix的时候需要添加参数--enable-java --enable-java 修改zabbix_java配置文件 vim /usr/local/zabbix-2.4.6/s ...

  10. 如何评估ETL的数据加载时间

    简述如何评估大型ETL数据加载时间. 答:评估一个大型的ETL的数据加载时间是一件很复杂的事情.数据加载分为两类,一类是初次加载,另一类是增量加载. 在数据仓库正式投入使用时,需要进行一次初次加载,而 ...