1. .巧用bash的{}扩展备份目录:
  2. cp file.txt{,.bak}
  3. .利用at执行一次性命令:
  4. echo "ls -l" | at midnight #Execute a command at a given time
  5. .kill - 或者 kill -HUP 一般用来重新读取配置文件:(一般程序自己实现的)
  6. HUP 其实就是给个信号,你的程序可以根据这个信号做一些事情,比如reload进程,或者是rotota日志。例如 squidNginxxinetd
  7. kill就是发送一个信号,而各种信号一般都有默认的意义,但是各个软件不一样。比如ping在遇到3信号的时候就会输出统计。
  8. nohup,就是对应的这个信号 HUP
  9. .Read-only file system:文件系统只读
  10. 如果/data在/分区上:mount -o remount /data,其实/分区也可以remount的,只是不能umount
  11. 原因:磁盘io很高、硬盘挂掉、死机等
  12. mount -o remount,rw /data rw好像是预设值,既然有nodiratimne,加上noatime
  13. .巧用正则的匹配位置 RSTART 和匹配长度 RLENGTH 寻找子串:
  14. $ echo 'QWADGDABCfooDGJDJLGJWLJABCbarGLDABCwhyJGKABCkkJGJKDJGLABCtnndJDK'|、
  15. awk '{while(match($0,/ABC/)){print substr($0,RSTART);$0=substr($0,RSTART+RLENGTH)}}'
  16. .多次调用 -k 实现多次排序:
  17. sort -t -k1, #sort -k中的.表示按指定域中的第几个字符来排序
  18. .重启网络用sudo /etc/init.d/networking restart,或者ifdown eth0 ifup eth0,注意要一起执行,否则你网络就断了。
  19. .二进制文件编辑不要用vi,你保存后会在最后加换行,会破坏这个文件。vi会检查文件,如果没换行,会加上,二进制文件最后一般都没换行的。
  20. 你复制个/bin/ls,用vi打开,什么都不做,保存,wc -c看下,多一个字符。
  21. .EOF 不是字符,EOF是个信号,告诉程序没了。
  22. .保留相邻重复行:
  23. echo "aaa
  24.  
  25. aaa"|awk 'a[$1]&&NR!=a[$1]+1{next}{a[$1]=NR}1'
  26. .man cat出现 ^H 字符:
  27. man cat |col -b > cat-help :^H是高亮显示用的
  28. echo 'a^Ha'|lessa就高亮了,^H是按ctrl+v,再ctrl+h输入的
  29. BTW:为何退格出现 ^H :打字机时代,要加亮一个字符,操作方法是敲一次字符,回退,然后再重复敲一遍。(见维基百科)
  30. .IFS设为换行符:IFS=$'\n'
  31. .利用 find -prune 限制查找多个目录:
  32. find / \( -path /root/decli -o -path /data/robinechen -o -path /data/yunwei \) -prune -o -type f -name "*vim*" -print
  33. .巧用逻辑操作打印 rm 的报错状态:
  34. rm a || echo error &
  35. rm a & ; [ $? -ne ] && echo error # 实际上即使 rm a 出错,也不能打印出 error
  36. .巧设RS合并行:
  37. echo
  38. \n
  39.  
  40. awk -v RS='\0' -F'\\\\n\n' '{for(i=1;i<=NF;i++){printf $i}}'
  41. .获取进程列表及进程路径:
  42. netstat -nlp|awk -F '[ ]+|/' 'NR>2{if($0 ~/Active UNIX/){exit};res=gensub(".* +([0-9]+)/[^/]+","\\1",1,$0);a[res]}END{for(i in a){print i}}'|xargs -I {} ls -l /proc/{}|grep -E 'exe|cwd'|awk '{print}NR%2==0{print ""}'
  43. .cut 也有输出分隔符:
  44. echo -d' ' --output-delimiter=o
  45. .deletebackspace都无效:reset 或者 stty cooked 试试
  46. .linux下创建 dvd ISO 镜像:
  47. dd if=/dev/cdrom of=~/cdimage.iso
  48. .利用bash转义改变grep搜索颜色:
  49. echo $'\e'[31m; grep "$1" aaa; echo $'\e'[37m
  50. .打印第2行到倒数第2行:sed '1d;$d'
  51. .关于 kill - 进程杀不掉:
  52. ps -eo stat,pid,cmd|grep httpd,看下进程状态
  53. D了,通常是IO导致的深度睡眠,lsof看下在干嘛,
  54. kill -9也杀不掉?恩,DZ都是-9杀不掉的,D只能等io结束。
  55. .seq -s 设置序列分隔符:
  56. seq -s, #echo {..},|sed 's/,$\| //g'
  57. seq -s, |awk '{for(i=1;i<=9;i++)print gensub(i,"null",1,$0)}'
  58. .通过多次的幂运算将CPU迅速撑到 %:
  59. ^^|bc &>/dev/null ;done # 多核的话需要起多个进程丢到后台
  60. .linux下如何打印出指定进程的进程树,而不是pstree打印全部的:pstree -ps pid
  61. .sort 如果用-k指定了的话,那么n就要后置,如 sort -k2, -k1rn
  62. .paste 把标准输入按列拼接成行:
  63. seq |paste - - - - - # xargs -n5
  64. 注意:不同于多个输入:paste <(seq ) <(seq )
  65. .expect send密码之前有些系统需要 sleep 一下或者 ,否则导致密码在提示之前捕获而报错,可以expect -d 调试下
  66. .删除 windows 下的 ^M 回车换行符:
  67. tr -d '[:cntrl:]' dos2unixtr -d \\rsed -i '/^M/d' # ctrl -v -M
  68. .统计文件夹大小:
  69. du -hx --max= du -sk du -hsc
  70. .关于shell/awk的随机数:
  71. 随机数伪随机,是根据随机种子计算出来的,随机种子确定,随机数就确定。
  72. awk的随机种子默认是当天的天数。那怎么修改这个随即种子?srand()
  73. 一般用纳秒做随机种子,不过好像awk只能获取到秒,就是同一秒执行的话随机数还是一样的。
  74. 随机数是可能有重复的,因为是随机产生的。
  75. .一个文件末尾没有换行符,怎么加个换行符:$'\n'
  76. tail -c -1判断,如果不是换行,就echo >>加一个,
  77. 或者你这样,先echo >>,然后在去掉空行,这样就不用判断了
  78. 很多windows编辑软件会很“贴心”得去除文件最后一个换行,vim是会很贴心的加上最后一个换行,除非是空文件,不动。
  79. .关于shell解析一次,awk再解析一次转义符的例子:
  80. awk 'BEGIN{print "\\("}' # 双引号内的\\( 被shell解析了一个
  81. \(
  82. echo "1(2)3"|awk -F '\\(2' '{print $2}' # ( 不转义是组合
  83. )
  84. awk "BEGIN{print '1'}" # awk以单引号为分隔符,所以里面不能用单引号。除非你用""去掉单引号的作用,就像shell下一样
  85. awk: ^ invalid char ''' in expression
  86. .巧用 RS、RT 匹配双引号段,去掉非双引号空格:
  87. echo 'abc 234 fsdfds 555 "34 666 53242 " asaf tttttt'|awk -vRS='"[^"]+"' '{gsub(/ +/," ");printf $0 RT}'
  88. abc fsdfds "34 666 53242 " asaf tttttt # 注意双引号要偶数个出现,RT 会针对每一行进行动态变化。
  89. .base64 的编码与解码:base64 -d <<<anVuZV8xMjAxQHFxLmNvbQo=
  90. .用find 找到几千个文件,然后想用 xargs 结合 tar打包,为什么tar包里面只有部分数据:
  91. xargs --show-limits看下,如果你的命令超过命令行长度限制,会自动切分,用tar -r,这样就好了
  92. .rsync 显示远端服务器目录列表:rsync -avz dst
  93. .linux 下 .so文件找不到 一般是ld的cache目录没更新,执行了一下ldconfig,就正常了。
  94. .变量不加双引号在某些特定情况下被解析为 IFS 而显示为空:
  95. a="";echo $a|xxd ;a=$'\n';echo $a|xxd ;a=" ";echo $a|xxd
  96. 空格和\n都是IFS,所以echo $a=echo, 所以要用"$a",因为不加双引号,空格被认为是IFS,跳过,因为只有零个参数,所以结果就是空
  97. .用 read -N1 捕获 回车符 \n:
  98. read -N3 a
  99. echo "$a" && echo "$a"|xxd
  100. .sed 中行范围扩展匹配:
  101. seq | sed -e{,,,}'s/.*/--/' #行范围不固定的扩展匹配
  102. .sort -g 把科学计数法按普通数字排序
  103. .删除乱码:LANG=C tr
  104. .seq 等宽并指定分隔符: seq -w -s,
  105. 用echo 或者 ;i<=;i++)); }; done 或者 printf 格式化
  106. .sort -k n.m 按某列字符排序:sort -k .2n #第一列按字典排,第二列之后按数字排
  107. .shell变量为了防止 word split,需要加上引号:
  108. june@~ ::>
  109. a=`echo -e "1\n2"` && echo $a
  110.  
  111. june@~ ::>
  112. echo "$a"
  113.  
  114. june@~ ::>
  115. .找出bash数组是否有元素“匹配”(不是存在)给定字符串:
  116. a=( abc) && [[ "${a[@]}" =~ 'ab' ]] && echo '------match' # 也可以用 grep -q
  117. .合并前两列:sed -r 's/\s+//'
  118. .awk的asorti 是把下标按字典排序,可以得到新的下标数组与数组长度,二次引用即可获取原数组 value
  119. awk '{n=$1;getline;h[n]=h[n]"\n"$1}END{n=asorti(h,s);for(c=1;c<=n;c++)print s[c]":"h[s[c]]"\n=="}'
  120. 要数字排序需要把下标拿出来用 asort 函数,然后进行二次引用
  121. .awk 跨行匹配,并用gsub替换返回匹配次数:
  122. awk .text
  123. .grep -A -B实现连续多行匹配:
  124. seq |grep -A1 |grep -B1 ^
  125. awk -vk1="abc" -vk2="efg" '{c++}$0~k1"$"{c++;getline n;if(match(n,"^"k2))print c-1":"$0"\n"c":"n}' filename
  126. .关于 crontab 的星期和 月日的 and or 关系:
  127. * * dosomething , 是每周一3点半执行是确信无疑的了。
  128. * dosomething , 是当1号是周一的时候执行吗?不是!是1号,或者周一的时候执行。
  129. crontab中的星期和日、月是一个“或”的概念,而非“和”的概念。
  130. .awk、sed的缓冲问题:
  131. man awk :fflush([file]) #awk 不是,与系统缓存与文件大小有关。
  132. man sed :-u, --unbuffered #sed 是因为他是行缓冲方式,遇到换行就会输出。
  133. .sed N P D 的解释:
  134. 首先;你加了-n参数,不会默认输出pattern space里的内容,只有p或者P操作才会打印,你先清楚这点.
  135. 当第一行的时候,N读取下一行,注意这时候的行号已经是2了,PS里的内容是 \n2;
  136. 因为不是第4行,所以不执行{ } 里的操作,执行完毕,因为-n参数不会输出PS里的内容.
  137. 这时候继续执行,已经是第三行了,因为第二行读走了,N操作,PS里的内容是3\n4,这时候行号是4,
  138. 满足4{P;D}条件,执行P,请查阅sed资料,P是打印PS里第一行的内容,那就是3输出到了屏幕.
  139. .cp mv rm,默认都是不提示,加-i才提示,这三个命令的-f参数都不一样,好好看看。
  140. ::#tp#~> rm -f addsf
  141. ::#tp#~> rm -f addsf
  142. ::#tp#~> rm addsf
  143. rm: 无法删除"addsf": 没有那个文件或目录
  144. ::#tp#~> rm -i addsf
  145. rm: 无法删除"addsf": 没有那个文件或目录
  146. ::#tp#~>
  147. rm -f是不提示不存在的文件,rm 默认就是不提示是否删除,加上-i才是提示是否删除
  148. .awk的精度问题:
  149. awk 'BEGIN{print OFMT;print 1335533180.170077-1335533180.169424;OFMT="%f";print OFMT;print 1335533180.170077-1335533180.169424}'
  150. %.6g
  151. 0.000653028
  152. %f
  153. 0.000653
  154. .head 和 tail 的正负数既可表示开头也可表示取到结尾xx处:
  155. head -c - # 除去一个文件的最后两个字节,也可以 dd 或者 sed '$s/..$//'
  156. .查看文件以回车换行结尾:set fileformat 或者 xxd
  157. 换行符 \n ^j 0a LF
  158. 回车符 \r ^M 0d CR
  159. 如果是mac,用回车做换行符,那么你直接cat是看不到换行的。
  160. .awk 索引index asorti 是按字典排序,因此如果数字的话以对齐位数后再排序:
  161. a[sprintf("%03d",$n)]
  162. .curl -G 模拟 post/get 请求(默认是 post 方式),--data-urlencode 进行 urlencode 编码
  163. curl -v -L -G --data-urlencode '我们' http://www.baidu.com/s
  164. curl -v -L -G -d "lat=41.225&lon=-73.1" http://localhost:5000/pulse # by default, calls POST. If you want to send a GET request,use -G
  165. .urlencode 编码的其它几种方式:
  166. echo '手机' | tr -d '\n' | xxd -plain | sed 's/\(..\)/%\1/g' # 这里用到了 xxd,python的话有API可以直接调用
  167. .urldecode 编码解码:
  168. printf $(echo -n "http://www.baidu.com/s?wd=%ca%d6%bb%fa" | sed 's/\\/\\\\/g;s/\(%\)\([0-9a-fA-F][0-9a-fA-F]\)/\\x\2/g')"\n"
  169. .stat 查看数字权限:
  170. stat -c %a
  171. .gzip 查看文件压缩完成时间:缺省情况下gzip会保留源文件的时间戳, 所以是查不到你想要的完成时间的
  172. ls -lctr yourfile.gz 或者 gzip -c foo > foo.gz
  173. .cat -v 编码:
  174. ::#tp#~> echo 中|xxd
  175. : e4b8 ad0a ....
  176. ::#tp#~> echo 中|cat -A
  177. M-dM-8M--$
  178. ::#tp#~>
  179. d的十六进制是648的十六进制是38,-的十六进制是2d
  180. V的十六进制是56P的十六进制是50
  181. 其实就是系统的一种对应关系,中文在ascii里面没有,所以就这样表示了
  182. .man的相关用法:
  183. man crontab # 关于 crontab 的日期介绍
  184. man不只是有1个,有1-。man -a crontab 就查全部 man 文档了. man -f crontab,看有哪些帮助文档
  185. man -a crontab,会一个一个man看过去,你按q以后进入下一个man # man man
  186. .rsync复制原理:
  187. rsync 会在命令运行的初始阶段产生一个hash列表,里面列出所有要同步的文件和目录。 如果文件的大小在复制后有改变,
  188. 那么rsync 会尝试重新复制,几次尝试后,如果还是不一致,就会报个错。
  189. .test -n/[ -n ] 问题:
  190. 在[ ]中, 如果只有一个参数, 那这个参数就被当成一个普通的字符串,并用 -n 测试其长度,
  191. 比如, [ -gt ], 相当于 [ -n -gt ],因此注意下面两者区别:
  192. [ -n "" ];echo $? ; [ -n ];echo $?
  193. .SIGNKILL() SIGNTERM() 的区别在于:
  194. SIGNKILL() 的效果是立即杀死进程. 该信号不能被阻塞, 处理和忽略。
  195. SIGNTERM() 的效果是正常退出进程,退出前可以被阻塞或回调处理。并且它是Linux缺省的程序中断信号。
  196. .sort排序会用到临时文件:默认 tmp 空间不足会报错:
  197. sort: write failed: /tmp/xxxxx: No space left on device
  198. linux的指定 -T 参数修改目录或者修改 TMPDIR变量
  199. .printf ascii 与数字转换:
  200. echo "7249 81"|awk '{printf "%c %c\n",$1,$2}' # 为什么结果一样?
  201. echo "7249 81"|awk '{printf "%x %x\n",$1,$2}'
  202. 1c51 # 高位被丢弃了
  203. echo "7249 81" | awk '{printf "%d %d\n",$1%256,$2}'
  204. echo '7249%128'|bc
  205. .显示shell开启了哪些shell标志:
  206. $- The current shell flags, such as -x and -v.
  207. - Expands to the current option flags as specified upon invocation, by the set builtin command,
  208. or those set by the shell itself (such as the -i option).
  209. set [+abefhkmnptuvxBCEHPT] [+o option] [arg ...]
  210. echo $- && set -x && echo $- && set +x && echo $-
  211. .top获取指定id的进程信息,-b 避免输出控制字符:
  212. top -p -n -b|cat -A
  213. .巧用gsub查找单词出现的次数:awk '{print $1,gsub("id","")}'
  214. .脚本手动执行正常,crontab 无法执行:
  215. 由于 crontab 不加载 profile, bashrc之类的环境变量,而这其中受的影响很大比例都是PATH变量
  216. 所以养成好习惯:每个脚本之前就加上加载用户环境变量文件
  217. .chattr 设置权限防止root删除:
  218. -rw-rw-rw- root root May : .my_history
  219. gs_chatlog_2_207:/data # chmod .my_history
  220. chmod: changing permissions of `.my_history': Operation not permitted
  221. gs_chatlog_2_207:/data # whoami
  222. root
  223. gs_chatlog_2_207:/data #
  224. lsattr .my_history
  225. -----a------- .my_history
  226. 解除-a限制:chattr -a 文件名
  227. .awk或perl利用时间戳获取上一天日期:
  228. perl -e 'use POSIX;print strftime("%Y%m%d",localtime(time-86400))'
  229. awk -vnum=- 'BEGIN{print strftime("%Y%m%d",systime()+86400*num)}'
  230. .删除所有的空文件:
  231. find . -maxdepth -size 0c -delete
  232. find . -maxdepth -empty -delete
  233. .vim可以编辑 tar.gz, tgz, zip 等压缩文件:
  234. vim some-archive.tar.gz
  235. .临时忽略 SSH host key:
  236. ssh -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no username@host
  237. When you SSH to a server whose host key does not match the one stored in your local machine's known_hosts file,
  238. you'll get a error like " WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED!" that indicates a key mismatch.
  239. If you know the key has legitimately changed (like the server was reinstalled),
  240. a permanent solution is to remove the stored key for that server in known_hosts.
  241. .找出页面的最后修改时间:
  242. wget -S --spider http://osswin.sourceforge.net/ 2>&1 | grep Mod
  243. Last-Modified: Wed, Feb :: GMT
  244. 或者用 curl 替代:
  245. curl --head -s http://osswin.sourceforge.net | grep Mod
  246. .先把整个文件的内容都显示出来然后再跟踪显示:tail -n+ -f
  247. .find -L 查找链接对应目录:
  248. 链接 /usr/local/my_lib -> /usr/lib/
  249. find -L /usr/local/my_lib -name "*so"
  250. .关于 rsync 的服务端与客户端:
  251. 1.1.1.1:/tmp是走的ssh
  252. 1.1.1.1::/tmp和rsync://1.1.1.1/tmp是rsync服务端
  253. 但是很多配置是ssh不支持的,而且这样你要开帐号,还要开ssh的帐号
  254. 否则直接虚拟帐号,比如debian啊什么的,开的rsync,难道把ssh帐号给你?
  255. 走ssh的话其实就是scp的升级版,少点数据传输。
  256. rsync daemon 的话在 daemon 上控制权限,要开 daemon,ssh 的话 ssh 控制权限,要开ssh
  257. .回车与换行符的终端输出:
  258. ^J \n 0A 换行符
  259. ^M \r 0D 回车符
  260. .BREs, EREs是否支持\s(PREs)和sed是否支持\s没有必然联系, 没规定软件不能扩展自己的匹配方法。
  261. .获取文件的绝对路径:realpath filename # 也可以 pwd + "/" + filename
  262. .tar.gz 不能直接 -r, 要先解压成 tar,再-r,最后再压缩成 tar.gz
  263. .vim 列模式:
  264. 将光标放在需要选择列的第一个字符上,在一般模式中,按下“Ctrl+v”,
  265. 然后使用“↓”或“↑”进行块字符的选择,选中的地方会反白显示,
  266. 可以使用使用“y”进行复制,“p”进行粘贴,“d”进行删除操作。
  267. 或者:
  268. Ctrl-V 选块,然后shift-i,shift-a或者c,x进行改写操作。双击 Esc 退出确认生效。
  269. .read读取标准输入的问题:
  270. while : # 此时 while循环里的块 FD0 已经被 <filename.txt 覆盖,类似局部变量优于全局变量
  271. read # read要读入标准输入可以 read 或者 read var </dev/tty
  272. done < filename.txt
  273. .tcpdump -s0 不限制包长度 抓包:
  274. tcpdump -s0 -w a.pcap host ,然后a.pcap传到本地,用wireshark打开。# wireshark 可以认为是 tcpdump的图形界面
  275. .覆盖文件需要对文件有w权限,删除需要对文件所在目录有w权限,而不需要对文件有w权限:
  276. 一个目录里面有多少文件都是记录在目录项里的。只要让这个目录不包含某个文件,就相当于删除这个文件了。
  277. 所以删文件的实质是:使其所在的目录不再包含这个文件。所以对目录有写权限就行了。
  278. .巧用 !* 匹配单词边界,实现单词字符分割:
  279. sed 's/!*/ /g' <<< 'ab1c2pha' # 非任意字符,即为单词边界,等价于 sed 's/\B/ /g' <<< 'ab1c2pha'
  280. echo "ab1c2pha" |sed 's/./& /g' # sed 's/\w/& /g'
  281. awk -vFS="" '{$1=$1}1' <<< ab1c2pha
  282. .用printf输出一行终端字符:
  283. printf "%$(tput cols)s\n"|tr ' ' '='
  284. .查看某个进程加载的环境变量信息:
  285. tr \\ \\n </proc/$pidxxxxx/environ
  286. 或者如果 unix、freebsd 没有 environ,那就试试下面的:
  287. cmdpid=`pidof cmd` && ps eww -p $cmdpid
  288. .grep -l 实现打印匹配字符串的文件名,匹配并立即退出下一个,awk 的 exit 或者 nextfile 也可以实现。
  289. .将多行变成一行的几种方法:
  290. tr、xargs -n1、awk NF+= ORS=" "、echo $(<file) # paste -s 或者 column 也行
  291. .每两行合并为一行:
  292. sed '$!N;s/\n/ /' urfile
  293. awk '{printf (NR%2)?$0 FS:$0"\n"}' urfile
  294. paste -s -d ' \n' urfile # -d 后面的分隔符是个 list
  295. xargs -n2 < infile
  296. .shell下的8进制转码问题:
  297. ::#tp#~> echo $'\270\264\274\376'
  298. 复件
  299. ::#tp#~>
  300. 这个也可以,我现在把终端编码换到gbk了,就不用iconv了
  301. ::#tp#~> awk
  302. 复件
  303. ::#tp#~> # 直接 echo转不了,这里awk把\\264转换成汉字 ,iconv是转换编码
  304. echo -e '\0270\0264\0274\0376'也可以
  305. 不过还是echo $'\270\264\274\376'方便,不然还要每个\都加个0。# echo $'' 相当于 echo -e ''
  306. 按理说八进制都0开头确实比较好 不过现在好多都可以去掉0 不懂为什么这么不和谐。
  307. bash 了。
  308. 其实 python -c 'print "\270\264\274\376"' 也行。
  309. .xargs -d 支持分隔符:
  310. echo "abc,dd,bach,dong,jing,shang,china,bejing" | xargs -d, -n1
  311. .关于rsync相同文件后 du 大小不一样的问题:
  312. 不一样大小很正常,因为文件系统的block不一样,或者文件系统底层用了压缩什么的。
  313. 因为du是块大小,ls是文件的实际大小,系统的块大小一般为4KB,
  314. 所以du的文件一般比ls的结果要大,而且系统块大小可以更改。
  315. .查看系统块大小:
  316. tune2fs -l /dev/sda1 | grep Block
  317. .vi -u NONE -N 打开超大文件:
  318. 关掉所有vim插件,用非兼容模式打开,否则语法分析等操作很占资源的
  319. .shell整数运算支持自增运算:
  320. ((s+=++i)) 相当于 i=$(($i+)) && s=$(($s+$i))
  321. .ssh 会截获标准输入, 例如当while里套 ssh的时候,while 读了一个值之后,ssh会读取剩下的数据,
  322. 可以 echo ""|ssh 或者 ssh -n 也可以避免
  323. .find|xargs 文件名包含了单引号: xargs: unmatched single quote
  324. find -regex .... -printf %h\\n
  325. find ...| grep ..| xargs -d '\n' -I {} dirname {}
  326. find ... -print0| grep ...| xargs -0I {} dirname {}
  327. .用 dd 快速创建一个指定大小的空洞文件(4G压缩后只有4M):
  328. dd count=
  329. .一个网段内,遍历哪些 ip 被占用可:
  330. nmap -v -sP |grep "up"|awk '{print $2}'
  331. .如何清理操作及登录日志记录:
  332. > /var/log/lastlog
  333. > /var/log/wtmp
  334. > /var/log/auth.log
  335. > /var/log/messages
  336. > ~/.bash_history
  337. > ~/.viminfo # grep cmd ~/*
  338. kill -9 $$
  339. 1610.echo 转义输出 16 进制ascii的字符形式:echo -e "\x42"
  340. 1611.把一组 16 进制转换为ascii:
  341. n=54542D4632352D44362D5345
  342. echo $n | sed 's/\(..\)/\\\\x\1/g' | xargs echo -e
  343. 1612.利用bash扩展列出所有目录:ls ${PATH//:/ } #第一个//表示全局替换
  344. 1613.如何踢掉指定终端 tty/pts:
  345. pkill -t,根据tty杀也可以或者 pts,pkill -t pts/1 #-9 强制,-15 正常结束
  346. 1614.如何禁掉外网网卡:
  347. ifdown eth0
  348. cd /etc/sysconfig/network/
  349. vim ifcfg-eth0
  350. #IP Config information for eth0:
  351. #IPADDR='113.108.1.9'
  352. NETMASK='255.255.255.128'
  353. STARTMODE='off'
  354. GATEWAY='113.1.1.1'
  355. 1615.把10000个文件切割成 100*100:
  356. find /root -name "*.*" -type f|split -l 100 -100a2 # -da2 用数字做后缀,限制两位,-a 默认就是两位,split -dl 100 也行
  357. 1616.man 重定向到文件出现退格符 ^H的解决办法:col -b
  358. 1617.建立临时文件的方法:直接mktemp就行了,随机+判断文件是否存在,-u、--suffix、--tmpdir、XXX 或者直接 $$
  359. 1618.产生 a-z 的字母序列:
  360. echo {a..z} | awk 'NF=5' #利用 bash 扩展
  361. awk 'BEGIN{for(i=97;i<101;i++)printf("%c ", i);printf("%c\n", i)}' #利用 ascii
  362. 1619.删除包含空格或tab的空行:
  363. grep -v -E "^[[:blank:]]*$" 或者 sed '/^\s*$/d'
  364. 1620.利用 split 返回数组长度判断字符串出现的位置:替换x~y之间,出现 abc 的字符串为 _XYZ_
  365. echo 1abc56abc01abc5678abc|awk -vn=6 '{print gensub("abc","_XYZ_",split(substr($0,1,n+10),a,"abc")-1,$0)}' #有bug
  366. echo 1abc56abc01abc5678abc|awk '{n=6;start=substr($0,1,n-1);mid=substr($0,n,n+10);end=substr($0,n+11);gsub("abc","xyz",mid);print start""mid""end}'
  367. 1621.screen的妙用:在SSH断开的情况下,服务器端继续执行程序,甚至从公司回到家里,你都可以还原你的linux会话状态。
  368. screen -S test #创建一个名为test的screen任务
  369. #输入要执行的命令,enter
  370. #Ctrl + a + d保存screen
  371. screen -ls #查看所有screen
  372.  
  373. screen -r test #恢复screen
  374.  
  375. exit #退出screen
  376. 1622.crontab语法详解:
  377. crontab [-u 用户名] [-elr]
  378. #crontab -e
  379. # 分 时 日 月 周 [用户] command
  380. # 每分钟执行一次第一个参数可以写成样 1-59 或者
  381. # .---------------- minute ( - )
  382. # | .------------- hour ( - )
  383. # | | .---------- day of month ( - )
  384. # | | | .------- month ( - ) OR jan,feb,mar,apr ...
  385. # | | | | .---- day of week ( - ) (Sunday= or ) OR sun,mon,tue,wed,thu,fri,sat
  386. # | | | | |
  387. # * * * * * command to be executed
  388. .设置开机启动:
  389. vi /etc/rc.d/rc.local
  390. .带有颜色的echo:
  391. 设置颜色的格式: \e[背景色;前景色;高亮m\e[0m
  392. \e或\
  393. 背景色: 透明(使用终端颜色), 黑, 红, 绿, 黄, 蓝 紫, 青绿, 47白(灰)
  394. 前景色: 黑 红, 绿, 黄, 蓝, 紫, 青绿, 白(灰)
  395. 高亮:高亮是1,不高亮是0。(m后面紧跟字符串)
  396. .while read 读取多个文件需要定义多个FD:
  397. while read -u3 a && read -u4 b;
  398. do
  399. echo $a=$b;
  400. done <<<<<<"$(seq 4 9)"
  401. .awk 重组域替换行中的多个连续空格为一个:awk '$1=$1'
  402. .linux关机:
  403. shutdown -y -i5 -g0
  404. sync;sync;init
  405. poweroff
  406. .kill 默认信号是 - SIGTERM ,我们可以自定义进行捕获信号:
  407. while sleep 0.1
  408. do
  409. trap # bash a.sh & ; kill $!
  410. done
  411. .获取命令名及时间:
  412. ps -eo time,cmd|awk -F: '/pad_/{print $2}'
  413. ps ao time,cmd|awk -F: '/firefox/{print $1}' #注意用了a 就不需要 - 了
  414. .16进制加法:
  415. A='0x12345678' && A=$(awk 'BEGIN{printf("%x",'$A'+7)}') && echo $A
  416. A= && echo "obase=16;ibase=16;$A+7"|bc && echo $A
  417. .让进程在后台可靠运行的几种方法: nohup/setsid/&/disown/screen
  418. disown是bash内部命令,nohup是外部命令
  419. disown跟bg,fg一样是针对job进行操作,nohup是针对命令操作
  420. disown -h 和nohup一样,在退出bash后,把进程的控制权都交给init
  421. 我们可以根据不同的场景来选择不同的方案。nohup/setsid 无疑是临时需要时最方便的方法,
  422. disown 能帮助我们来事后补救当前已经在运行了的作业,而 screen 则是在大批量操作时不二的选择了。
  423. .disown设置后台任务的方法:
  424. 用disown -h jobspec 来使某个作业忽略HUP信号。
  425. 用disown -ah 来使所有的作业都忽略HUP信号。
  426. 用disown -rh 来使正在运行的作业忽略HUP信号。
  427. 当使用过 disown 之后,会将把目标作业从作业列表中移除,
  428. 我们将不能再使用jobs来查看它,但是依然能够用ps -ef查找到它。
  429. 如果并没有把当前命令作为作业来运行,如何才能得到它的作业号呢?
  430. 答案就是用 CTRL-z(按住Ctrl键的同时按住z键)了!
  431. CTRL-z 的用途就是将当前进程挂起(Suspend),然后我们就可以用jobs命令来查询它的作业号,
  432. 再用bg jobspec 来将它放入后台并继续运行。需要注意的是,如果挂起会影响当前进程的运行结果,请慎用此方法。
  433. .screen设置后台任务的方法:
  434. 如果有大量这种命令需要在稳定的后台里运行,如何避免对每条命令都做这样的操作呢?
  435. 此时最方便的方法就是 screen 了。简单的说,screen 提供了 ANSI/VT100 的终端模拟器,
  436. 使它能够在一个真实终端下运行多个全屏的伪终端。
  437. 用screen -dmS session name 来建立一个处于断开模式下的会话(并指定其会话名)。
  438. 用screen -list 来列出所有会话。
  439. 用screen -r session name 来重新连接指定会话。
  440. 用快捷键CTRL-a d 来暂时断开当前会话。
  441. .zip、tar中文乱码问题:
  442. zip格式里面不包含编码的,7zip和rar包含的
  443. 所以gmail给附件打包的时候,如果文件名有中文,会提示你用什么编码。
  444. zip包里面乱码是zip的问题,zip的文件名乱码是zmoden没转换
  445. tar也是这样的,里面不包含编码
  446. rar里面带了编码,zip没带 ,要改zip的源码,这样就可以了,不过两边都要改。
  447. . 放在后台的程序,退出终端在登陆 jobs 就看不到了:
  448. jobs当然看不到了,jobs是针对当前shell进程的,你退出了,当然没了,不过进程还在。
  449. 父进程变成init了,这和 $! 获取最后一个后台进程 PID 一样的道理,都是针对当前 shell。
  450. .read计算回车符:
  451. read也可以不用\n,-n限制字符数,或者用-N,连\n也算一个字符
  452. .sed显示当前行号:sed -n '/hello/=' urfile
  453. .获取 分钟以前的时间:
  454. date -d "-5min" "+%s"
  455. .文件名中带有感叹号:可以禁用历史扩展:set +H
  456. echo mv "$i" ${i%%.*}.txt
  457. .利用 od -c 的命令行模式观察输入内容的 ascii:
  458. od -c #回车
  459. 输入你的内容 #回车
  460. ctrl+D #输入结束,观察一下
  461. .awk --non-decimal-data 做16进制或8进制加减:
  462. echo "0xFFFFFFFF,0x50004000,0x34"|awk -F, --non-decimal-data '{printf("0x%x, 0x%x\n", $1, $2 + $3)}'
  463. .tcpdump抓包没法看见IP:tcpdump -n -nn
  464. :: > 172.23.9.123.mysql
  465. .使用top监视所有匹配了foo字符的进程:
  466. top '-p' $(pgrep -d ' -p ' foo)
  467. top $(pgrep foo | sed 's|^|-p |g')
  468. .给定字符,随机不重复:
  469. tr -dc 'abcde12345' </dev/urandom |head -c5
  470. awk -F '' 'BEGIN{srand();for(i=1;i<=5;i++)a[i]=int(rand()*100%10+1)}{for(i=1;i<=5;i++)printf $a[i];printf RS}' file
  471. echo abcde12345 | perl -ne 'print(((split("",$_))[sort({rand>.5} (0..9))])[0..5])'
  472. echo "a b c d e 1 2 3 4 5"| awk '{srand();for(i=1;i<=6;i++) {k=int(rand()*10)%(11-i)+1; a[i]=$k; $k=""; $0=$0}; for(i in a) printf(a[i]) }'
  473. .date中不用 @ 转换时间戳:
  474. date -d
  475. .curl 获取外网ip:
  476. curl ifconfig.me/all
  477. curl http://iframe.ip138.com/city.asp 2>/dev/null|sed -n 's#.*<center>\|</center>.*##gp'
  478. 主:如果用正则的反向引用需要注意终端编码。
  479. .巧用通配符重命名单个数字文件:
  480. $i; done
  481. .seq和printf输出指定宽度的数字:
  482. seq -f
  483. printf ..}
  484. .设置linux终端窗口的标题文字:
  485. PROMPT_COMMAND="echo -ne '\033]0;$title\007'"
  486. .inode用完导致的磁盘空间不够:
  487. dumpe2fs -h /dev/hda6 | grep node #查看inode总数及inode大小,inode是在分区的时候建立的
  488. tune2fs -l /dev/DEVICE | grep -i inode #查看inode总数及inode大小,要调整总数需要重新格式化
  489. df -i #查看各分区的inode使用情况
  490. .awk判断ip公有还是私有:
  491. echo $IP | awk -F'.' '{
  492. == || ($==&&$>=&&$<=) || ($==&&$==)) p=;
  493. ;
  494. print $ "\t" p;
  495. }'
  496.  
  497. echo $|awk -F"[^0-9]" 'NF==4&&$1<256&&$2<256&&$3<256&&$4<256{
  498. ==||$==&&$==||$==&&$>&&$<)print
  499. }'
  500. .awk mktime( 的问题:
  501. $ export TZ=UTC
  502. $ awk
  503. $ export TZ=UTC8
  504. $ awk
  505. $ export TZ=UTC-
  506. $ awk
  507. .安装libgcc_s.so.1出现错误Error: Protected multilib versions:
  508. 可以模糊安装试试:yum install libgcc*
  509. .为什么访问不同的网站,公网ip是不一样的:
  510. 访问不同的地址,isp会选择不同的线路,他们每条线路出口都是nat转换的,所以看起来ip会是在任意地方的。
  511. 小运营商都这么搞,叫“穿透接入”
  512. .sed从第n个字符开始全局替换:ng
  513. echo aaaaa|sed 's/a/b/2g'
  514. .touch 不改变文件时间:
  515. touch -r oldfile newfile
  516. .tar自动识别后缀:
  517. 高版本的话,直接 tar axf,自动识别类型,不用管扩展名了
  518. .当同时有标准输出和文件名的时候,很多命令都是以文件名为优先的: 例如cat或者sort:
  519. seq |cat a
  520. .巧用sort+uniq进行按列去重:
  521. echo #按第一列去重
  522. .export 格式化列出所有环境变量:export -p
  523. .获取 ls -lrt 的最后一列:
  524. ls - 会将 ls -l 的长格式的最后一列打印出来,等价于 ls|xargs -
  525. .用 nc 与给定的主机端口进行一次 tcp 握手:
  526. nc -zvw host port
  527. .以另一用户身份运行一个命令:
  528. runuser -l userNameHere -c 'command' # runuser -l nginx -c 'ulimit -SHa'
  529. su - root -c "command" # su - oracle -c 'ulimit -aHS'
  530. .从匹配的下一行开始打印,直至结束:
  531. awk '/xyz/{tag=1;next}tag' file # 第一次匹配至文件尾
  532. awk -vRS="[a-z]*xyz[a-z]*" 'END{print $0}' data # 巧用 RS + END 打印最后一段匹配的
  533. .xargs 处理带空格或特殊字符的文件:print0 | xargs -
  534. -i {}对空白字符做了特殊处理,但是其它特殊字符还是不行的,试试touch "a'b"
  535. .shell ! 扩展通配符排除某个文件:
  536. shopt -s extglob然后cp /!(glo.txt) /这样也行
  537. .在历史记录里查询某个命令打印它,而不是执行它:
  538. !<command>:p
  539. .输出特定长度的随机数字:
  540. awk 'BEGIN{srand();a=rand()*100000000;printf("%08d\n",a)}'
  541. .语言字符环境设置:
  542. export LC_ALL=en_US.UTF-
  543. export LANG=en_US.UTF-
  544. export LC_CTYPE=en_US.UTF-
  545. .sed -e{} 固定行范围扩展:
  546. sed -e{,}{,}'s/\S\+ *//3' #删除第1、4行的第3个域,注意前面的{,}
  547. .中文与十六进制互换:
  548. echo -n "中"|xxd -ps
  549. 反过来从0xd6d0得到汉字:echo -e "\xd6\xd0" #0xd6d0 该结果与终端编码有关,类似 urlencode、urldecode
  550. .awk --source进行外部函数调用:
  551. seq |awk -f func_awk -W source '{print;echo_hello()}' #假设func_awk 是一个文件,里面定义了一个名为 echo_hello 的函数。
  552. .tar 利用标准输出配合 gzip 创建压缩文件:
  553. tar cvf - "$folder" |gzip > /new_folder/$folder.tar.gz # - 相当于文件占位符
  554. .中文转16进制:
  555. echo -n 我 | iconv -t utf-16le | hexdump -e '"%d"'
  556. .打印当前目录以及所有父目录的权限:
  557. namei -m $(pwd)
  558. .单词边界与空串的区别:
  559. echo 次
  560. echo "abcde 1?2 *f"|sed 's/\B/ /g' #单词边界
  561. .理解正则中的“单词边界与非单词边界”:
  562. aba 的单词边界为:\ba\Bb\Ba\b
  563. \b 为单词边界 echo "fabcfde 1?2 *f"|grep --color '\bf'
  564. \B 为非单词边界 echo "fabcfde 1?2 *f"|grep --color '\Bf'
  565. .shell扩展通配 extglob 排除文件:
  566. shopt -s extglob; cp aaa/!(*) bbb; shopt -u extglob
  567. .tar中不能压缩 -z 和追加 -r 混用,-r 只能用在打包中:
  568. line : Aborted (core dumped) tar -zrvf $ip.tgz ${ip}_${ssn}.sql
  569. gunzip a.tgz -c|tar rf - b|gzip >b.tgz #试过了,也不行,因为-r和-f -不兼容
  570. .双机信任中,拷贝公钥到远端机器:
  571. ssh-copy-id -i .ssh/id_rsa.pub user<a href="http://my.oschina.net/server" target="_blank" rel="nofollow">@server</a>
  572. .sort -h 按人类易读的字节大小排序:
  573. find . -type f -print0 | xargs - du -h | sort -hr | head - #递归找出10个当前目录下最大的文件
  574. .你可以 ls -l /proc/pid/fdinfo/ ,观察那个文件读到哪了 # cat /proc/XXXX/fdinfo/Y
  575. .xargs 的行列合并:直接xargs为合并,xargs -n1 为拆分:
  576. echo a b d e b f a c e d | xargs -n1 | sort -u | xargs
  577. .ping快速检测主机存活:
  578. ping -c1 -W 8.8.8.8 # -c次数 -W超时时间
  579. .windows管理命令:msinfo32; systeminfo; control; gpedit.msc; msconfig; services.msc
  580. .awk4. 在asorti中对下标索引按数字排序: asorti(a,b,"@ind_num_asc")
  581. .rsync只有源和目的,没本地和远程,你可以本地到本地,也可以远程到远程。
  582. 加了 -delete 之后,不是增量同步了(默认),而是镜像同步,会将 dest 上的多余文件删掉。
  583. .cut -d 不支持多字符分隔符(如 \t)的问题:
  584. echo -e "1\t2"|cut -d\t -s -f2 #注意此处的 \t 相当于t,-s的作用相当于sed -n,防止不匹配的时候全文输出
  585. cut默认就是制表符 \t,就像 echo 不支持 \t 要 -e 才行
  586. 或者 \t用 CTRL+V+TAB ;CTRL+V +I 代替
  587. .获取管道里各个命令的执行状态:PIPESTATUS 数组
  588. .Gnu Sed 定址匹配的几点说明:
  589. . GNU 恰巧有许多对 POSIX sed 标准便利、省时的扩展。另外,GNU 没有 sed 早期专门版本的很多限制,如行长度限制 -- GNU 可以轻松处理任意长度的行.
  590. . first~step GNU扩展,选定 起始行~步长 的那些行。例如选择所有奇数行1~;选择从第2行开始的,每隔3行 ‘~'
  591. . /regexp/I 和 \%regexp%I : GNU扩展,忽略大小写.
  592. . ,/regexp/ : 这是唯一一个使用0作为行号不会报错的用法,一般情况下不存在”第0行”,在任何其他命令中使用0作地址都会报错.
  593. . addr1,+N 匹配addr1和它后边的N行
  594. . addr1,~N 匹配addr1和它后边的行,直到输入的下一行的行号是N的倍数
  595. 例如:seq |sed -n '2,~3p' #从2开始到第一个能被3整除的行为止
  596. .<(cmds) 是bash进程替代(Process Substitution), 如果理解什么是命名管道,
  597. 那么<(...)就是一个临时的命名管道,如果不理解,
  598. 可以简单的看作bash产生一个/dev/fdxxx的文件, 文件内容是cmds的标准输出
  599. .关于 sh 软链接 bash 的问题:虽然 sh 链接了 bash,但单独执行他们仍可能不一样的结果:
  600. bash可以根据自己被 exec() 时的参数调整自己的行为, 你叫它sh它就按sh的规则玩, 你叫它bash它就按bash的规则玩,
  601. *nix系统里这样的例子太多了, 多个工具指向同一个文件, 按名字产生不同的结果
  602. .找出所有可写的文件:find / -writable >/dev/null
  603. .结束指定端口的进程:
  604. fuser -kn tcp
  605. lsof -i: |awk '{print $2}' |sort -u |xargs kill
  606. .csplit:根据匹配的指定内容,按行分割文件,split可以按行数或者文件大小分割文件:
  607. csplit a /d/ {*}
  608. awk '/d66/{i++} {print > "file" i}' infile
  609. .nc代替telnet扫描端口:
  610. nc -z -w -u # 成功会显示信息,不成功没有,可以返回值判断
  611. -z表示检测或者扫描端口 -w表示超时时间 -u表示使用UDP协议
  612. .find -empty可以找出空目录,-size 0不行,-exec后面肯定要用\;或者+来执行方式的
  613. find -print0|xargs -,这两个参数就是互相配合的
  614. 如果你不理解+和;的区别,最好还是用xargs,而且xargs还能限制命令行长度,参数个数,比exec的+和;强大多了
  615. ; 一个是每个参数执行一次,cmd arg1;cmd arg2;ls|xargs -I{} echo {} 或者 xargs -n1
  616. + 是所有参数执行一次,cmd arg1 agr2;ls|xargs echo
  617. .(())算术扩展的类eval应用:
  618. a=;b=
  619. ?$i=:$i )) ; done
  620. ; done
  621. .tcpdump匹配http头:
  622. tcpdump -XvvennSs -i eth0 tcp[:]=:]=0x4854
  623. 0x4745 为"GET"前两个字母"GE"
  624. 0x4854 为"HTTP"前两个字母"HT"
  625. .php-fpm 重载配置方法(解决新版不带reload/stop)
  626. php从5.3就可以集成php-fpm,但是集成后的php-fpm去掉了sbin/php-fpm (start|stop|reload)这些命令,只能启动。
  627. 可以使用信号量,下pid为进程"php-fpm: master process"的pid
  628. 重载进程和配置文件:kill -USR2 pid
  629. 退出进程:kill -QUIT pid
  630. 立即停止:kill -INT pid
  631. .大量连接处于 TIME_WAIT 状态的解决方法:
  632. netstat -nt 看到大量 TIME_WAIT
  633. dmesg 看到 time wait bucket table overflow
  634. 解决办法:、 /proc/sys/net/ipv4/tcp_max_tw_buckets 过小了,设成540000以上
  635. 、 /sys/module/ip_conntrack/parameters/hashsize 过小了,
  636. 设成/proc/sys/net/ipv4/netfilter/ip_conntrack_count这个值的1/4大小较为合适
  637. .编译php出错:error : cannot open shared object:
  638. ln -s /usr/local/mysql/lib/libmysqlclient.so. /usr/lib/
  639. 照做后仍然报错,原因是该方法适用于32位系统,64位系统应使用下面的这行
  640. ln -s /usr/local/mysql/lib/libmysqlclient.so. /usr/lib64/
  641. 另外:在编译的时候,不写mysql的路径,而使用mysqld代替,也可解决该问题的出现。
  642. .shell打印当前行号:
  643. echo "$LINENO"
  644. 显示函数在哪一行被调用的:
  645. line(){
  646. echo call by line `caller | awk '{print$1}'`
  647. }
  648. line
  649. .当系统swap空间所剩不多时,可通过在本地磁盘上创建普通文件作为swap :
  650. dd一个文件,然后mkswap,然后swapon
  651. dd
  652. mkswap ./swapfile
  653. swapon ./swapfile
  654. 即可为系统临时增加1G的swap。
  655. 使用完毕后执行:
  656. swapoff ./swapfile
  657. rm -f swapfile
  658. .多行结果赋值给变量:用引号防止 shell 做 word split:
  659. file=`find . -name "*"`
  660. echo "$file"
  661. .wireshark 八进制编码问题:
  662. google.com/search?q=淘宝网 这个http请求,抓包里面对应的内容是
  663. GET /search?q=\\\\\\ HTTP/1.1\r\n
  664. \\\\\\370这一段对应的是淘宝网3个字,应该是gbk,gbk是每个汉子两个
  665. \nnn the eight-bit character whose value is the octal value nnn (one to three digits)
  666. 8进制,转换成十六进制看看,再看编码
  667. CC D4对应\\ echo :ccd4|xxd -r|iconv -f gbk -t utf-
  668. echo $
  669. 前面要加$,这样是表示8进制的
  670. .sort -n -g 按数字排序的区别:
  671. -g 通用数值排序,-n 数值排序。
  672. -g 支持的记数方法比 -n 广,-g 使用标准 C 函数 strtod 来转换数值,支持科学记数法,如 1.0e-34,
  673. 不过 -g 比 -n 慢得多。详细区别参考info sort文档或者stackoverflow.com。
  674. .关于sort -h排序问题:
  675. echo "2025K
  676. 1M
  677. 1G"|sort -h # du、ls、df 等能保证输出一定是k<m<g的格式,不会存在2025k这种形式的。
  678. .使用 cURL 测试 Web 站点的响应时间:
  679. curl -o /dev/null -s -w %{time_connect}:%{time_starttransfer}:%{time_total} http://www.canada.com
  680. .设置用户的进程数限制:
  681. /etc/security/limits.conf
  682. /etc/profile里面写ulimit -n ,只有root才能增加,这样其它用户登录都会报错。
  683. nofile 是打开文件数,nproc是进程数,soft 指的是当前系统生效的设置值。hard 表明系统中所能设定的最大值。
  684. soft 的限制不能比hard 限制高。用 - 就表明同时设置了 soft 和 hard 的值
  685. .ssh不输出连接信息:
  686. ssh -t 会输出一个或者 ssh 加 -q 参数 或者 >/dev/null 屏蔽掉
  687. .wget将页面内容输出到标准输出:
  688. wget -qO- http://shushu.com.cn/tm.php # -qO- 相当于 -q -O -
  689. .iptables端口转发:将本地80端口的请求转发到8080端口,当前主机ip为192.
  690. iptables -t nat -A PREROUTING -d -j DNAT --to-destination
  691. ssh 或者 haproxy 之类的也可以做端口映射
  692. .进程间通信方式:
  693. PIPE(FIFO)
  694. 消息队列
  695. 信号量(Semaphore)
  696. 共享存储
  697. SOCKET
  698. .线程间通信常用的三种方法:
  699. .全局变量
  700. 进程中的线程间内存共享,这是比较常用的通信方式和交互方式。
  701. 注:定义全局变量时最好使用volatile来定义,以防编译器对此变量进行优化。
  702. .Message消息机制(windows下)
  703. 常用的Message通信的接口主要有两个:PostMessage和PostThreadMessage线程常常要将数据传递给另外一个线程。
  704. Worker线程可能需要告诉别人说它的工作完成了,GUI线程则可能需要交给Worker线程一件新的工作。
  705. .CEvent对象(windows下)
  706. CEvent为MFC中的一个对象,可以通过对CEvent的触发状态进行改变,从而实现线程间的通信和同步。
  707. .本机免key登录:
  708. ssh-keygen -t dsa -f ~/.ssh/id_dsa
  709. cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
  710. .curl抓取http返回码:
  711. curl -so /dev/null -w '%{http_code}\n' www.sina.com
  712. .ssh -D 一句话代理:
  713. alias proxy='expect -c "spawn ssh -D 127.0.0.1:6789 67.205.5.88 -l username;expect *password* ;send -- \"password\r\" ; expect eof"'
  714. alias proxy='expect -c "spawn ssh -D 127.0.0.1:6789 67.205.5.88 -l username;expect *password* ;send -- \"password\r\" ; interact"'
  715. .ps -ww 不限制宽度输出:结果也与终端有关
  716. ::#tp#~> ps -few|wc -L
  717.  
  718. ::#tp#~> ps -feww|wc -L
  719.  
  720. ::#tp#~> echo $COLUMNS
  721.  
  722. ./dev/null 被cp,权限被修改:
  723. mknod -m /dev/ # 创建特殊文件的,比如block或者是管道文件
  724. .每 n 个字符截断换行的几种方法:
  725. echo |sed 's/..../&\n/g'
  726. dd cbs= conv=unblock; fold -c4;grep -Eo '.{1,4}'
  727. .awk输出到管道或者文件的时候有buffer,一般是4K,到达4K才输出,输出到标准输出没buffer
  728. i=;while sleep 0.1;do echo -ne "\r"$((i++));done|awk 'BEGIN{ORS=RS="\r"}{print $0}'|tee a
  729. 可以用这个测试下,如果去掉tee就可以正常显示,或者去掉awk也可以,两个都加上就不行,
  730. 如果把sleep .1改成sleep 0.000001,到达4K的时候就会输出了,
  731. 用fflush()可以刷新buffer
  732. .od进行ascii到八进制、10进制、16进制的转换:
  733. printf "^A" | od -An -o # -b -x -d
  734. .curl测试网络状况:
  735. curl -so /dev/null -w '%{http_code}' -H host:www.host.com 8.8.8.8/a.txt #测返回码
  736. curl -sH host:www.host.com 8.8.8.8/a.txt #下载文件测试
  737. .paste -s串行合并文件内容:
  738. seq |paste -sd ' \n' #每5个换行
  739. echo {..}|xargs -n5 #xargs -n 效率比较低
  740. echo {..}|grep -Po '(\w+ ?){5}'
  741. .printf打印ascii的10进制值:
  742. printf '%d\n' \'c # \'c 意思就是使用字符作为数字值
  743. awk 打印 ascii 对应 进制值:
  744. echo a|awk 'BEGIN{for(i=0;i<255;i++)a[sprintf("%c",i)]=i}{print a[$0]}'
  745. 打印ascii的16进制值:
  746. printf '%02x' "'+" # echo -n '+' | od -tx1 -An | tr -d ' '
  747. .- 表示标准输入或者标准输出,用法举例:
  748. tar cvf - * | (cd /dest/dir && tar xvfp -) # - 需要程序自己支持,例如tar、cat,-可以理解为临时文件形式存在
  749. -在命令符当中表示标准输入或者标准输出。
  750. 在tar cvf - *当中,表示标准输出,因为f参数后面跟的是输出的,
  751. 这个命令的意思就是把当前目录的所有文件,tar打包到标准输出当中
  752. 然后通过管道,这个命令的标准输出作为后面 (cd /dest/dir && tar xvfp -)
  753. 命令的标准输入,cd /dest/dir没有什么好说的,切换到那个目录。
  754. 然后tar xvfp表示解压缩文件,但是没有指明是那个具体的文件?所以就是-了,
  755. 表示标准输入当中获取文件,然后解压缩到当当前目录。
  756. 总体来看,这个命令就是拷贝文件了。
  757. .sub()与match()的搭配使用,可逐次取出原字串中合乎指定條件的所有子字符串:
  758. awk 'BEGIN {
  759. data = "p12-P34 P56-p61"
  760. -]+/) >) {
  761. print substr(data,RSTART, RLENGTH)
  762. sub(/[-]+/,"",data)
  763. }
  764. }' #类似python re中的group或者正则中的捕获组
  765. .巧用find的内置命令:delete、ls等:
  766. find -name "AAA" -ls #同时减少了-exec执行fork带来的开销。
  767. find . -name AAA \( -type f -exec ls -l {} \; -o -type d -exec ls -ld {} \; \)
  768. .显示所有 ipv4:
  769. ip -o - a s
  770. .printf -v 直接赋值变量:
  771. printf -v
  772. .awk FIELDWIDTHS 将字符串按指定域宽度划分:
  773. echo '23456.23478.58924.6' | awk -vFIELDWIDTHS="3 6 5 5" -vOFS="\t" '{$1=$1;print}'
  774. echo ${A::} ${A::} ${A::} ${A::}
  775. .查看 tcp 连接中 keepalive 的数量:
  776. netstat -town
  777. .模拟骰子产生1~6的随机数:
  778. echo $((0x$(head -c5 /dev/random|xxd -ps)%+))
  779. .pkill杀进程是模糊匹配,小心误杀:
  780. pkill aaa ,所有进程名里包含aaa的都会被干掉
  781. 你可以用pgrep看看,进程名,不包含参数,你还可以指定tty、用户名什么的
  782. 如果要精确匹配:pgrep -lx 类似 grep 的 -x 按行匹配
  783. -f 是不仅仅在进程里面查,参数也会查 ,就是你pkill -f apache,会把java -u apache也杀掉。默认是只看进程名是否匹配
  784. pgrep -fl
  785. sleep
  786. -fx 是完整匹配整个命令行(进程名+参数) ,-x 是完整匹配进程名
  787. .pkill 踢出who里的登录终端或者ip:
  788. pkill -kill -t pts/
  789. .得到10个字符的随机密码:
  790. tr -dc A-Za-z0-9_ < /dev/urandom | head -c | xargs
  791. .perl列出当前目录下所有的符号链接:
  792. perl -e 'print map { -l and $_ .= "\n" } <*>'
  793. .nnohup退出终端会断掉:
  794. shopt |grep huponexit
  795. grep -iR hup .bashrc .profile /etc/bash* /etc/profile*找下,反正我这没有,我是off
  796. 默认值都是off的,开了就会出现他的那种问题,shell退出不应该给这个shell的子进程发HUP信号的,可以trap下。
  797. .利用nc远程传输文件:
  798. tar -cf - * | nc
  799. .正则贪婪匹配陷阱:最左边的贪婪匹配优先级最高,后面的匹配都是基于正则的回溯机制,所以后面的都属于非贪婪匹配了。
  800. *虽然贪婪,但也可能发空匹配,因为他可以为0,而+至少匹配一次,限制较强。
  801. echo "房屋信息 房屋信息 1--district 190_360"|sed -r 's/(.*)([0-9]+)_([0-9]+)/=\1==\2===\3/'
  802. =房屋信息 房屋信息 --district =====
  803. echo "房屋信息 房屋信息 1--district 190_360"|sed -r 's/(.*)([0-9]*)_([0-9]*)/=\1==\2===\3/'
  804. =房屋信息 房屋信息 --district =====
  805. echo "房屋信息 房屋信息 1--district 190_360"|sed -r 's/(.+)([0-9]+)_([0-9]*)/=\1==\2===\3/'
  806. =房屋信息 房屋信息 --district =====
  807. echo "房屋信息 房屋信息 1--district 190_360"|sed -r 's/(.*) ([0-9]+)_([0-9]*)/=\1==\2===\3/'
  808. =房屋信息 房屋信息 --district =====
  809. .rsync -b 更新前先备份:
  810. rsync -b,然后--suffix指定后缀或者--backup-dir指定备份的目录,mv肯定比cp快,rsync的-b也是mv的
  811. .windows下查询域名对应的所有服务器:
  812. nslookup -qt=mx web.qq.com
  813. .vi一个远程文件:
  814. vi scp://username@host//path/to/somefile #注意双斜线
  815. .删除所有非打印字符:
  816. tr -dc '[:print:]' < filename
  817. .PS1 设置putty等ssh工具的标签页 title:
  818. PS1='\u@\h:\w\$ '
  819. # If this is an xterm set the title to user@host:dir
  820. case "$TERM" in
  821. xterm*|rxvt*)
  822. PS1="\[\e]0;\u@\h: \w\a\]$PS1"
  823. ;;
  824. *)
  825. ;;
  826. esac
  827. 或者:
  828. PROMPT_COMMAND='echo -ne "\033]0;${USER}@${HOSTNAME%%.*}:${PWD}"; echo -ne "\007"'
  829. .tail -f 管道的buffer不能实时输出的问题:
  830. unbuffer -p tail -f .sh_histoy |awk '{print $0}'
  831. .利用 bc 计算器 obase 参数,实现十进制转二进制:
  832. echo 'obase=2;98'|bc
  833. .为 man 指定阅读器 pager :less,并搜索指定字符串
  834. PAGER='less -iRsp034' man ascii
  835. .vim中获取只读文件的sudo权限写入::w !sudo tee %
  836. 命令:w !{cmd},让 vim 执行一个外部命令{cmd},然后把当前缓冲区的内容从 stdin 传入。
  837. tee 是一个把 stdin 保存到文件的小工具。
  838. 而 %,是vim当中一个只读寄存器的名字,总保存着当前编辑文件的文件路径。
  839. 所以执行这个命令,就相当于从vim外部修改了当前编辑的文件,然后从定向到当前文件。
  840. %! sudo tee % > /dev/null
  841. %  #VI/VIM编辑的文件内容
  842. !  #管道
  843. sudo #以root权限操作
  844. tee  #
  845. %   #VI/VIM编辑的文件
  846. > /dev/null  #这里可省略
  847. .查看linux版本的几种方法:
  848. cat /proc/version; uname -a; lsb_release -a; cat /etc/issue;
  849. cat /etc/redhat-release; rpm -q redhat-release
  850. file /bin/bash; file /bin/cat
  851. .ls --time-style自定义时间格式显示:
  852. ls -lth --time-style=+"%F %T"
  853. .去除vi打开文件时带的颜色及控制乱码字符:col -b
  854. .sh 虽然链接到了 /bin/bash,但是 /bin/sh 执行效果不完全等同 /bin/bash,而是 /bin/bash --posix
  855. 有很多系统里 gzip gunzip zcat 都指向一个inode, 同一程序对不同加载名作不同动作的用法在*nix中太常见了
  856. .正则捕获示例:抓取网页上的 URL 链接:注意设置 LC_ALL 语言环境和字符集
  857. curl -s www..com.cn | sed -rn "s#.*(http://[0-9A-Za-z]*\.[^/\"?' ]*).*#\1#p"|sort|uniq -c|sort -k1rn
  858. curl -s www.qq.com | LC_ALL=C sed -rn "s#.*(http://\w*\.[[:alnum:].]*).*#\1#p"|sort|uniq -c|sort -k1rn
  859. 上面的 sed 有一行上不能匹配多个网址的 bug,因为sed需要完全匹配后才能print,下面用 grep 修复该问题
  860. curl -s www.360buy.com | grep -Po '(https?://\w*\.[[:alnum:].]*)' |sort|uniq -c|sort -k1rn
  861. 注:posix 字符类 [[:alnum:]] 等价于 [-9A-Za-z],
  862. \w 为 [[:alnum:]_]的同义词,指单词字符,相当于 [-9A-Za-z_],关于这点 man grep \w 中有前后矛盾的描述。
  863. .sed单引号转义问题:
  864. sed单引号转义只支持16进制 \x27, 而且外层一定要加单引号或者双引号引起来:
  865. echo "1'1"|sed -r 's/\x27//' # 不加引号那shell 会解释\x 成为 x,所以要养成加引号的习惯
  866. 不支持8进制:echo "1'1"|sed -r 's/\047//' ,而 awk 是两者都支持的。
  867. 或者sed中用 "'" 表示单引号
  868. .用 bc -l 加载数学库做小数计算:
  869. echo /|bc -l # echo /|awk '{printf "%f", 2/70}'
  870. .locale 字符集语言环境的设置:
  871. echo http://wwAw.HA~12o.com|LC_ALL=C sed -rn "s#.*(http://([a-z]*)\.[^/\"?' ]*).*#\2#p"
  872. echo Aab|LC_ALL=C sed -r 's/[A-Z]//g'
  873. 注:有时候莫名其妙的问题一般与 LC_ALL=C 有关,C 是 POSIX,和具体语言无关。
  874. 其实最好是C,这样sort排序会快很多,还有遇到[a-z]这种情况比较安全,还有 [.-/] 这种
  875. .巧用 sed // 上次匹配功能排除边界值:
  876. echo -e "a\n2\nc"|sed '/a/,/c/{//!d}' # // 相当于awk中 !/^a|^c/
  877. .shell中转换16进制到10进制:
  878. i=A; echo "obase=10;ibase=16;$i" | bc
  879. a= b=e8; (( #a > #b ))&&echo "a > b"||echo 'a <= b'
  880. echo $(printf "%d" 0xD)
  881. .rsync 只同步目录(危险慎用!)
  882. "只" 同步目录,子目录的子目录也可以同步,但子目录里的文件不同步。
  883. rsync -av --delete -f '+ */' -f '- *' SRC/ DEST/ # -f '+ */'是同步目录,-f '- *'是不同步文件。
  884. 想把子目录的内容也同步:
  885. rsync -av --delete -f '+ */' -f '- /*' SRC/ DEST/
  886. .vim 粘贴板简介:
  887. vim 有 12个粘贴板 、、、…、、a、"、+;用:reg命令可以查看各个粘贴板里的内容。
  888. 在vim中简单用y只是复制到 " (双引号)粘贴板里,p也这样。
  889. Ny完成复制到N号剪贴板,其中N为粘贴板号(注意是按一下双引号然后按粘贴板号最后按y),
  890. 例如要把内容复制到粘贴板a,选中内容后按 "ay 就可以了,有两点需要说明一下:
  891. +号粘贴板是系统粘贴板,用"+y将内容复制到该粘贴板后可以使用Ctrl+V将其粘贴到其他文档(如firefox、gedit)中,
  892. 同理,要把在其他地方用Ctrl+C或右键复制的内容复制到vim中,需要在正常模式下按 "+p,
  893. 要将vim某个粘贴板里的内容粘贴进来,需要退出编辑模式,在正常模式按"Np,其中N为粘贴板号,
  894. 如上所述,可以按"5p将5号粘贴板里的内容粘贴进来,也可以按"+p将系统全局粘贴板里的内容粘贴进来。
  895. .查看本机外网 ip:
  896. curl ifconfig.me
  897. .awk 处理浮点数四舍五入的问题:
  898. ieee754 http://zh.wikipedia.org/zh-cn/IEEE_754
  899. $ echo "3.445"|awk '{printf "%0.2f\n",$0}'
  900. 3.44
  901. There is no ieee754 number for 3.445000000000000000000...
  902. $ echo "3.445"|awk '{printf "%0.20f\n",$0}'
  903. 3.44499999999999984013
  904. $ echo "3.4450000000000001"|awk '{printf "%0.20f\n",$0}'
  905. 3.44500000000000028422
  906. $ echo "3.44500000000000001"|awk '{printf "%0.20f\n",$0}'
  907. 3.44499999999999984013
  908. .过滤掉 /etc/passwd 中的自动生成用户
  909. awk -F: '$0!~/nologin/&&($3=0||$3>=500)' /etc/passwd
  910. .利用taskset有效控制cpu资源
  911. taskset -c sh job.sh #开启一个只用0标记的cpu核心的新进程(job.sh是你的工作脚本)
  912. taskset -pc #查找现有的进程号,调整该进程cpu核心使用情况
  913. 可在top中进行负载check,最后你可以在你的工作脚本中加入该指令来合理利用现有的cpu资源
  914. .关于 [^A-Za-z] 是否等价 [^A-z] 的问题:
  915. [^a-zA-Z] 是正则
  916. [!a-zA-Z] 是通配符
  917. 用的地方不一样,而且A-z包含几个非字母字符,且用的时候还需要注意字符集
  918. .校对大量文件的完整性:
  919. rsync 返回码或者 find打印大小,不要用du,du与FS的block大小设置有关,异构的FS中不准确
  920. .登录linux,执行配置文件的顺序:
  921. /etc/profile -> [~/.bash_profile | ~/.bash_login | ~/.profile] -> ~/.bashrc -> /etc/bashrc -> ~/.bash_logout
  922. 在登录时,首先会执行/etc/profile,其次是用户目录下的.bash_profile,.bash_profile不存在则读取.bash_login,
  923. 若.bash_profile和.bash_login都不存在,最后才读取.profile
  924. .wget 带上浏览器 agent 下载:
  925. wget -c $url -O test2.flv -U # --user-agent=AGENT
  926. .ed 是真正的 inplace editing,sed 是假的 inplace editing,中间是生成了临时文件的。
  927. .查看文件编码的 种方式:file -i 文件名 # vim 中 :set fileencoding
  928. .根据进程名显示进程号: pidof java
  929. .如何限制用户的最小密码长度:修改 /etc/login.defs 里面的PASS_MIN_LEN的值
  930. .如何使新用户首次登陆后强制修改密码:useradd -p testuser
  931. .vi 编辑标准输入输出:crontab -l | vi -
  932. .awk 利用协同进程监听指定端口:
  933. awk 'BEGIN{service="/inet/tcp/2000/0/0"; service |& getline; print $0; close(service)}'
  934. . awk ‘FS=”:” {print $,$,$}’ 明显不等价于 awk -F: ‘{print $,$,$}’ ,
  935. 前者是读取第一行记录并将记录分割成字段之后才进行FS的设置,FS=”:” 作为了模式,通常这样的写法是错误的.
  936. 例如 awk 'FS=":" {print $1,$3,$6}' /etc/passwd 会把第一个整行打印出来
  937. .awk gensub 删除字段及其FS:
  938. echo |awk '{$4="";print gensub(FS,"",4)}'
  939. echo |awk '{sub($4FS,"")}1'
  940. echo "1 2 3 4 5"|awk '{$4="";$0=$0;$4=$4;print}'
  941. 注意 $=$;$=$ 缺一不可,否则会有残留FS输出,$=$ 在重构该域时会把周围多个 FS 合并,就像 echo 一样
  942. .设置 PS1,根据上一个命令返回状态码控制显示红色还是绿色:
  943. `[ $? -eq ]||echo \[\e[31m\]`
  944. .判断程序输入来自文件还是标准输入:
  945. 用 < 的话也是来自 - 的,不是来自文件
  946. ::#tp#~> awk 'END{print FILENAME}' <a
  947. -
  948. ::#tp#~> cat a|awk 'END{print FILENAME}'
  949. -
  950. ::#tp#~>
  951. .查看dd命令的执行进度:
  952. dd # a 终端执行
  953. ; done # b 终端执行
  954. 然后就能看到间隔5秒一次的输出结果了,所执行的killall命令循环会在dd命令执行结束之后退出。
  955. 为什么dd命令的进度输出要killall命令来激发呢?其实答案很简单,dd的进度输出就是这么设计的,
  956. 再详细点就是dd命令在执行的时候接收到SIGUSR1信号的输出当前的读写进度,而killall命令在这里起的作用就是给dd进程发送这个信号。
  957. 对于没有那些不与终端交互的守护进程(Deamon Process),通常的设计是在接收到SIGHUP信号之后就会重新读取配置文件。比如下面的:
  958. # 当你对smb.conf修改之后,运行下面的命令,修改就能生效了
  959. # 而不用再来一个smb restart
  960. killall -HUP smbd
  961. .atime、ctime、mtime 区别与联系:
  962. atime:访问时间(access time),指的是文件最后被读取的时间,可以使用touch命令更改为当前时间;
  963. ctime:变更时间(change time),指的是文件属性最后被变更的时间,变更动作可以使chmod、chgrp、mv等等;
  964. mtime:修改时间(modify time),指的是文件内容最后被修改的时间,修改动作可以使echo重定向、vi等等;
  965. ctime 变动时不影响 mtime
  966. mtime 变动时 ctime 一起变。
  967. .bc中十进制、二进制互转,ibase影响你所有的输入,
  968. ::#tp#~> echo 'ibase=10;obase=2;11'|bc -l
  969.  
  970. ::#tp#~> echo 'ibase=2;obase=10;11'|bc -l # 这里obase=10就是二进制
  971.  
  972. ::#tp#~> echo 'ibase=2;obase=1010;11'|bc -l
  973.  
  974. ::#tp#~> echo 'ibase=2;obase=10;11'|bc -l
  975.  
  976. ::#tp#~> echo 'obase=10;ibase=2;11'|bc -l # ibase影响你所有的输入,换个位置就不一样了
  977.  
  978. ::#tp#~>
  979. .nginx 的 logRotation 机制:
  980. mv access.log access.log.
  981. kill -USR1 `cat master.nginx.pid` # 发信号让进程写 access.log,而不是 access.log. 老日志
  982. sleep
  983. gzip access.log. #
  984. .linux 文件系统的一些限制:
  985. 一级子目录限制个数: (真正可以容纳的是31998个子目录,. 和 ..)
  986. 文件名字符长度 ,中文
  987. 文件个数:貌似没有限制
  988. 注:不同的文件系统可能限制不一样,修改 kernel include file 然后 recompile 可以修改限制
  989. .关于 find 不管找到与否都返回 的问题:因为默认是 find -print
  990. find -type f -name "
  991. .管道是异步(并行)执行的:
  992. ::#tp#~> sleep |sleep &
  993. []
  994. ::#tp#~> ps -eo lstart,cmd|grep 'sleep 99'
  995. Mon Mar :: sleep
  996. Mon Mar :: sleep
  997. Mon Mar :: grep --color=auto sleep
  998. ::#tp#~>
  999. sleep 999和sleep 998是同时启动的,并不是sleep 999执行完成,再执行sleep 998的
  1000. 管道前后的进程并发执行,不过这个还是会有一个时间差,这个看cpu的调度和负载。
  1001. 正因为如此,ps -fe|grep grep 不一定会有结果,而 ps -fe|grep init 一定有结果
  1002. ps -fe|grep grep,可能是零个,也可能一个,不过大部分情况都是一个
  1003. ps -fe|grep init,可能是一个,也可能是两个,不过大部分情况都是两个
  1004. .管道其实在操作内存:
  1005. echo|ls -l /proc/self/fd/,结果里面的0 -> pipe:[]就是管道文件
  1006. 或者ls -l /proc/self/fd/|cat,这样的话1是管道
  1007. 如果没有管道的话,应该是/dev/pts/4什么的
  1008. self是你当前的pid,fd是这个进程的文件描述符, 是匿名管道的文件名
  1009. .强大的进程匹配工具 pgrep:可依据多个属性匹配指定的进程
  1010. 如:pgrep -u root sshd
  1011. pgrep -fl bash 等价 ps -eo pid,cmd|grep [b]ash
  1012. .nc 测网卡带宽:
  1013. nc -l -p </dev/zero
  1014. nc >/dev/null
  1015. 直接从/dev/zero读数据到1235端口,然后我的第二个nc从1235接手数据写到/dev/null,然后ifstat测试当前流量
  1016. 全部走内存,没有磁盘io,可以用eth测试,但是eth有危险,万一把网卡堵死,命令都执行不了。
  1017. .当 FS 为单个空格时,无论 RS 是否被重新定义,FS 始终都是 [ \t\n]+
  1018. seq |awk '{$0=$0"\n#\n";print $1,$2}'
  1019. .注意大括号命令组的用法:大括号前后空格 和 每条命令分号结束,否则提示命令未结束
  1020. { sleep ; continue; }
  1021. .lsof && test -s 检查文件写入完成,或者先写临时文件再 mv:
  1022. chkFileWriteOver(){
  1023. ]]
  1024. do
  1025. ((c++))
  1026. # , it's ok.
  1027. [[ -s $ ]] || { sleep ; continue; }
  1028. lsof $
  1029. # if file not locked, it's ok.
  1030. [[ $? -eq ]] && echo "---------- File is OK ..." && break
  1031. sleep
  1032. done
  1033. # here, if file is exception, you can send a email to somebody.
  1034. [[ $c -eq ]] && echo "---------- File is not exsit ..."
  1035. }
  1036. chkFileWriteOver fileName
  1037. .shell的解释和编译引起的性能问题:
  1038. ..}; do str="$str $i"; done
  1039. # 这里是for慢,不是{..}慢,你echo {..}很快的
  1040. 解析 1次循环0.001秒 10次循环0.01秒 1000次循环1秒
  1041. 编译 1次循环0.001秒 10次循环0.002秒 1000次循环0.003秒
  1042. 编译其实就是那个意思,并不是那个比例,解析的话几次就是几倍
  1043. 可以认为编译 T(),解释 T(n)
  1044. .find的路径问题:-newer 读取文件时间默认是在当前路径,因此需要显示 cd 或者 -newer 绝对路径
  1045. find /tmp/mstat ! -newer `date -I -d'3 days ago'`
  1046. find: --: 没有那个文件或目录
  1047. cd /tmp/mstat; find /tmp/mstat ! -newer `date -I -d'3 days ago'`
  1048. /tmp/mstat/--
  1049. .sed 模式匹配//与模式替换s///的语法区别:
  1050. 当都是 / 做分隔符并无区别,但是当不是 / 的时候是有语法区别的:
  1051. sed '\@/usr/local/test.txt@d' # 第一个字符需要转义,man sed 语法如此,因为还可以被解析为行号
  1052. sed 's@/usr/local/test.txt@@' # 只能被解析为字符串内容,没有歧义
  1053. .iptables 的保存:
  1054. /etc/init.d/iptables save就好了,保存到 /etc/sysconfig/iptables,启动自己会去读取的
  1055. 也可以手动 iptables-save > a.txt 或者 iptables-restore < a.txt
  1056. .curl 获取网页的状态码:
  1057. http_code=`curl -I -s www.baidu.com -w %{http_code}` && echo ${http_code::}
  1058. .awk中的隐式数据类型转换:
  1059. awk 'BEGIN{a="7868";if(a>=6211&&a<=10075)print "ok"}'
  1060. awk 'BEGIN{a="56";if(a>=3&&a<=7189)print "ok"}'
  1061. 结果不一致是由于在gawk中,数字和字符串同时比较会发生隐式类型转换,
  1062. 会把数字转换成字符串,然后按字符串排序(字典序),要想用数字比较,
  1063. 需要显示转换类型:a=; 或者 a=");
  1064. 需要注意的是这样他只会转换以数字开头到第一个字母前的字符串
  1065. 如:
  1066. echo |awk '{print "a12b"+0,"|",int("a12b"),"|","12b1"+0,"|",int("12b1")}'
  1067. | | |
  1068. awk的sorti也是使用字符串做索引排序,需要注意

shell 学习笔记1501-1800的更多相关文章

  1. SHELL学习笔记----IF条件判断,判断条件

    SHELL学习笔记----IF条件判断,判断条件 前言: 无论什么编程语言都离不开条件判断.SHELL也不例外.  if list then           do something here   ...

  2. shell学习笔记

    shell学习笔记 .查看/etc/shells,看看有几个可用的Shell . 曾经用过的命令存在.bash_history中,但是~/.bash_history记录的是前一次登录前记录的所有指令, ...

  3. [转帖][Bash Shell] Shell学习笔记

    [Bash Shell] Shell学习笔记 http://www.cnblogs.com/maybe2030/p/5022595.html  阅读目录 编译型语言 解释型语言 5.1 作为可执行程序 ...

  4. shell学习笔记汇总

    1.shell脚本中函数使用 函数定义在前,调用在后,顺序反了就没有效果了.函数调用为:函数名 参数列表 函数内部通过以下变量访问函数的参数:shell脚本函数中: $0: 这个脚本的名字 $n: 这 ...

  5. shell 学习笔记2-shell-test

    一.字符串测试表达式 前面一篇介绍:什么是shell,shell变量请参考: shell 学习笔记1-什么是shell,shell变量 1.字符串测试表达式参数 字符串需要用""引 ...

  6. SHELL学习笔记三

    SHELL学习笔记一 SHELL学习笔记二 SHELL学习笔记三 for 命令 读取列表中的复杂值 从变量读取列表 从命令读取值 更改字段分隔符 用通配符读取目录 which 使用多个测试命令 unt ...

  7. 【转】shell学习笔记(一)——学习目的性、特殊字符、运算符等

    1 学习shell的目的性 写之前我们先来搞清楚为什么要学shell,学习要有目的性 shell简单.灵活.高效,特别适合处理一些系统管理方面的小问题 shell可以实现自动化管理,让系统管理员的工作 ...

  8. [Bash Shell] Shell学习笔记

    1. Shell简介 Shell本身是一个用C语言编写的程序,它是用户使用Unix/Linux的桥梁,用户的大部分工作都是通过Shell完成的.Shell既是一种命令语言,又是一种程序设计语言.作为命 ...

  9. shell 学习笔记

    <Linux命令行与shell脚本编程大全>笔记   wkss 其他:http://www.cnblogs.com/pengdonglin137/p/3528303.html 一.基本命令 ...

随机推荐

  1. zrender源码分析1:总体结构

    开始 zrender(Zlevel Render) 是一个轻量级的Canvas类库,这里是GitHub的网址 点我, 类似的类库有Kinetic.JS.EaselJS. 但貌似都没有zrender好用 ...

  2. Mysql 常用查询语句

    SELECT * FROM table1 ,,,,,,,,) ) SELECT * FROM table3 WHERE t3Date >= '2011-08-10' SELECT * FROM ...

  3. 转发:使用sql命令查询视图中所有引用的基础表

    转自:使用sql命令查询视图中所有引用的基础表 使用sql命令查询视图中所有引用的基础表 之前有写过如何利用sql查询视图中所有引用的表发现这个方法并不能查出视图中所有的基础表,如果视图中有嵌套视图就 ...

  4. shell script 零碎知识

    1.test命令的测试功能 -e  文件名是否存在 -f  文件名是否存在且为文件 -d  文件名是否存在且为目录 范例1    检查/dmtsai是否存在,存在输出 exist  不存在输出 Not ...

  5. ant jsch.jar - 一个错误及解决办法

    ant jsch.jar -- 一个异常及解决方法 运行build.xml出现异常: Cause: Could not load a dependent class com/jcraft/jsch/L ...

  6. iOS开发 使用Xcode自带的Leaks

    http://www.jianshu.com/p/0837331875f0 http://www.cnblogs.com/tanzhenblog/p/5001344.html?utm_source=t ...

  7. Android消息推送之GCM方式(二)

    <声明> 转载请保留本来源地址: http://blog.csdn.net/wzg_1987/article/details/9148023 上一节讲了GCM方式实现前的一些必要准备工作, ...

  8. SQL事务与并发

    1.Transaction(事务)是什么: 事务是作为单一工作单元而执行的一系列操作.包括增删查改. 2.事务的种类: 事务分为显示事务和隐式事务: 隐式事务:就是平常我们使用每一条sql 语句就是一 ...

  9. ER图与UML图

    ER图:实体-联系图(Entity-Relation Diagram)用来建立数据模型,在数据库系统概论中属于概念设计阶段,ER图提供了表示实体(即数据对象).属性和联系的方法,用来描述现实世界的概念 ...

  10. AngularJS学习资源

    图灵社区 : 图书 : AngularJS入门教程 http://www.ituring.com.cn/book/1206 AngularJS 教程 | 菜鸟教程 http://www.runoob. ...