0.1和2分别表示标准输入.标准输出和标准错误信息输出,可以用来指定需要重定向的标准输入或输出. 在一般使用时,默认的是标准输出,既1.当我们需要特殊用途时,可以使用其他标号.例如,将某个程序的错误信息输出到log文件中:./program 2>log.这样标准输出还是在屏幕上,但是错误信息会输出到log文件中. 另外,也可以实现0,1,2之间的重定向.2>&1:将错误信息重定向到标准输出. Linux下还有一个特殊的文件/dev/null,它就像一个无底洞,所有重定向到它的信息都会消

转载自:http://blog.csdn.net/shawnhu007/article/details/50971084 最近在一hadoop测试集群运行一个spark streaming程序,然后使用nohup ./execute.sh & 执行让程序后台运行,才几天日志就上G了,如果有问题想要查看日志,显然打开文件是一件很麻烦的事,于是我想办法通过减小文件大小: 1.nohup命令解释: a.语法:nohup [command] [args] [&] b.说明:nohup 命令运行由

1.nohup命令解释: a.语法:nohup [command] [args] [&] b.说明:nohup 命令运行由 Command 参数和任何相关的 Arg 参数指定的命令,忽略所有挂断信号.在注销后使用 nohup 命令运行后台中的程序.要运行后台中的 nohup 命令,添加 & ( 表示“and”的符号)到命令的尾部,如果不指定重定向,则日志默认输出到当前目录下nohup.out文件中, 一般提交如 :nohup ./execute.sh &  这样日志或输出当前运行目

Redis Live是一个用来监控redis实例,分析查询语句并且有web界面的监控工具,使用python编写. 代码下载地址:https://github.com/nkrode/RedisLive 本文记录Redis-Live在CentOS 7下面的安装. 第一步:环境准备 使用Root账户登录CentOS并联网. 由于Redis-Live是用Python写的,所以先检测Python环境,要求必须是2.7以上.CentOS7默认就是2.7.5,所以省去这一步. 接下来检测yum是否能够正常运行

1.设置启动的时间,输入crontab -e命令 设置一种编辑器,进入编辑界面,设置启动的时间为每5分钟启动一次wanghy.sh脚本 # m h dom mon dow command # */ * * * * date >> ~/time.log */ * * * * /home/mpr/wanghy.sh wanghy.sh脚本如下,注意shell种类的开头 #!/bin/bash source /etc/profile echo "hello world" cd /

方法一.用shell脚本定时更新项目   1.进入网站的根目录,假设项目位置放在/var/www/test cd /var/www/test   2.建立脚本文件update.sh,分两步进行.首先利用touch命令创建,之后使用vim进行编辑. touch update.sh vim update.sh   输入以下内容   #!/bin/sh while true do svn update --username 你的svn用户名 --password 你的svn密码 sleep 60 do

除了使用Hive,Pig来执行一个MapReduce任务,不需要专门的把项目打成jar包,提交执行,或者定时执行,因为Hive,Pig这些开源框架已经,帮我们自动打包上传了. 而有些时候,我们自己手写了一个MapReduce的任务,然后这个任务里面依赖了其他的第三方包,比如说是Lucene的,或者是Solr,ElasticSearch的,那么打包的时候就需要将这些依赖的jar包也一起的打包进去. 如果你用的是maven,那么事情就简单了,maven会自动把所有依赖的jar包,打成一个统一的jar

linux操作系统最小粒度的定时调度器仅仅能调到分钟的级别,工作中有时需在到秒的调度,所以须要自己编写脚本来实现 #!/bin/bash while [ true ]; do /bin/sleep 1 ##在这里能够编写自己复杂的业务代码netstat -n | grep 8020 >> /root/data/flume.log echo 10.58...###`date` >> /root/data/flume.log done 编写好之后,把脚本(mycrontab.sh)提交

网上有很多的文章教大家使用定时任务,所以别的废话我就不多说了 我这里直接有SH来做定时,只是有一点大家不知道,一定要用Nohup,否则用户退出终端以后,SH任务会被自动终止掉 假设有一 tash.sh,注意以下,都是精华 启动是:nohup /home/spex/bin_prodDemo/task.sh &                         一定要把路径打全,绝对地址 然就是退出,记得退出!!!用exit退出终端!!千万不要直接退出.不然还是没有用的. 然后查看一下 ps aux|

需求: 每分钟执行一次程序,将处理后的数据写入mongodb 最初做法: 1):写crontab没有响应,于是打算通过shell脚本的while true来执行 当时sb,没控制时间内,而且我还是用nohup XXXX.sh 2>&1 & 结果就是,几乎每一个瞬间启动一个jar,服务器内存瞬间沾满 解决:利用awk命令处理 kill - $(ps -ef | grep jar | awk '{print $2}' 2):重新解决crontab问题 crontab很坑,坑的原因有俩:

经常我们会发现服务器跑着跑着内存使用率达到了百分之八九十,或者有时候直接挂掉,在我们还没定位是哪块代码有问题导致内存占用很大的时候,可以先写个定时脚本,当服务器内存使用率达到一定值的时候,就重启一起服务,释放内存.下面这个定时脚本是每隔10s去判断一下机器的内存,假如内存使用率超过10%,就重启一下进程(正常情况下内存使用率是%5左右,所以就定了个10%),代码如下面蓝色部分所示.然后修改脚本权限,用于命令让它在后头不挂断运行:nohup python -u restart.py >nohup.

在ubuntu环境下,使用scrapy定时执行抓取任务,由于scrapy本身没有提供定时执行的功能,所以采用了crontab的方式进行定时执行: 首先编写要执行的命令脚本cron.sh #! /bin/sh export PATH=$PATH:/usr/local/bin cd /home/zhangchao/CVS/testCron nohup scrapy crawl example >> example.log 2>&1 & 执行,crontab -e,规定cron

sqoop定时增量导入 2013-11-06 14:23 4553人阅读 评论(0) 收藏 举报 sqoop使用hsql来存储job信息,开启metastor service将job信息共享,所有node上的sqoop都可以运行同一个job 一.sqoop的配置文件在sqoop.site.xml中: 1.sqoop.metastore.server.location 本地存储路径,默认在tmp下,改为其他路径 2.sqoop.metastore.server.port metastore ser

我们可能会遇到这样的情景:必须在每个工作日定时执行Linux服务器上的某个程序.那么有没有办法实现这一功能呢?答案是肯定的.我们可以运用Shell脚本简单实现这一功能. 原理很简单,Shell脚本内部每隔1秒查询一次当前时间.日期以及星期数,当检测到当前星期数week非0或6(0代表星期天,6代表星期六)且时间curTime大于指定时间startTime时,执行指定的程序program.为了保证每天仅执行一次指定程序program,还引用了变量isFirstTime做标记.具体代码如下: #!/

nohup 和重定向 功能一样,可用于定时启动 1.nohup 用途:不挂断地运行命令. 语法:nohup Command [ Arg … ] [ & ] 无论是否将 nohup 命令的输出重定向到终端,输出都将附加到当前目录的 nohup.out 文件中. 如果当前目录的 nohup.out 文件不可写,输出重定向到 $HOME/nohup.out 文件中. 如果没有文件能创建或打开以用于追加,那么 Command 参数指定的命令不可调用. 退出状态:该命令返回下列出口值:  126 可以查找

一.安装golang 1.apt-get安装golang $ sudo apt-get update $ sudo apt-get install -y golang 2.创建Go语言的工作文件夹,并添加到环境变量中 $ sudo mkdir -p /opt/go # 添加环境变量 $ vim ~/.bashrc export GOPATH=$HOME/go # 使配置立刻生效 $ source ~/.bashrc 3.创建测试环境,并测试golang程序 $ vim hello.go pack

输出日志在当前目录: nohup java -jar ace-auth.jar >> nohup`date +%Y-%m-%d`.out 2>&1 & 指定日志目录输出: 指定输出到当前目录log文件夹中 nohup java -jar ace-auth.jar >> ./log/nohup`date +%Y-%m-%d`.out 2>&1 & 发现无法自动切割日志,做一个定时脚本,凌晨时候kill掉进程然后再启动 kill -9 $(p

一.概述 临时接到任务要对系统的接口进行压测,上面的要求就是:压测,并发2000 在不熟悉系统的情况下,按目前的需求,需要做的步骤: 需要有接口脚本 需要能监控系统性能 需要能定时执行脚本 二.观察 >针对第一点:接口脚本 需要观察系统接口的情况: 系统使用swagger文档编辑接口,这很好,可以直接引用 系统内关联接口熟悉,将需要的参数设置成变量以便调用 系统内的接口返回状态很规范,可以直接判断code&message 综上,为了效率,选择现存的开源工具执行(针对该开源工具的要就是可以使用

一.关于nohup: 1.假设有一 tash.sh 启动是:nohup /home/spex/bin_prodDemo/task.sh &                         一定要把路径打全,绝对地址然就是退出,记得退出用exit退出终端!!千万不要直接退出.不然还是没有用的. 出现提示:   [~]$ appending output to nohup.out   证明运行成功,同时把程序运行的输出信息放到当前目录的 nohup.out 文件中去. 可以查看一下 ps aux|g

两种解决方案:个人推荐第二种,使用crontab来定时执行任务   1.shell代码如下: nohup command &. 解释: 后台永久运行command命令. (nohup表示后台永远执行,不随终端退出而终止.&表示后台运行,随着终端退出程序而终止.两个一起就是后台永久运行了) #!/bin/bash #需要定时执行的程序 program=testapp #获取当前时间,例如20171129 <---> perDate=$(date "+%Y%m%d&quo

编写shell脚本,用于启动.关闭jar程序: #!/bin/bash #description: 启动重启server服务 #需要配置环境变量后才能直接使用java这些变量 export JAVA_HOME=/data/jdk1.8.0_111 export PATH=$PATH:$JAVA_HOME/bin #启动命令所在目录 HOME='/data/dingtalk' #过滤查询执行.jar的线程PID pid=`ps -ef|grep dingtalk.jar|grep -v grep|