Shell脚本:向磁盘中批量写入数据
一、关于本文
工作要做的监控系统需要监控磁盘空间的使用率并报警。在测试这个功能的时候需要模拟两个场景:一是磁盘空间不断增长超过设定的阈值时,需要触发报警机制;二是磁盘空间降落到低于报警阈值的时候,不再进行报警。为了测试这两个场景,我写了下面三个脚本:
1)initializer.sh:创建目录TestDir,并创建一个大文件template
2)duplicator.sh:不断复制文件template,直到磁盘空间使用率超过输入的参数为止
3)cleaner.sh:清除前面两个脚本留下的痕迹,即删除目录TestDir
二、initializer.sh
最开始创建一个大文件的方式是通过Shell向文件中写入字符并复制的方式,代码如下(initializer.sh.old):
#!/bin/sh #本脚本用于初始化工作,创建文件夹TestDir并写入一个大小为100M的目录 #创建文件TestDir
if [ -x "./TestDir" ]; then
rm -rf TestDir
fi
mkdir TestDir
cd TestDir
mkdir Template
cd Template touch template.txt #制作大小为100K的文件template.txt
string=""
repetend="012345678901234|"
for((i=1;i<6400;i++))
do
string=$string$repetend
done
echo $string >> template.txt #复制1000个该文件
i=0
while [ true ]; do
if [ "$i" -gt 1020 ]; then
break
fi
cp template.txt $i
((i++))
done echo "文件制造完毕,空间占用信息如下"
pwd .
du -sh . cd ../.. exit 0
这种方式效率比较低,并且代码比较长,后来改用dd命令实现功能(initializer.sh):
#!/bin/sh #本脚本用于初始化工作,创建文件夹TestDir并写入一个大小为100M的目录 #创建文件TestDir
if [ -x "./TestDir" ]; then
rm -rf TestDir
fi
mkdir TestDir
cd TestDir dd if=/dev/zero of=template bs=1M count=1024 pwd .
du -sh . cd .. exit 0
这个脚本创建了TestDir目录,并在里面写入了一个1.1GB的文件template
三、duplicator.sh
脚本duplicator.sh接受一个5-95的数字,作为阈值。这个脚本不断复制initializer.sh创建的template文件,直到里面指定的磁盘空间使用率超过输入的阈值时,才停止运行。
#!/bin/sh #运行本脚本前请先运行脚本 initializer.sh
#本脚本用于不断复制文件,直到给出的参数阈值超过当前磁盘空间利用率
#输入参数:磁盘空间使用率阈值 #函数:打印脚本使用说明
function usage()
{
echo "Usage: ./duplicator [threshold]"
echo "threshold is an integer in the range of [1,99]"
echo "*Run initializer.sh before run this script"
exit 0
} #脚本有且只有一个输入
if [ "$#" -ne 1 ]; then
echo "脚本应有且只有一个输入"
usage
fi #脚本的输入必须为5-95之间的正整数
threshold=`echo $1 | bc`
if [ "$threshold" -lt 5 -o "$threshold" -gt 95 ]; then
echo "脚本的输入必须为5-95之间的正整数"
usage
fi #目录TestDir必须存在
if [ ! -d ./TestDir ]; then
echo "缺少目录 TestDir"
usage
fi #文件TestDir/template必须存在
if [ ! -f ./TestDir/template ]; then
echo "缺少文件 TestDir/template"
usage
fi cd TestDir #复制文件,超过输入的阈值为止
i=0
while [ true ]; do
cur=`df -h | grep /dev/sda3 | awk '{printf substr($5,1,length($5)-1)}'`
echo "Current usage: $cur | Object usage: $threshold"
if [ "$cur" -gt "$threshold" ]; then
break;
fi
cp template $i
echo " $i Duplication complete!"
((i++))
done cd .. #TestDir echo "Script finished!" exit 0
四、cleaner.sh
这个脚本用于清除前两个脚本在系统中留下的痕迹
#!/bin/sh #本脚本用于清空脚本initializer.sh和duplicator.sh留下的痕迹 #检查文件是否存在
if [ ! -x "./TestDir" ]; then
echo "文件 ./TestDir 不存在,无需清除"
exit 0
fi #用户确认后清除文件
echo "真的要清除全部数据吗? (y/n)"
read input
case "$input" in
y* | Y* )
rm -rf ./TestDir
echo "数据删除完毕";;
n* | N* )
echo "放弃删除数据";;
* )
echo "输入未识别";;
esac exit 0
五、调用效果截图
Shell脚本:向磁盘中批量写入数据的更多相关文章
- HBase BulkLoad批量写入数据实战
1.概述 在进行数据传输中,批量加载数据到HBase集群有多种方式,比如通过HBase API进行批量写入数据.使用Sqoop工具批量导数到HBase集群.使用MapReduce批量导入等.这些方式, ...
- 使用XML向SQL Server 2005批量写入数据——一次有关XML时间格式的折腾经历
原文:使用XML向SQL Server 2005批量写入数据——一次有关XML时间格式的折腾经历 常常遇到需要向SQL Server插入批量数据,然后在存储过程中对这些数据进行进一步处理的情况.存储过 ...
- MSSQL批量写入数据方案
近来有一个项目Feature需要有批量写入数据的场景,正巧整理资料发现自己以前也类似实现的项目,在重构的同时把相关资料做了一个简单的梳理,方便大家参考. 循环写入(简单粗暴,毕业设计就这样干的)(不推 ...
- 使用XML向SQL Server 2005批量写入数据——一次有关XML时间格式的折腾经历
使用XML向SQL Server 2005批量写入数据——一次有关XML时间格式的折腾经历 原文:使用XML向SQL Server 2005批量写入数据——一次有关XML时间格式的折腾经历 常常遇 ...
- shell脚本(多线程批量创建用户)
shell脚本中的多线程 很多场景中会用到多线程,例如备份数据库,有100个库,正常备份效率极其低下.有了多线程原本可能需要10个小时备份,现在分10个线程同时去干,只要一个小时就解决了.今天就介绍下 ...
- 如何使用shell脚本快速排序和去重文件数据
前面写过一篇通过shell脚本去重10G数据的文章,见<用几条shell命令快速去重10G数据>.然而今天又碰到另外一个业务,业务复杂度比上次的单纯去重要复杂很多.找了很久没有找到相应的办 ...
- Saiku数据库迁移后的刷新脚本-Shell脚本读取数据库中的数据(二十三)
Saiku数据库迁移后的刷新脚本 之前有谈过对saiku中的数据进行刷新,因为saiku默认会从缓存中查询数据,但是配置不使用缓存又会效率低下... 所以这里就需要做一个数据刷新,每次ETL之后都需要 ...
- shell脚本之分析oracle数据库数据泵日志中表的大小
1.分析日志格式如下 . . imported "xxx_330508"."xxx_T_DATA" 46.17 MB 268 rows . . imported ...
- 通过Shell脚本来创建批量服务器上的MySQL数据库账号
1.项目背景 因监控需要,我们需要在既有的每个MySQL实例上创建一个账号.公司有数百台 MySQL 实例,如果手动登入来创建账号很麻烦,也不现实.所以,我们写了一个简单的shell脚本,用来创建批量 ...
随机推荐
- ArcGIS Add-in ValidateAddInXMLTask”任务意外失败
晚上收假回来调一Add-In程序,遇到编译错误:"ValidateAddInXMLTask"任务意外失败. error MSB4018: System.IO.FileNotFoun ...
- sell 项目 商品表 设计 及 创建
1.数据库表之间的关系说明 2.数据库设计 3.创建 商品表 /** * 商品表 */ create table `product_info` ( `product_id` varchar(32) n ...
- PowerDesigner使用笔记
一:PDM模版使用 1:新建model:File——new model——选择PDM,填上名字.数据库类型 2:右侧工具类使用 3:创建表与配置 点击右侧工具栏中table控件,移动到模版面板内点击一 ...
- 收银台(POSBox) 配置向导
先决条件 在开始设置您的POSBox之前, 确保你准备好了一切. 你会需要 : POSBox 2A电源适配器 一台带最新的Web浏览器的计算机或平板电脑. 可用的的SaaS或已安装零售的Odoo 设置 ...
- CentOS7 nginx+tomcat实现代理访问java web项目让项目支持jsp和php
如果安装了Tomcat查看版本方法如下:注意:先进到tomcat的bin目录下(cd /tomcat目录/bin),在执行./version.sh [root@izbp bin]# ./version ...
- Windows下MySQL 5.7安装记录
软件下载 环境:Windows 7 旗舰版 64位 MySQL版本:mysql-5.7.3.0-winx64 MySQL下载地址:http://dev.mysql.com/downloads/inst ...
- Tomcat中的session实现
Tomcat中一个会话对应一个session,其实现类是StandardSession,查看源码,可以找到一个attributes成员属性,即存储session的数据结构,为ConcurrentHas ...
- python之获取微信服务器的ip地址
# -*- coding: cp936 -*- #PYTHON 27 #xiaodeng #获取微信服务器的ip地址 import urllib url='https://api.weixin.qq. ...
- python之模块base64
# -*- coding: cp936 -*- #python 27 #xiaodeng >>> help(base64) #用来作base64编码解码 FUNCTIONS #函数( ...
- Linux和windows下内核socket优化项 (转)
问题: No buffer space available Linux: vi /etc/sysctl.conf net.core.netdev_max_backlog = 30000 每个网络接口 ...