Shell脚本逐行读取文本内容并拆分,根据条件筛选文件

• 时间：2018-11-13 整理：byzqy

需求：

　　最近帮朋友写了一段脚本，他的需求是根据一份产品清单，去服务器上捞取对应产品编号的测试Log，数量大概有9000~10000条左右。文本内容大致如下，数据有4列，分别表示：产品编号、员工编号、测试日期、质量等级。需要筛选出质量等级为“1”的产品的测试数据，数据存储在以各自员工编号命名的不同测试日期的文件夹下。log文件名中包含完整产品编号。

文件：adc.txt

 1 S0001L0001;TALLYMAN01;20180101;1
 2 S0001L0002;TALLYMAN01;20180102;0
 3 S0001L0003;TALLYMAN01;20180103;1
 4 S0001L0004;TALLYMAN01;20180104;0
 5 S0001L0005;TALLYMAN01;20180105;1
 6 S0002L0006;TALLYMAN02;20180106;0
 7 S0002L0007;TALLYMAN02;20180107;1
 8 S0002L0008;TALLYMAN02;20180108;0
 9 S0002L0009;TALLYMAN02;20180109;1
10 S00020L010;TALLYMAN02;20180110;0

解决：

　　1、使用循环逐行读取文本文件；

　　2、然后再将每一行的文本按照分号（;）进行分割，得到4个参数，分别用来代表拿到的产品编号、员工编号、测试日期、质量等级；

　　3、根据实际情况设定log存放的目录，并代入我们获取到的参数，必要时可使用通配符。执行查找并复制文件。

脚本：catch_log.sh

 1 #!/bin/bash
 2
 3 FILENAME=abc.txt
 4
 5 function While_read_LINE(){
 6 #读取行内容
 7 cat $FILENAME | while read LINE
 8 do
 9 echo "$LINE"
10
11 #拆分字符串到数组
12 str=$LINE
13 OLD_IFS="$IFS"
14 IFS=";"
15 arr=($str)
16 IFS="$OLD_IFS"
17
18 #遍历回显数组
19 #for s in ${arr[@]}
20 #do
21 #echo "$s"
22 #done
23
24 #为自定义变量赋值
25 PARAM_1=${arr[0]}
26 PARAM_2=${arr[1]}
27 PARAM_3=${arr[2]}
28 PARAM_4=${arr[3]}
29
30 #根据条件执行查找并拷贝
31 if [ "$PARAM_4"x = "1"x ]; then
32 #设定筛选条件
33 SERVER_ADDRESS=/mnt/server/ProductTest/$PARAM_2/FAIL/$PARAM_3/
34 LOCAL_ADDRESS=/home/user/Desktop/result/
35 TARGET_FILE_NAME=$(PARAM_1)_*.txt
36 #执行拷贝
37 cp $(find "$SERVER_ADDRESS" -name "$TARGET_FILE_NAME") $LOCAL_ADDRESS
38 fi
39
40 done
41 }
42
43 While_read_LINE

备注：

　　1、在Ubuntu16.04上执行该bash文件时，记得要对catch_log.sh添加可执行权限；

　　2、将abc.txt和bash文件放在同一目录下，否则abc.txt不会被找到；

　　3、需要在Desktop上手动创建result文件夹，否则cp文件时找不到路径会报错；

　　4、使用方法是打开终端（Terminal），然后将catch_log.sh拖进去，然后按下回车键执行。

--the end--