以/etc/passwd举例,passwd文本 [root@196 tmp]# cat /etc/passwd root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin ... 关于passwd 用户名(login_name) 口令(passwd) 用户标识号(UID) 组标识号(GID) 注释性描述(users) 主目录(home_directory) 登录Shell(Shell) 过滤行首或行尾 # 以nologin结尾…

30天内的文件打包 find ./test_log -type f -mtime -30|xargs tar -cvf test_log.tar.gz find,文件+超过7天+超过1M的+按日期为文件名压缩 注意: exec没-i, xargs如果有引用需要加上-i find xargs -type -name -size -mtime find /tmp/ -type f -mtime +7 -size +1M|xargs -i tar -zcvf access.log.tar.gz {}…

当我们在 Unix/Linux 下使用特定的命令从字符串或文件中读取或编辑文本时,我们经常需要过滤输出以得到感兴趣的部分.这时正则表达式就派上用场了. 什么是正则表达式? 正则表达式可以定义为代表若干个字符序列的字符串.它最重要的功能之一就是它允许你过滤一条命令或一个文件的输出.编辑文本或配置文件的一部分等等. 正则表达式的特点 正则表达式由以下内容组合而成: 普通字符,例如空格.下划线.A-Z.a-z.0-9. 可以扩展为普通字符的元字符,它们包括: (.) 它匹配除了换行符外的任何单个字符.…

1. 场景 从日志中获取漏发奖励的司机id 2. 日志 如下(需要获取一个时间段的 driverIdStr) ::-thread-] order.service.TOrderInfoServiceImpl: - 调用支付完成登记接口,URL=http://rocky/tOrderHandle/settleTaxiAccount,参数={"phone":"1865558888","cityIdStr":"44","cu…

http://www.h3c.com.cn/Products___Technology/Technology/Security_Encrypt/Other_technology/Representative_collocate_enchiridion/201010/697325_30003_0.htm HTTPS Web配置举例 关键词:HTTPS.SSL.PKI.CA.RA 摘   要:HTTPS是支持SSL的HTTP协议.用户可以通过HTTPS协议安全地登录设备,通过Web页面实现对设备的控…

上篇博文讲到为了解决tomcat日志自动清理的问题,翻看了tomcat-juli这个jar包.在FileHandler类下有一个利用nio完成对磁盘下过期文件进行过滤的功能实现,正好这段时间正在学习nio框架,所以特意抽离源码做了一下测试.以下将提供测试代码(主要代码摘抄自tomcat-juli.jar源码),与君共勉. package nio; import java.io.File; import java.io.IOException; import java.nio.file.Direc…

###sed### 查询 1创建测试文件 cat>person.txt<<EOF> 101,oldboy,CEO> 102,zhangyao,CTO> 103,Alex,COO> 104,yy,CFO> 105,feixue.CIO> EOF 2查询单行文本 2连续查询多行文本 3显示出文件包含oldboy的行到包含104的行 等于grep  'oldboy'  person.txt ^104以104开头更加精确 4过滤多个字符串 7查询指定多行 使用…

目录结构 ①常用的安全函数有哪些: ②这些函数的作用: ③函数的用法: ④举例说明: ⑤参考资料: 由于越来越多的项目开始使用框架,所以,很多的程序员也不在关心安全的问题!因为框架已经帮我们几乎完美的处理了!但是,个人认为,我们还是需要了解一下常用的安全处理函数!原因简单:很多小的功能和项目是用不到框架的,我们需要自己解决安全问题! ①常用的安全函数有哪些: mysql_real_escape_string()addslashes() ②这些函数的作用: mysql_real_escape_st…

Map Join 实现方式一 ● 使用场景:一个大表(整张表内存放不下,但表中的key内存放得下),一个超大表 ● 实现方式:分布式缓存 ● 用法: SemiJoin就是所谓的半连接,其实仔细一看就是reduce join的一个变种,就是在map端过滤掉一些数据,在网络中只传输参与连接的数据不参与连接的数据不必在网络中进行传输,从而减少了shuffle的网络传输量,使整体效率得到提高,其他思想和reduce join是一模一样的.说得更加接地气一点就是将小表中参与join的key单独抽出来通过D…

拿到一个ip的excel表格,要对单元格中的ip进行扫描,一看有点乱,有空格分割的,有"/"分割的,有带括号(分割的,有好几百个: 要把左边的变为右边的格式,用excel自带的功能其实也能搞: 把这一列复制下来,粘贴到服务器中,存一个txt文件,用awk过滤一下: root@kali:~/script# awk -F '(' '{print $1}' ip.txt|awk '{print $1}'|awk -F '/' '{print $1}'|awk 'NF' > aliyun…