#!/bin/bash NGINX_LOG=/usr/loca/nginx/logs/access.log RE_LOG=/data/backup/`data +%Y%m%d` echo -e "\33[33m begin rotate nginx's logs\33[0m" sleep 5 if [ -d $RE_LOG ];then mkdir -p $RE_LOG fi mv $NGINX_LOG $RE_LOG kill -USR1 `cat /usr/local/nginx/…

192.168.31.250 - - [13/Nov/2019:08:38:07 +0800] "GET /aa HTTP/1.1" 404 571 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36 Edge/18.18362" "-"…

Nginx地址重写 Nginx rewrite rewrite语法规则1).变量名可以使用 "=" 或 "!=" 运算符~ 区分大小写~* 不区分大小写^~ 禁止表达式匹配 找到后就不向下找了= 精确匹配!~ 和 !~* 与 ~ !~ 相反-f 和 !-f 用来判断文件是否存在-d 和 !-d 用来判断目录是否存在-e 和 !-e 用来判断文件或目录是否存在-x 和 !-x 用来判断文件是否可以执行也支持$1到$9位置化参数 1.if指令规则语法if($http_u…

日志分析平台,架构图如下: 架构解读 : (整个架构从左到右,总共分为5层) 第一层.数据采集层 最左边的是业务服务器集群,上面安装了filebeat做日志采集,同时把采集的日志分别发送给两个logstash服务. 第二层. logstash服务把接受到的日志经过格式处理,转存到本地的kafka broker+zookeeper集群中. 第三层.数据转发层 这个单独的Logstash节点会实时去kafka broker集群拉数据,转发至ES DataNode. 第四层.数据持久化存储 ES Da…

概述 logrotate是一个Linux系统默认安装了的日志文件管理工具,用来把旧文件轮转.压缩.删除,并且创建新的日志文件.我们可以根据日志文件的大小.天数等来转储,便于对日志文件管理. logrotate是基于crond服务来运行的,其crond服务的脚本是/etc/cron.daily/logrotate,日志转储是系统自动完成的.实际运行时,logrotate会调用配置文件 /etc/logrotate.conf,可以在 /etc/logrotate.d 目录里放置自定义好的配置文件,用…

Filebeat 介绍 Filebeat 安装 # 上传代码包 [root@redis03 ~]# rz filebeat-6.6.0-x86_64.rpm # 安装 [root@redis03 ~]# rpm -ivh filebeat-6.6.0-x86_64.rpm Filebeat 配置 # Filebeat 配置文件 [root@redis03 ~]# rpm -qc filebeat /etc/filebeat/filebeat.yml Filebeat 日志 # Filebeat…

ELK Stack 组成 Software Description Function E:Elasticsearch Java 程序 存储,查询日志 L:Logstash Java 程序 收集.过滤日志 K:Kibana Java 程序 提供 Web 服务,将数据页面化 F:Filebeat Go 程序 收集.过滤日志 ELK Stack 功能 收集: 收集所有服务器的日志 传输: 把日志稳定的传输到 ES 或者其他地方 存储: ES 能有效快速的存储日志数据 分析: 通过 Web 页面分析数据…

Nginx_学习笔记 01-Nginx 课程介绍 02-Nginx 的简介 1. 什么是 Nginx ? 03-Nginx 相关概念(正向和反向代理) 1. 什么是反向代理?能否简要画出其示意图 2. 什么是反向代理?能否简要画出其示意图 04-Nginx 相关概念(负载均衡和动静分离) 1. 什么是负载均衡?能否简要画出其示意图 2. 负载均衡都有哪些方式? 3. 什么是动静分离?能否简要画出其示意图 05-Nginx 在 Linux 系统安装 1.1 安装 pcre 依赖 1.2 安装其他依…

.NetCore中的日志(2)集成第三方日志工具 0x00 在.NetCore的Logging组件中集成NLog 上一篇讨论了.NetCore中日志框架的结构,这一篇讨论一下.NetCore的Logging组件中第三方日志工具的集成.只要按照Logging组件中相关接口的要求提供相应的实现(ILogger.ILoggerProvider),然后把实现的ILoggerProvider加入到LoggerFactory就可以使用了,非常方便.这里以NLog为例进行实践.关于NLog的详细教程可以参考h…

.NetCore中的日志(1)日志组件解析 0x00 问题的产生 日志记录功能在开发中很常用,可以记录程序运行的细节,也可以记录用户的行为.在之前开发时我一般都是用自己写的小工具来记录日志,输出目标包含控制台.文本文件.数据库,一般都是创建全局的Logger,在需要记录日志的地方调用相应的Logger输出至相应目标.遇到输出目标多了有时候也感觉挺麻烦的,不过也还能接受.开始学习.NetCore后接触到了日志记录框架(Logging组件),虽然完全可以用之前的方式记录日志,不过应该使用更通用的方式…