rsyslog 存储到 mysql
输出Host1/2的系统日志, 记录到mysql服务器数据库中, 并发布loganalyzer
结构关系如下图:
思路: 通过远程连接mysql, 使得rsyslog的log记录能够写入到mysql中, 这其中要依赖一个rsyslog-mysql的模块, 并启用之;
准备工作:
VMware
CentOS 7 最小系统安装镜像
loganalyzer源码包 下载
安装三台主机, 拷贝loganalyzer到MariaDB主机
IP地址与主机对应关系表:
MariaDB主机 | 192.168.142.128/24 |
HOST1 | 192.168.142.135/24 |
HOST2 | 192.168.142.141/24 |
MariaDB服务器操作:
yum -y install mariadb mariadb-server httpd php php-mysql php-gd
#安装mysql服务端, httpd服务端, php --> php-gd 是 loganalyzer 需要使用的
systemctl start mariadb- 登陆mysql
- mysql -uroot -p 登陆;
GRANT ALL ON Syslog.* TO 'sysloguser'@'192.168.142.%' INDENTIFIED BY ''; FLUSH PRIVILEGES;
建立 rsyslog 数据库账号并授权;
注意: 此处Syslog数据库并不需要我们自己建立, 在HOST1/2上安装rsyslog-mysql后, 会有一个 sql 脚本, 该数据库及表由 此脚本 建立, 后文有提到
- 编辑mysql配置文件
vim /etc/my.cnf ###添加如下项目 skip_name_resolve = on
innodb_file_per_table = on ####保存退出, 重启服务
systemctl restart mariadb
HOST1/2 操作:
yum -y install rsyslog-mysql mariadb
# 安装rsyslog支持mysql的模块, 安装mysql客户端
mysql -usysloguser -p123456 -h192.168.142.128
# 测试是否可以连接上 --> 如果连接失败, 在mariadb服务器端重做授权; 检查服务器的防火墙和selinux是否关闭rsyslog连接mysql并做出记录, 是需要依靠 rsyslog-mysql 这个模块的;
查看rsyslog-mysql 这个包相关文件等:
[root@host1 ~]# rpm -ql rsyslog-mysql
/usr/lib64/rsyslog/ommysql.so --> rsyslog模块
/usr/share/doc/rsyslog-8.24.0/mysql-createDB.sql --> 此sql脚本即为上文提到的, rsyslog-mysql这个包提供的 建库脚本- 通过输入重定向的方式, 安装上述sql脚本:
mysql -usysloguser -h192.168.142. -p < /usr/share/doc/rsyslog-8.24./mysql-createDB.sql
检查库建立是否成功:
- 编辑 /etc/rsyslog.conf 配置文件
vim /etc/rsyslog.conf
####MODULES####
$ModLoad ommysql --> 加载ommysql模块以支持功能 ####RULES####
*.info;mail.none; :ommysql:192.168.142.128,Syslog,sysloguser,123456 - 重启rsyslog服务 systemctl restart rsyslog
回到MariaDB服务器, 部署 loganalyzer
- mysql -uroot -p -->连接mysql数据库, 查看是否记录成功
MariaDB [(none)]> use Syslog
MariaDB [Syslog]> SELECT * FROM SystemEvents\G;
- 测试httpd, php, php-mysql 是否配置成功 --> 参见上一篇
- 这里碰到一个问题:sysloguser 1045拒绝登陆;root可以登陆; 解决办法: 删除所有空密码用户(并给root用户设置密码);
--[root@vm]: ~ # mysql -usysloguser -h192.168.142. -p
Enter password:
ERROR (): Access denied for user 'sysloguser'@'vm' (using password: YES)
- 这里碰到一个问题:sysloguser 1045拒绝登陆;root可以登陆; 解决办法: 删除所有空密码用户(并给root用户设置密码);
- 部署loganalyzer
- 下载资源包, 解压
- 我们需要 ./contrib 下的两个脚本, 以及./src 下的全部文件
--[root@vm]: ~/loganalyzer-4.1. # ls
ChangeLog contrib COPYING doc INSTALL src
--[root@vm]: ~/loganalyzer-4.1. # cp -r ./src /var/www/html/log
--[root@vm]: ~/loganalyzer-4.1. # cd /var/www/html/log
--[root@vm]: /var/www/html/log # ls
admin chartgenerator.php cron export.php include js reportgenerator.php statistics.php userchange.php
asktheoracle.php classes css favicon.ico index.php lang reports.php templates
BitstreamVeraFonts convert.php details.php images install.php login.php search.php themes
--[root@vm]: /var/www/html/log # cd -
/root/loganalyzer-4.1.
--[root@vm]: ~/loganalyzer-4.1. # ls
ChangeLog contrib COPYING doc INSTALL src
--[root@vm]: ~/loganalyzer-4.1. # cp ./contrib/*.sh /var/www/html/log
-51-[root@vm]16:21 ~/loganalyzer-4.1.6 # cd -
/var/www/html/log
-52-[root@vm]16:21 /var/www/html/log # ls
admin chartgenerator.php convert.php details.php images install.php login.php search.php templates
asktheoracle.php classes cron export.php include js reportgenerator.php secure.sh themes
BitstreamVeraFonts configure.sh css favicon.ico index.php lang reports.php statistics.php userchange.php
-53-[root@vm]16:21 /var/www/html/log # chmod +x *.sh
-54-[root@vm]16:21 /var/www/html/log # ./configure.sh
-55-[root@vm]16:21 /var/www/html/log # ./secure.sh
-56-[root@vm]16:21 /var/www/html/log # chmod -x *.sh
-57-[root@vm]16:21 /var/www/html/log # touch config.php;chmod 666 config.php - 直接访问192.168.142.128/log
- 直接点击Click here 开始安装
在第三步(Step 3),可以勾选, 并使用mysql做 loganalyzer 的用户数据库; 我们这里做测试就直接跳过了
Step 7
请务必使用chrome, 点击MYSQL Native后, IE/ EDGE/ 360浏览器不会弹出下面的数据库选项框;
- 搞定
- 下载资源包, 解压
总结:
使用纯洁的虚拟机安装; 这次偷懒, 上次用完httpd实验后接着使用, 出现了mysql报错的问题;
360浏览器垃圾, 浪费我半个小时;
不要怕玩坏了, 大不了重装, 反正ks文件做好了, 装系统又不用咱动手
rsyslog 存储到 mysql的更多相关文章
- 关于Ueditor存储在mysql"UTF-8"乱码的问题
关于Ueditor存储在mysql"UTF-8"乱码的问题 首先小编要声明之前出乱码的原因,mysql 字段设置的BLOB类型 紧接着我们要先确认两件事: 1.首先要确认你的mys ...
- hive的本地安装部署,元数据存储到mysql中
要想使用Hive先要有hadoop集群的支持,使用本地把元数据存储在mysql中. mysql要可以远程连接: 可以设置user表,把localhost改为%,所有可连接.记住删除root其他用户,不 ...
- 猫眼电影爬取(一):requests+正则,并将数据存储到mysql数据库
前面讲了如何通过pymysql操作数据库,这次写一个爬虫来提取信息,并将数据存储到mysql数据库 1.爬取目标 爬取猫眼电影TOP100榜单 要提取的信息包括:电影排名.电影名称.上映时间.分数 2 ...
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流(设置时间窗口,EventTime)
网上没什么资料,就分享下:) 简单模式:kafka传数据到Flink存储到mysql 可以参考网站: 利用Flink stream从kafka中写数据到mysql maven依赖情况: <pro ...
- python zlib压缩存储到mysql列
数据太大压缩存储,可以使用zlib中的压缩函数,代码如下: import ujson import MySQLdb import zlib import base64 kwargs = { 'host ...
- Python爬取招聘信息,并且存储到MySQL数据库中
前面一篇文章主要讲述,如何通过Python爬取招聘信息,且爬取的日期为前一天的,同时将爬取的内容保存到数据库中:这篇文章主要讲述如何将python文件压缩成exe可执行文件,供后面的操作. 这系列文章 ...
- 【saltstack】saltstack执行结果和事件存储到mysql
前言 项目中使用saltstack有一段时间了,之前都是在控制台操作,后来感觉越来越不方便,每次操作需要登陆服务器,还需要记一堆命令.最重要的是,公司进新人之后,新人由于不熟悉saltstack,容易 ...
- Python3爬取前程无忧数据分析工作并存储到MySQL
1.导入包import requests #取数from lxml import etree #用xpath解析import pymysql #连接数据库import chardet #自动获取编码2 ...
- <day001>存储到Mysql、mongoDB数据库+简单的Ajax请求+os模块+进程池+MD5
任务1:记住如何存储到Mysql.mongoDB数据库 ''' 存储到Mysql ''' import pymysql.cursors class QuotePipeline(object): def ...
随机推荐
- iOS 内网内测应用发布
之前测试时,iOS 开发会把测试版本上传到蒲公英上,可以很方便的获取.后来认为不安全,万一测试版泄露了会有风险,就又回到了解放前,测试跑到开发那里编包.想过把手机越狱安装开发的编的 ipa 包,这样测 ...
- SQL Server死锁排查
1. 死锁原理 根据操作系统中的定义:死锁是指在一组进程中的各个进程均占有不会释放的资源,但因互相申请被其他进程所站用不会释放的资源而处于的一种永久等待状态. 死锁的四个必要条件:互斥条件(Mutua ...
- [C#学习笔记之异步编程模式2]BeginInvoke和EndInvoke方法 (转载)
为什么要进行异步回调?众所周知,普通方法运行,是单线程的,如果中途有大型操作(如:读取大文件,大批量操作数据库,网络传输等),都会导致方法阻塞,表现在界面上就是,程序卡或者死掉,界面元素不动了,不响应 ...
- 杭电 2639 Bone Collector II【01背包第k优解】
解题思路:对于01背包的状态转移方程式f[v]=max(f[v],f[v-c[i]+w[i]]);其实01背包记录了每一个装法的背包值,但是在01背包中我们通常求的是最优解, 即为取的是f[v],f[ ...
- 第七章 Python之模块与包
模块介绍 一个模块就是包含了一组功能的python文件(例如module.py,模块名是module),它从文件级别组织程序,更方便管理,这时我们不仅仅可以把这些文件当作脚本执行,还可以把他们当作模块 ...
- css——应用多个样式
应用多个样式 在class中使用多个样式 在这是会有优先级关系问题 在上面的代码中,aa,bb,中的颜色会有冲突,到底显示的结果会是黄色还是绿色呢? 结果是绿色的.它是以程序执行的先后为优先级,后执行 ...
- Day 07 数据类型的内置方法[列表,元组,字典,集合]
数据类型的内置方法 一:列表类型[list] 1.用途:多个爱好,多个名字,多个装备等等 2.定义:[]内以逗号分隔多个元素,可以是任意类型的值 3.存在一个值/多个值:多个值 4.有序or无序:有序 ...
- tcpsock.v2 与 ecocache
因为很不满意 tcpsock 的设计与实现,及有意专为譬如游戏服务器端开发设计一套 TCP 网络库,所以年初即有了 tcpsock.v2 的开发计划,于是粗略整理出了以下几条目标计划: 1) TcpC ...
- HDU 5914 Triangle
题目来源:2016 CCPC 长春站 题意:青蛙先生想用n个长度为1~n的木棍来组成一些三角形,但是有一个坏蛋就想破坏青蛙先生的好事,请问在这n个木棍中至少偷出来几个木棍使得青蛙先生无法再用剩下的一些 ...
- BZOJ 3524 [POI2014]KUR-Couriers (主席树)
题目大意:给你一个序列,求某个区间出现次数大于一半的数是什么 主席树裸题,刷刷水题提升自信= = #include <cstdio> #include <cstring> #i ...