1. 建立一个4G内存的虚拟机,安装Linux系统(具体的版本以能运行Docker为准,我用的是Ubuntu-Server) 2. 安装Docker 3. 下载elk容器:# docker pull sebp/elk 4. 编译文件:/etc/sysctl.conf  在后面加上: vm.max_map_count=262144 ,如果不想重启:那么再执行一下:sysctl -w vm.max_map_count=262144 5. 运行: $ sudo docker run -p 5601:5…

elk日志系统中kibana查询语法 单项term查询 例: 搜 Dahlen, Malone 字段field查询 field:value 例:city:Keyport, age:26 通配符 ? 匹配单个字符 例: H?bbs* 匹配0到多个字符 例: H 注意: ? 不能用作第一个字符,例如: ?text *text 范围查询 age:[20 TO 30] age:{20 TO 30} 注:[ ] 表示端点数值包含在范围内,{ } 表示端点数值不包含在范围内 逻辑操作 AND OR 例子:f…

在kibana中,可通过搜索查询过滤事务或者在visualization界面点击元素过滤. 创建查询 在Discover界面的搜索栏输入要查询的字段.查询语法是基于Lucene的查询语法.允许布尔运算符.通配符和字段筛选.注意关键字要大写.如查询类型是http,且状态码是302.type: http AND http.code: 302. 字符串查询 查询可以包含一个或多个字或者短语.短语需要使用双引号引起来.如: 每个字段都会匹配过去.要搜索一个确切的字符串,需要使用双引号引起来. 如果不带引…

kibana绘图 好些日志入库了需要分析. 1,首先分析top10 url的table和柱状分布 2,其次想着分析下404所占比例,以及404所对应的url table. 3,最后分析一下请求总数. 绘图示例: 正确姿势: 1.url top10及总数 2.状态码 3.总数 1,灵活的搜索功能 搜一下今天内404对应的url 搜一下前2h,订单url的总数 搜一下... 参考: https://segmentfault.com/a/1190000002972420 字段 也可以按页面左侧显示的字…

在kibana中,可通过搜索查询过滤事务或者在visualization界面点击元素过滤. 创建查询 在Discover界面的搜索栏输入要查询的字段.查询语法是基于Lucene的查询语法.允许布尔运算符.通配符和字段筛选.注意关键字要大写.如查询类型是http,且状态码是302.type: http AND http.code: 302. 字符串查询 查询可以包含一个或多个字或者短语.短语需要使用双引号引起来.如: 每个字段都会匹配过去.要搜索一个确切的字符串,需要使用双引号引起来. 如果不带引…

部署机器: 服务端:dev-server    X.X.X.X      ( logstash-1.5.4,elasticsearch-1.7.1,kibana-4.1.1 ) 客户端:dev-client    X.X.X.X        (logstash-forwarder-0.4.0-1) 需求:将客户端访问日志(nginx log)在ELK中展示.安装ELK:服务端:设置FQDN(创建SSL证书的时候需要配置FQDN): [root@dev-client ~]# hostname d…

前言 最近公司分了个ELK相关的任务给我,在一边学习一边工作之余,总结下这些天来的学习历程和踩坑记录. 首先介绍下使用ELK的项目背景:在项目的数据库里有个表用来存储消息队列的消费日志,这些日志用于开发者日后的维护.每当客户端生产一条消息并发送到消息队列后,就会插入一条对应的记录到数据库里.当这条消息被消费之后,又会更新数据库里对应的记录的几个column的值,比如status.updated_on这些常用的column. 由于客户每天生产消费的消息很多,导致数据库里的这个表里的数据很多,长年累…

环境说明 1. windows server 2012 R2 64位 2. log4net.ElasticSearch 3. kibana-5.5.0-windows-x86.zip 架构说明 数据采集有两种方案Beats或Logstash,Logstash支持很多种数据源,有log4j但没有log4net,本想使用log4net.redis+redis+logstash的方式实现日志收集.无意间发现了log4net.ElasticSearch可以直接写日志到ES,经过测试非常好用.方便. lo…

本文书接前回<ELK搭建实时日志分析平台之一ElasticSearch> 文:铁乐与猫 四.安装Logstash logstash是一个数据分析软件,主要目的是分析log日志. 1)下载和解压logstash 下载地址: https://www.elastic.co/cn/downloads/logstash 上传到服务器/usr/ELK目录后,解压:sudo tar -zxvf logstash-6.1.3.tar.gz 我下的这个6.1.3版本的logstash tar包大小有110多M了…

ELK笔记 ELKStack高级实战培训http://files.cnblogs.com/files/MYSQLZOUQI/ELKStack%E9%AB%98%E7%BA%A7%E5%AE%9E%E6%88%98%E5%9F%B9%E8%AE%AD.rar ELK Stack深入浅出PPT.rarhttp://files.cnblogs.com/files/MYSQLZOUQI/ELKStack%E6%B7%B1%E5%85%A5%E6%B5%85%E5%87%BA.rar https://ww…