http://www.wklken.me/posts/2016/05/24/elk-mysql-slolog.html   处理mysql慢查询日志 http://www.wklken.me/posts/2016/05/07/elk-about-2.html ELK维护的一些点(二) http://www.wklken.me/posts/2016/02/16/elk-about-upgrade.html ELK维护的一些点(一) http://www.wklken.me/posts/2015/0…

http://www.cnblogs.com/shanyou/archive/2011/07/17/2108953.html http://www.cnblogs.com/haogj/archive/2011/05/06/2038965.html //标签比较详细 http://www.cnblogs.com/Gyoung/archive/2013/01/17/2864150.html…

安装所遇到的问题:http://www.bubuko.com/infodetail-1889252.html 一,先创建用户和组groupadd es useradd -g es es passwd es 二,下载对应文件初始条件要安装javayum -y install java Download and install the .tar.gz packageedit The .tar.gz archive for Elasticsearch v5.4.0 can be downloaded…

ELK部署(文章有点儿长,搭建时请到官网将tar包下载好,按步骤可以完成搭建使用) ELK指的是ElasticSearch.LogStash.Kibana三个开源工具 LogStash是负责数据的收集和过滤处理 ElasticSearch 是一个开源分布式搜索引擎,负责数据的存储.检索和分析 Kibana 是提供可视化的页面,对数据进行可视化预览 首先前提安装好java环境,java1.8 yum -y list java yum install java-1.8.0-openjdk.x86_6…

本篇文章采用的采用的是logstash-7.7.0版本,主要从如下几个方面介绍 1.logstash是什么,可以用来干啥 2.logstash的基本原理是什么 3.怎么去玩这个elk的组件logstash 一.logstash是什么,有哪些作用 1.1.概念 官方概念:Logstash是免费且开放的服务器端数据处理管道,能够从多个来源采集数据,转换数据,然后将数据发送到您最喜欢的“存储库”中. 1.2.功能 Logstash能够动态地采集.转换和传输数据,不受格式或复杂度的影响.利用Grok从非…

*注: row: 调用条数 titlelen: 字数 typeid: 调用的栏目ID orderby: 按照升序对记录进行排序 idlist: 提取特定文档为空 infolen='40' 内容简介长度为40个字符 {dede:arclist row='} <dl> <span class="pic"> [field:imglink/] //img 调用 </span> <dt>[field:title/]</dt> //tit…

目标地址:http://weixin.sogou.com/weixin? 这个地址是搜狗微信的文章搜索,可以搜索到微信的文章,而我们目标就是这些文章内容 这个url经过测试,当我们没登陆微信只能看到10页的内容,我们登陆后才可以查看100页的内容, 而且翻页多次会出现ip检测的反爬机制,出现302重新跳转到验证码输入页面,输入验证码后才可以继续浏览网页 于是我们就利用代理池来解决这个反爬. 首先搭建爬虫主题框架,因为是搜索类型的url,一般通过get请求,所以我们通过urlencode进行参数拼…

原文:http://www.wuaie.com/?p=66 源码改写 $typeid = $row['id']; if((class_exists('PartView'))) { $pv = new PartView($typeid); $text = $likeType; $text= str_replace(array('{field', '/}'), array('[field', '/]'), $text); $pv->SetTemplet($text,'string'); $artli…

本篇文章主要介绍elk的一些框架组成,原理和实践,采用的ELK本版为7.7.0版本 一.ELK介绍 1.1.ELK简介 ELK是Elasticsearch.Logstash.Kibana三大开源框架首字母大写简称(但是后期出现的filebeat(beats中的一种)可以用来替代logstash的数据收集功能,比较轻量级).市面上也被成为Elastic Stack. Filebeat是用于转发和集中日志数据的轻量级传送工具.Filebeat监视您指定的日志文件或位置,收集日志事件,并将它们转发到E…

1年前,我在文章:这些.NET开源项目你知道吗?.NET平台开源文档与报表处理组件集合(三)中(第9个项目),给大家推荐了一个开源免费的PDF读写组件 PDFSharp,PDFSharp我2年前就看过,用过简单的例子,不过代码没有写成专门的文章.最近在查找资料的时候,又发现一款小巧的写PDF文件的C#组件:PDF File Writer.该开源组件是在codeproject,还没有托管到其他地方,所以花了点时间了解了一下,分享给大家. .NET开源目录:[目录]本博客其他.NET开源项目文章目录…