一.Kafka ->logstash ->elasticsearch    logstash 5.X以上版本不兼容5.x以下版本,因此在升级logstash时会遇到很多坑.首先是配置的变化,可以参考如下配置: input { kafka { bootstrap_servers => "XX:9092,YY:9093,ZZ:9094" 变化点:这里监听的是kafka的端口号 topics => "xxxlog" group_id => &…

拿着项目给客户测试,客户那边三个人俩人水果手机是ios8以下版本,结果导致｀｀｀(恭喜,坑出现!)总不能说老总!"您把版本升级到ios9 吧!…

Flink 1.4没出来以前,一直使用Flink 1.3.2,感觉还算稳定,最近将运行环境升级到1.4,遇到了一些坑: 1.需要将可运行程序,基于1.4.0重新编译一次 2.对比了一下flink-conf.yml中的配置,发现一处不同点: # The port under which the web-based runtime monitor listens.# A value of -1 deactivates the web server. 1.3.2:jobmanager.web.port…

前提 1.有强烈的审计需求. 2.能允许10%-15%左右的性能损失. 3.有强烈的对数据库操作实时查看需求(一般都是为了领导要求). Logstash 比较坑的配置   1 2 3 4 5 6 7 8 9 10 11 input {     file {         path => ["/u02/backup/audit.log"]         codec => json     } } output {     elasticsearch {         h…

ELK 6.2.2 版本下xpack破解 1.下载xpack 先下载最新版本的 x-pack,里面包含了 es,kibana,logstash 新版本的x-pack 下载地址:https://artifacts.elastic.co/downloads/packs/x-pack/x-pack-6.2.2.zip 2.安装xpack 之后到es目录执行 # ./bin/elasticsearch-plugin install file:///soft/x-pack-6.2.2.zip 或者: #…

前言 今天上午,一个客户反馈XX消息没有推送到第三方链接.于是我查看了推送日志列表,并没有今天的.接着登录服务器查询文件日志,看到了记录.我们的代码步骤是消息先推送到消息队列,消费消息队列时,记录文件日志,然后异步推送到第三方. 调试排坑 经过一番寒彻骨的查询几个关键表,构造数据,并调试推送后,发现了问题源头,是Json版本依赖问题引发的坑,然后修改版本号发布解决了.下面让我们用一个简易的Demo重现下问题所在. 问题重现 构建环境 首先新建基于.NetFrameWork 4.5.1版本的类库E…

先容我吐槽两句, 最近写Swfit3.0, 要用到一些框架, 然后就用cocoapods嘛, 结果说要cocoapods1.1.0版本才行, 而自己的是cocoapods1.0.1版本的, 所以就想着升级嘛, 结果就遇到2个坑, 一个就是切换gem源不成功, 一直还是官方源, 不能切换到ruby.china这个gem源上, 最后重新启动机器才成功, 这是什么道理不懂, 别问我为什么想到重启电脑(毕竟哥当过网管....…

监控DB由于使用的TokuDB引擎,因此选择使用Percona MySQL 5.7版本,在使用过程中遇到了比较多的坑,在这里做一下简单的记录,希望对广大DBA有帮助. load文件飙升导致的DB雪崩 在上层机器(mqproxy)出问题的时候,会导致load文件飙升,导致监控DB大量的load线程堆积,造成监控DB雪崩,比如2月15号的一次异常:     DB雪崩的时候有大量的load线程堆积,并且机器的写入性能之前下降,直到超过最大连接数,业务无法访问. 这种场景的解决办法有两个: 1.业务上层…

https://blog.csdn.net/youanyyou/article/details/81530240 Spring Cloud 升级最新 Finchley 版本,踩了所有的坑! 2018年08月09日 09:03:25 个人分类: Spring Cloud   转载: https://blog.csdn.net/youanyyou/article/details/81530240 Spring Boot 2.x 已经发布了很久,现在 Spring Cloud 也发布了 基于 Spri…

      背景:我的机器上tensorflow 1.14 & 2.0,这俩版本都有,之前都是用1.14版本,今天试一下2.0尝尝鲜, 结果就掉坑去了 把CUDA10.1 和 cudnn 安装好了 随便写了一段测试代码,用 tf-gpu 跑一下,结果就出现问题了 Bug 如下: Could not load dynamic library 'cudart64_100.dll'; dlerror: cudart64_100.dll not found 这尼玛啥情况,难道是CUDA 和cudnn 版…