logstash 1.5.3 配置使用redis做续传】的更多相关文章

logstash是ELK中的一员大将, redis插件也是<The Logstash Book>中介绍的一个很好用的玩意儿. 之前,用比较小的集群部署的时候,没有介入redis中间件,所以也不是很清楚里面的配置, 后来用起来才发现配置有点坑. 第一次配置的时候,死活就是连接不起来,总是报错,说connection refused. 但在logstash机器redis-cli连接却不会有任何问题. 后来才发现,估计是bug,没有使用默认端口这个事情,竟然没法连通.. --------------…
django-redis文档: http://django-redis-chs.readthedocs.io/zh_CN/latest/# 一.在Django中配置 # Django的缓存配置 CACHES = { "default": { "BACKEND": "django_redis.cache.RedisCache", "LOCATION": "redis://127.0.0.1:6379/9",…
关于keepalived的详细介绍,请移步本人相关博客:http://wangfeng7399.blog.51cto.com/3518031/1405785 功能 ip地址 安装软件 主redis 10.13.6.13 redis,keepalived 从redis 10.13.6.16 redis,keepalived VIP 10.13.6.17   一.redis主从搭建 1.redis安装 本文通过yum源的安装方式来安装(需要配置epel源),也可以通过源码编译的方式来安装 1 2 […
使用Redis做MyBatis的二级缓存 通常为了减轻数据库的压力,我们会引入缓存.在Dao查询数据库之前,先去缓存中找是否有要找的数据,如果有则用缓存中的数据即可,就不用查询数据库了. 如果没有才去数据库中查找.这样就能分担一下数据库的压力.另外,为了让缓存中的数据与数据库同步,我们应该在该数据发生变化的地方加入更新缓存的逻辑代 码.这样无形之中增加了工作量,同时也是一种对原有代码的入侵.这对于有着代码洁癖的程序员来说,无疑是一种伤害. MyBatis框架早就考虑到了这些问题,因此MyBati…
    近期在排查redis做rdb时会有部分请求超时的case.初步推断是我们redisserver上开启了THP(Transparent Huge Pages).      1) Linux本身的页大小是固定的4KB,在2.6.38内核新增了THP,透明地支持huge page(2MB)的使用.而且默认开启.开启THP的优势在于:         - 降低page fault.一次page fault能够载入更大的内存块.         - 更小的页表.同样的内存大小,须要更少的页.  …
一.Redis介绍 Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.从2010年3月15日起,Redis的开发工作由VMware主持. Redis能运行在大多数POSIX(Linux, *BSD, OS X 和Solaris等)系统上,官方没有支持Windows的版本.目前最新的版本是2.2.11,这个版本主要是修复了一个2.2.7版本中遍历方式优化带来的一个bug.和普通的Key-Value结构不同,Re…
1.前言 Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.我们都知道,在日常的应用中,数据库瓶颈是最容易出现的.数据量太大和频繁的查询,由于磁盘IO性能的局限性,导致项目的性能越来越低.这时候,基于内存的缓存框架,就能解决我们很多问题.例如Memcache,Redis等.将一些频繁使用的数据放入缓存读取,大大降低了数据库的负担.提升了系统的性能. 有于Memcached,对于缓存对象大小有要求,单个对象不得…
上一博客学习了SpringBoot集成Redis,今天这篇博客学习下Mybatis操作中使用Redis做缓存.这里其实主要学习几个注解:@CachePut.@Cacheable.@CacheEvict.@CacheConfig. 一.基础知识 @Cacheable @Cacheable 的作用 主要针对方法配置,能够根据方法的请求参数对其结果进行缓存 参数 解释 example value 缓存的名称,在 spring 配置文件中定义,必须指定至少一个 例如:@Cacheable(value=”…
网上有很多例子了,执行源码起码有3个,都是各种各样的小问题. 现在做了个小demo,实现spring-boot 用redis做缓存的实例,简单记录下思路,分享下源码. 缓存的实现,分担了数据库的压力,在CRUD中 C:需要同时更新redis和mysql中的数据. R:看redis中 有无数据,有,就从缓存中取,没有就从数据库中取,同时更新缓存. U:删除redis中的数据,并update数据库. D:删除redis和mysql的数据. 1.基本步骤 (1)redis安装  http://down…
一 为什么使用 Redis 在项目中使用 Redis,主要考虑两个角度:性能和并发.如果只是为了分布式锁这些其他功能,还有其他中间件 Zookpeer 等代替,并非一定要使用 Redis. 性能: 如下图所示,我们在碰到需要执行耗时特别久,且结果不频繁变动的 SQL,就特别适合将运行结果放入缓存.这样,后面的请求就去缓存中读取,使得请求能够迅速响应. 特别是在秒杀系统,在同一时间,几乎所有人都在点,都在下单...执行的是同一操作———向数据库查数据. 根据交互效果的不同,响应时间没有固定标准.在…