1.实践场景 模拟上游Flume Agent在发送event时的故障切换 (failover) 1)初始:上游Agent向active的下游节点Collector1传递event 2)Collector1故障: kill该进程的方式来模拟, event此时发送给Collector2,完成故障切换 3)Collector1恢复:重新运行该进程,经过最大惩罚时间后,event将恢复发送给Collector1 2.配置文件 Agent配置文件 # flume-failover-client # age…

Flume1.6.0的安装1.上传Flume-1.6.0-tar.gz到待部署的所有机器     以我的为例: /usr/local/src/ 2.解压得到flume文件夹      # tar -xzvf flume-1.6.0-tar.gz 3.修改文件夹名称,属主,及权限     # mv flume-1.6.0 flume     # chown -R root:root flume    # chmod 755 flume 4.安装完毕,解压后可以直接使用,通过flume/conf下的…

1.负载均衡场景 1)初始:上游Agent通过round_robin selector, 将event轮流发送给下游Collecotor1, Collector2 2)故障: 关闭Collector1进程来模拟故障,Agent1由于配置了backoff, 会将Collecotor1暂时从发送列表中移除,event全部发送给Collector2 3) 恢复: 重启Collector1进程, Collector1在经历最大timeout后,重新进入发送列表:之后的event再次分发给Collecto…

2014-09-09 Created By BaoXinjian…

1.实践场景 开始前的准备条件: 1) 确认各个节点的jdk版本,将jdk升级到和kafka配套的版本(解压既完成安装,修改/etc/profile下的JAVA_HOME,source /etc/profile,重启后jdk生效) 2.单节点kafka实践 1) 启动zookeeper集群 各个节点上启动zookeeper进程# bin/zkServer.sh start 启动后,查看各个节点的zookeeper状态 (leader, follower etc)#bin/zkServer.sh…

redis-cluster 简介 redis-cluster是一个分布式.容错的redis实现,redis-cluster通过将各个单独的redis实例通过特定的协议连接到一起实现了分布式.集群化的目标. redis-cluster中不存在中心节点或者代理节点,这样的设计目标是为了实现线性化扩展,也解决了单一中心(或代理)节点带来的性能瓶颈,但是随着集群规模的增大,节点之间通信的开销也会成指数级的增长,这样的机制也反过来限制了redis-cluster的规模无限扩充的可能. redis-clus…

先确认gcc和tcl已经安装 sudo yum install gcc-c++ sudo yum install tcl 解压, 编译和安装 .tar.gz /usr/src/ cd /usr/src/redis-/ sudo make sudo make test sudo make install # 如果不想安装到 /usr/local//bin下, 然后再到/usr/bin去建好软链 install 安装很自由, 在哪里编译都可以, 有用的就是最后生成的那几个binary. Redis…

上一篇php7环境的搭建 真是火爆,仅仅两天时间,就破了我之前swagger系列的一片文章,看来,大家对搭建环境真是情有独钟. 为了访问量,我今天再来一篇Redis的搭建.当然不能仅仅是redis的搭建.否则,多不上档次呀,这种文章一抓一大把.这次还顺带把redis监控程序的搭建给弄上了.很高大上的额! redis的安装 哎,写到这儿,说一句,诅咒联通这网络,联通网络一上,打开vpn,照样不能访问外网,联baidu都一卡一卡的. redis就不用yum来进行安装了.直接从官方下载来安装吧.(老实…

1.节点分配 粘性规划: Tomcat-1(t1)将session优先备份在运行在令一台机器上的memcached-2(m2)上面,仅当m2失效的时候,t1才会将sessin存储在m1上面(m1是t1的备份节点).这样当machine1(t1和m1存在在这台机器上)挂掉的时候,session也不会丢失. <t1> <t2> . \ / . . X . . / \ . <m1> <m2> 在配置过程中,只需要指定备份节点(failover=n1),所以存储的主…

介绍了主流商业和开源ESB的发展趋势.可借鉴的地方和其缺点:         主要介绍:       Oracle Service Bus       WebSphere Message Broker       Mule       ServiceMix/FUSE ESB       Synapse/WSO2 ESB   ESB产品一览表包括商业和开源: 类型 产品 公司           商业 Oracle Service Bus (OSB)   Oracle Oracle Enterpr…