在上一篇博客中我们讲解了<Zookeeper的单机配置>,此篇博客将继续介绍Zookeeper的集群部署与配置. 环境 集群配置的环境与单机配置的环境相同,唯一不同的就是集群是在多台服务器之间配置,当然也有伪集群的配置,也就是在同一台机器上配置多台服务,通过端口号的不同来进行区分. 配置文件 在单机配置文件内增加server项的配置,新增之后的配置文件如下: tickTime=2000 initLimit=10 syncLimit=5 dataDir=/tmp/zookeeper client…
Storm 系列(二)Storm 集群部署和配置 本章中主要介绍了 Storm 的部署过程以及相关的配置信息.通过本章内容,帮助读者从零开始搭建一个 Storm 集群. 一.Storm 的依赖组件 1.1 要部署 Storm,需要要部署以下几个相关组件. JDK :从 Oracle 官网下载,设置环境变量(JAVA_HOME.PATH 和 CLASSPATH). Zookeeper :安装详见(http://www.cnblogs.com/binarylei/p/8721129.html),St…
本系列文章会深入研究 Ceph 以及 Ceph 和 OpenStack 的集成: (1)安装和部署 (2)Ceph RBD 接口和工具 (3)Ceph 物理和逻辑结构 (4)Ceph 的基础数据结构 (5)Ceph 与 OpenStack 集成的实现 (6)QEMU-KVM 和 Ceph RBD 的 缓存机制总结 (7)Ceph 的基本操作和常见故障排除方法 1. 测试环境 为了深入学习 Ceph 以及 Ceph 和 OpenStack 的集成,搭建了如下的测试环境: 硬件环境: System…
一.环境 1.系统: a.CentOS Linux release 7.4.1708 (Core) b.更新yum源和安装常用软件 #  yum -y install  epel-release bash-completion.noarch bash-completion-extras.noarch vim net-tools 2.节点:6台 3.配置时间同步 (chrony) 博客:http://www.cnblogs.com/weijie0717/p/8549204.html 4.关闭 fi…
目录 一.集群简介 cluster介绍 cluster原理 cluster特点 应用场景 二.集群部署 环境介绍 节点部署 启动集群 三.集群测试 一.集群简介 cluster介绍 redis cluster是去中心化的,集群中的每个节点都是平等的关系,每个节点都保存各自的数据和整个集群的状态.每个节点都和其他所有节点连接,而且这些连接保持活跃. 这样就保证了我们只需要连接集群中的任意一个节点,就可以获取到其他节点的数据. cluster原理 Redis集群采用一致性哈希槽的方式将集群中每个主节…
一.openstack Glance + ceph Cluster 部署: 博客:http://www.cnblogs.com/weijie0717/p/8563294.html 参考 续 部分.  二.openstack Cinder + ceph cluster 部署: 博客:http://www.cnblogs.com/weijie0717/p/8652236.html 三.openstack Nova + ceph cluster 部署: 在第二部分中已经做了大部分操作.我们只需要在针对…
一.介绍 参照官网部署:https://docs.openstack.org/cinder/pike/install/index-rdo.html 继续上一博客进行部署:http://www.cnblogs.com/weijie0717/p/8641493.html 二.部署cinder 服务(controller 节点) 按照博客部署:https://docs.openstack.org/cinder/pike/install/cinder-controller-install-rdo.htm…
一.介绍 参照官网部署:https://docs.openstack.org/glance/queens/install/ 继续上一博客进行部署:http://www.cnblogs.com/weijie0717/p/8556939.html 二.部署 Glance 1.配置数据库  (任意controller 节点操作) # mysql  -uroot -p mysql> CREATE DATABASE glance; mysql>  GRANT ALL PRIVILEGES ON glan…
一.RabbitMQ简介 RabbitMQ属于一个流行的开源消息队列系统.属于AMQP( 高级消息队列协议 ) 标准的一个 实现.是应用层协议的一个开放标准,为面向消息的中间件设计.用于在分布式系统中存储转发消息,在 易用性.扩展性.高可用性等方面表现不俗. 二.RabbitMQ工作原理 MQ 是消费 - 生产者模型的一个典型的代表,一端往消息队列中不断写入消息,而另一端则可以读取或者订阅队列中的消息. MQ 则是遵循了 AMQP协议的具体实现和产品.在项目中,将一些无需即时返回且耗时的操作提取…
  先整体介绍一下搭建storm集群的步骤: 设置zookeeper集群 安装依赖到所有nimbus和worker节点 下载并解压storm发布版本到所有nimbus和worker节点 配置storm.yaml 启动相关后台进程 1 配置zookeeper集群      我们知道storm通过zookeeper来协调整个集群.zookeeper不是用来做消息传递,因此storm不会给zookeeper带来很大的压力.单节点的zookeeper在大多情形下是可以胜任的,但是如果你想得到更好的可靠性…