Centos7环境下etcd集群的搭建

一、简介

"A highly-available key value store for shared configuration and service discovery."

Etcd是coreos开发的分布式服务系统，内部采用raft协议作为一致性算法。作为一个高可用的配置共享、服务发现的键值存储系统，Etcd有以下的特点：

简单：安装配置简单，而且提供了 HTTP API 进行交互，使用也很简单

安全：支持 SSL 证书验证

快速：根据官方提供的数据，单实例支持每秒2k+读操作、1k写操作

可靠：采用raft算法，实现分布式系统数据的可用性和一致性

Etcd构建自身高可用集群主要有三种形式:

静态发现: 预先已知 Etcd 集群中有哪些节点，在启动时直接指定好Etcd的各个node节点地址

Etcd动态发现: 通过已有的Etcd集群作为数据交互点，然后在扩展新的集群时实现通过已有集群进行服务发现的机制

DNS动态发现: 通过DNS查询方式获取其他节点地址信息

本文主要介绍第一种方式，后续会陆续介绍剩下的两种方式。(直接docker安装请移步：quay.io/coreos/etcd 基于Docker镜像的集群搭建)

二、环境介绍

三台虚拟机，系统环境均为Centos7，对应节点名称及IP地址如下，将这个信息添加到三台主机的hosts文件中，编辑/etc/hosts

[root@node1 ~]# cat /etc/hosts

192.168.3.198 node1

192.168.3.199 node2

192.168.3.200 node3

三、安装、配置Etcd

在3个节点上都安装etcd服务

# yum install etcd -y

yum安装的etcd默认配置文件在/etc/etcd/etcd.conf，以下将三个节点上的配置贴出来，请注意不同点（未贴出的，则表明不需要更改）

node1

[root@node1 etcd]# cat etcd.conf

#[Member]

#ETCD_CORS=""

# 数据存放位置

ETCD_DATA_DIR="/var/lib/etcd/default.etcd"

#ETCD_WAL_DIR=""

# 监听其他 Etcd 实例的地址

ETCD_LISTEN_PEER_URLS="http://0.0.0.0:2380"

# 监听客户端地址

ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379,http://0.0.0.0:4001"

#ETCD_MAX_SNAPSHOTS=""

#ETCD_MAX_WALS=""

# 节点名称

ETCD_NAME="node1"

#ETCD_SNAPSHOT_COUNT=""

#ETCD_HEARTBEAT_INTERVAL=""

#ETCD_ELECTION_TIMEOUT=""

#ETCD_QUOTA_BACKEND_BYTES=""

#

#[Clustering]

# 通知其他 Etcd 实例地址

ETCD_INITIAL_ADVERTISE_PEER_URLS="http://node1:2380"

# 通知客户端地址

ETCD_ADVERTISE_CLIENT_URLS="http://node1:2379,http://node1:4001"

#ETCD_DISCOVERY=""

#ETCD_DISCOVERY_FALLBACK="proxy"

#ETCD_DISCOVERY_PROXY=""

#ETCD_DISCOVERY_SRV=""

# 初始化集群内节点地址

ETCD_INITIAL_CLUSTER="node1=http://node1:2380,node2=http://node2:2380,node3=http://node3:2380"

# 初始化集群 token

ETCD_INITIAL_CLUSTER_TOKEN="chinasoft-etcd-cluster"

# 初始化集群状态，new 表示新建

ETCD_INITIAL_CLUSTER_STATE="new"

#ETCD_STRICT_RECONFIG_CHECK="true"

#ETCD_ENABLE_V2="true"

[root@node1 etcd]# egrep '^[a-Z]' etcd.conf

ETCD_DATA_DIR="/var/lib/etcd/default.etcd"

ETCD_LISTEN_PEER_URLS="http://0.0.0.0:2380"

ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379,http://0.0.0.0:4001"

ETCD_NAME="node1"

ETCD_INITIAL_ADVERTISE_PEER_URLS="http://node1:2380"

ETCD_ADVERTISE_CLIENT_URLS="http://node1:2379,http://node1:4001"

ETCD_INITIAL_CLUSTER="node1=http://node1:2380,node2=http://node2:2380,node3=http://node3:2380"

ETCD_INITIAL_CLUSTER_TOKEN="chinasoft-etcd-cluster"

ETCD_INITIAL_CLUSTER_STATE="new"

node2

#[Member]

#ETCD_CORS=""

ETCD_DATA_DIR="/var/lib/etcd/default.etcd"

#ETCD_WAL_DIR=""

ETCD_LISTEN_PEER_URLS="http://0.0.0.0:2380"

ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379,http://0.0.0.0:4001"

#ETCD_MAX_SNAPSHOTS=""

#ETCD_MAX_WALS=""

ETCD_NAME="node2"

#ETCD_SNAPSHOT_COUNT=""

#ETCD_HEARTBEAT_INTERVAL=""

#ETCD_ELECTION_TIMEOUT=""

#ETCD_QUOTA_BACKEND_BYTES=""

#

#[Clustering]

ETCD_INITIAL_ADVERTISE_PEER_URLS="http://node2:2380"

ETCD_ADVERTISE_CLIENT_URLS="http://node2:2379,http://node2:4001"

#ETCD_DISCOVERY=""

#ETCD_DISCOVERY_FALLBACK="proxy"

#ETCD_DISCOVERY_PROXY=""

#ETCD_DISCOVERY_SRV=""

ETCD_INITIAL_CLUSTER="node1=http://node1:2380,node2=http://node2:2380,node3=http://node3:2380"

ETCD_INITIAL_CLUSTER_TOKEN="chinasoft-etcd-cluster"

ETCD_INITIAL_CLUSTER_STATE="new"

#ETCD_STRICT_RECONFIG_CHECK="true"

#ETCD_ENABLE_V2="true"

node3

#[Member]

#ETCD_CORS=""

ETCD_DATA_DIR="/var/lib/etcd/default.etcd"

#ETCD_WAL_DIR=""

ETCD_LISTEN_PEER_URLS="http://0.0.0.0:2380"

ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379,http://0.0.0.0:4001"

#ETCD_MAX_SNAPSHOTS=""

#ETCD_MAX_WALS=""

ETCD_NAME="node3"

#ETCD_SNAPSHOT_COUNT=""

#ETCD_HEARTBEAT_INTERVAL=""

#ETCD_ELECTION_TIMEOUT=""

#ETCD_QUOTA_BACKEND_BYTES=""

#

#[Clustering]

ETCD_INITIAL_ADVERTISE_PEER_URLS="http://node3:2380"

ETCD_ADVERTISE_CLIENT_URLS="http://node3:2379,http://node3:4001"

#ETCD_DISCOVERY=""

#ETCD_DISCOVERY_FALLBACK="proxy"

#ETCD_DISCOVERY_PROXY=""

#ETCD_DISCOVERY_SRV=""

ETCD_INITIAL_CLUSTER="node1=http://node1:2380,node2=http://node2:2380,node3=http://node3:2380"

ETCD_INITIAL_CLUSTER_TOKEN="chinasoft-etcd-cluster"

ETCD_INITIAL_CLUSTER_STATE="new"

#ETCD_STRICT_RECONFIG_CHECK="true"

#ETCD_ENABLE_V2="true"

改好配置之后，在各个节点上开启etcd服务：

[root@node1 etcd]# systemctl restart etcd

[root@node1 etcd]# systemctl enable etcd

Created symlink from /etc/systemd/system/multi-user.target.wants/etcd.service to /usr/lib/systemd/system/etcd.service.

[root@node1 etcd]# systemctl status etcd

● etcd.service - Etcd Server

   Loaded: loaded (/usr/lib/systemd/system/etcd.service; enabled; vendor preset: disabled)

   Active: active (running) since Wed -- :: CST; 10s ago

 Main PID:  (etcd)

   CGroup: /system.slice/etcd.service

           └─ /usr/bin/etcd --name=node1 --data-dir=/var/lib/etcd/default.etcd --listen-client-urls=http://0.0.0.0:2379,http://0.0.0.0:4001

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

Jan  :: node1 etcd[]: request cluster ID mismatch (got c304f47342ea490a want cdf818194e3a8c32)

四、测试验证

[root@node2 etcd]# etcdctl set testdir/testkey0 

[root@node2 etcd]# etcdctl set testdir/testkey1 

[root@node2 etcd]# etcdctl set testdir/testkey2 

[root@node2 etcd]# etcdctl ls

/testdir

[root@node2 etcd]# etcdctl ls testdir

/testdir/testkey0

/testdir/testkey1

/testdir/testkey2

[root@node2 etcd]# etcdctl get testdir/testkey2

[root@node2 etcd]# etcdctl member list

3914cfb876a6deeb: name=node2 peerURLs=http://node2:2380 clientURLs=http://node2:2379,http://node2:4001 isLeader=true

4d3a7c30064f762d: name=node1 peerURLs=http://node1:2380 clientURLs= isLeader=false

a68deb812f62fac3: name=node3 peerURLs=http://node3:2380 clientURLs=http://node3:2379,http://node3:4001 isLeader=false

在其他节点也能看到创建的节点，说明集群搭建成功

[root@node3 ~]# etcdctl ls testdir

/testdir/test0

/testdir/test1

/testdir/test88

Centos7环境下etcd集群的搭建的更多相关文章

  1. linux环境(CentOS-6.7)下redis集群的搭建全过程

    linux环境下redis集群的搭建全过程: 使用mount命令将光盘挂载到/mnt/cdrom目录下: [root@hadoop03 ~]# mount -t iso9660 -o ro /dev/ ...

  2. [Kubernetes]CentOS7下Etcd集群搭建

    Etcd简要介绍 Etcd是Kubernetes集群中的一个十分重要的组件,用于保存集群所有的网络配置和对象的状态信息 Etcd构建自身高可用集群主要有三种形式: ①静态发现: 预先已知 Etcd 集 ...

  3. Linux环境下Hadoop集群搭建

    Linux环境下Hadoop集群搭建 前言: 最近来到了武汉大学,在这里开始了我的研究生生涯.昨天通过学长们的耐心培训,了解了Hadoop,Hdfs,Hive,Hbase,MangoDB等等相关的知识 ...

  4. Linux环境下SolrCloud集群环境搭建关键步骤

    Linux环境下SolrCloud集群环境搭建关键步骤. 前提条件:已经完成ZooKeeper集群环境搭建. 一.下载介质 官网下载地址:http://www.apache.org/dyn/close ...

  5. Linux环境下HDFS集群环境搭建关键步骤

    Linux环境下HDFS集群环境搭建关键步骤记录. 介质版本:hadoop-2.7.3.tar.gz 节点数量:3节点. 一.下载安装介质 官网下载地址:http://hadoop.apache.or ...

  6. Linux环境下ZooKeeper集群环境搭建关键步骤

    ZooKeeper版本:zookeeper-3.4.9 ZooKeeper节点:3个节点 以下为Linux环境下ZooKeeper集群环境搭建关键步骤: 前提条件:已完成在Linux环境中安装JDK并 ...

  7. 原创：centos7.1下 ZooKeeper 集群安装配置+Python实战范例

    centos7.1下 ZooKeeper 集群安装配置+Python实战范例 下载:http://apache.fayea.com/zookeeper/zookeeper-3.4.9/zookeepe ...

  8. Centos7下Etcd集群搭建

    一.简介 "A highly-available key value store for shared configuration and service discovery." ...

  9. Docker下ETCD集群搭建

    搭建集群之前首先准备两台安装了CentOS 7的主机,并在其上安装好Docker. Master 10.100.97.46 Node 10.100.97.64 ETCD集群搭建有三种方式,分别是Sta ...

随机推荐

  1. Vue项目搭建

    1.环境搭建 安装node 官网下载安装包,傻瓜式安装:https://nodejs.org/zh-cn/ 安装cnpm npm install -g cnpm --registry=https:// ...

  2. Shell编程（五）脚本语法

    ${}: 数据“内容”删除,替换:{}: 列表 1. 条件测试: test =~:正则匹配 2. if/then/elif/else/fi #!/bin/bash echo "Is it o ...

  3. ASP.NET MVC 4 (十) 模型验证

    模型验证是在模型绑定时检查从HTTP请求接收的数据是否合规以保证数据的有效性,在收到无效数据时给出提示帮助用户纠正错误的数据. 显式模型验证 验证数据最直接的方式就是在action方法中对接收的数据验 ...

  4. in和hasOwnProperty的区别

    两者都代表查看某个属性是不是对象自己的,返回布尔值 in判断的是对象的所有属性,包括对象实例及其原型的属性 hasOwnProperty则是判断对象实例的是否具有某个属性

  5. spring boot零碎知识点待补充

    @Controller 和@RestController的区别 @RestController相当于同时使用了@Controller和@ResponseBody  即不会使用视图解析器,返回值直接返回 ...

  6. Java入门系列 泛型

    前言 <Java编程思想>第四版足足用了75页来讲泛型——厚厚的一沓内容,很容易让人头大——但其实根本不用这么多,只需要一句话:我是一个泛型队列,狗可以站进来,猫也可以站进来,但最好不要既 ...

  7. opencv实现坐标旋转（教你框住小姐姐）

    一.项目背景 最近在做一个人脸检测项目,需要接入百度AI的系统进行识别和检测.主要流程就是往指定的URL上post图片上去,之后接收检测结果就好了. 百度的检测结果包含这样的信息: left - 人脸 ...

  8. GCC编译器原理（三）------编译原理三：编译过程（3）---编译之汇编以及静态链接【2】

    4.1.2 符号解析与重定位 (1)重定位 在完成空间和地址的分配步骤之后,链接器就进入了符号解析和重定位的步骤,这是静态链接的核心部分. 先看看 a.o 的反汇编文件: objdump -d a.o ...

  9. Kafka架构简介

    一.kafka的架构 1.Broker kafka集群包含一个或者多个服务器,这种服务器就叫做Broker 2.Topic 每条发布到kafka集群的消息都有一个类别,这个类别就叫做Topic(逻辑上 ...

  10. java中的绝对路径和相对路径

    1.基本概念的理解 绝对路径:绝对路径就是你的主页上的文件或目录在硬盘上真正的路径,(URL和物理路径)例如:C:/xyz/test.txt 代表了test.txt文件的绝对路径.http://www ...