ETCD:与etcd进行交互
与etcd进行交互
用户更多的是通过putting或者是getting从etcd获取一个键对应的值。这一部分描述了如何通过etcdctl做这些工作。etcdctl是一个与etcd服务器进行交互的命令行工具.这里的描述适用于gRPC APIs或者是客户端库的APIs。
用于与etcd交互的API版本可以通过环境变量ETCDCTL_API
设置为2或者3.默认情况下,分支为(3.4)的主版本使用V3 的API,而早期的版本(3.3或者更早)默认使用V2 API。
注意使用V2 API所创建的任何Key不能够通过V3 API进行访问。而V3 API etcdctl get
获取V2 的Key将返回0并退出,这是预料之中的情况。
export ETCDCTL_API=3
发现版本
使用合适的命令在执行不同版本的etcd时etcdctl和服务器API的版本将会有用。
这里的命令可用于发现版本信息:
$ etcdctl version
etcdctl version:3.1.0-alpha.0+git
API version:3.1
写入一个KEY
应用程序通过向etcd集群写入Keys来存储Keys,每次存储的Key将会通过Raft协议实现一致性与可扩展性复制到所有的etcd集群成员中。
这里的命令是将Keyfoo
的值存储到bar
上:
$ etcdctl put foo bar
OK
给Key附上一个租约,Key将在一个具体的时间间隔被设置。
这里的命令是在10秒后将Keyfoo
的值存储到bar
上:
$ etcdctl put foo1 bar1 --lease=1234abcd
注意:以上命令中租约ID为1234abcd将会在租约创建10秒后将id返回,这个id将附在Key上。
读取Keys
应用程序可以从一个etcd集群中读取Key,可能会查询到单个Key,或者是一个范围内的Key。
比如etcd集群中存储以下Key:
foo = bar
foo1 = bar1
foo2 = bar2
foo3 = bar3
这里的命令是读取Keyfoo
对应的值:
$ etcdctl get foo
foo
bar
这里的命令是读取Keyfoo
对应的十六进制的值:
$ etcdctl get foo --hex
\x66\x6f\x6f #Key
\x62\x61\x72 #Value
这里的命令是只读取Keyfoo
对应的值:
$ etcdctl get foo --print-value-only
bar
这里的命令是读取从Keyfoo
到Keyfoo3
范围内对应的值:
$ etcdctl get foo foo3
foo
bar
foo1
bar1
foo2
bar2
注意这里Key为foo3
不包括在内因为这里的范围是半开区间[foo,foo3)
,不包括foo3
。
这里的命令是获取前缀为foo
的Key的范围内所有的值:
$ etcdctl get --prefix foo
foo
bar
foo1
bar1
foo2
bar2
foo3
bar3
这里的命令是获取前缀为foo
的Key的范围内所有的值,并且限制结果集为2:
$ etcdctl get --prefix --limit=2 foo
foo
bar
foo1
bar1
读取之前版本的Keys:
应用程度可能希望读取一个被替代的版本的Key。例如,一个应用程序可能想要通过读取一个先前版本的Key来回滚到一个老的配置。另外,一个应用程序可能想要通过访问Key的历史记录对多个Key通过多个请求获取一致性的结果。由于对etcd集群中键值对的每一次修改都会增加对在etcd集群中的全局修订存储,应用程序可以通过提供一个老的版本来读取被替代的Keys。
比如一个etcd集群中存在以下的Keys:
foo = bar # revision = 2
foo1 = bar1 # revision = 3
foo = bar_new # revision = 4
foo1 = bar1_new # revision = 5
这里的例子是访问过去版本的Keys:
$ etcdctl get --prefix foo # access the most recent versions of keys
foo
bar_new
foo1
bar1_new
$ etcdctl get --prefix --rev=4 foo # access the versions of keys at revision 4
foo
bar_new
foo1
bar1
$ etcdctl get --prefix --rev=3 foo # access the versions of keys at revision 3
foo
bar
foo1
bar1
$ etcdctl get --prefix --rev=2 foo # access the versions of keys at revision 2
foo
bar
$ etcdctl get --prefix --rev=1 foo # access the versions of keys at revision 1
读取大于或等于一个具体的Key的比特值的Key:
应用程序可能想要读取大于或等于一个具体的Key的byte值的Key。
一个etcd集群中有以下的Keys:
a = 123
b = 456
z = 789
这里的命令是读取大于或等于Key b
的byte值的Key:
$ etcdctl get --from-key b
b
456
z
789
删除 Keys
应用程序可以从etcd集群中删除一个Key或者删除一个范围内的Key:
一个etcd集群中有以下的Keys:
foo = bar
foo1 = bar1
foo3 = bar3
zoo = val
zoo1 = val1
zoo2 = val2
a = 123
b = 456
z = 789
这里的命令是删除Keyfoo
:
$ etcdctl del foo
1 # 1 个 key 被删除
这里的命令是删除从Keyfoo
到Keyfoo9
范围内的Key:
$ etcdctl del foo foo9
2 # 2 个 keys 被删除
这里的命令是删除Keyzoo
并将已删除的键值对返回:
$ etcdctl del --prev-kv zoo
1 # 1 个 key 被删除
zoo # 被删除的Key
val # 被删除的Key所对应的Value
这里的命令是删除前缀为zoo
的Keys:
$ etcdctl del --prefix zoo
2 # 2 个 key 被删除
这里的命令是读取大于或等于Key b
的byte值的Keys:
$ etcdctl del --from-key b
2 # 2 个 key 被删除
观察key的变化
应用程序可以监视一个Key或者一个范围内的Keys的每一次更新。
这里的命令是观察keyfoo
:
$ etcdctl watch foo
# 在另一个终端执行: etcdctl put foo bar
PUT
foo
bar
这里的命令是观察十六进制的keyfoo
:
$ etcdctl watch foo --hex
# 在另一个终端执行: etcdctl put foo bar
PUT
\x66\x6f\x6f # Key
\x62\x61\x72 # Value
这里的命令是观察从Keyfoo
到Keyfoo9
范围内的Key:
$ etcdctl watch foo foo9
# 在另一个终端执行: etcdctl put foo bar
PUT
foo
bar
# 在另一个终端执行: etcdctl put foo1 bar1
PUT
foo1
bar1
这里的命令是观察前缀为foo
的Key的范围内所有的值:
$ etcdctl watch --prefix foo
# 在另一个终端执行: etcdctl put foo bar
PUT
foo
bar
# 在另一个终端执行: etcdctl put fooz1 barz1
PUT
fooz1
barz1
这里的命令是观察多个Keysfoo
和zoo
:
$ etcdctl watch -i
$ watch foo
$ watch zoo
# 在另一个终端执行: etcdctl put foo bar
PUT
foo
bar
# 在另一个终端执行: etcdctl put zoo val
PUT
zoo
val
观察Keys的历史版本
应用程序可能想要观察etcd中Keys的更新历史。例如,应用程序可能想获取key的所有修改;如果应用程序保持与etcd的连接,那么命令watch
已经足够。然而,如果应用程序或者etcd宕机,一次更新可能就会失败,应用程序可能不能实时接收Key的更新。为了保证更新可以被交付,应用程序必须通过观察到Keys的历史更新。为了做到这些,应用程序要指定观察的历史版本,就像读取历史版本的Keys:
我们首先完成以下操作:
$ etcdctl put foo bar # revision = 2
OK
$ etcdctl put foo1 bar1 # revision = 3
OK
$ etcdctl put foo bar_new # revision = 4
OK
$ etcdctl put foo1 bar1_new # revision = 5
OK
这里有个例子观察历史更新:
# watch for changes on key `foo` since revision 2
$ etcdctl watch --rev=2 foo
PUT
foo
bar
PUT
foo
bar_new
# watch for changes on key `foo` since revision 3
$ etcdctl watch --rev=3 foo
PUT
foo
bar_new
这里有例子只观察最后一次的更新:
# watch for changes on key `foo` and return last revision value along with modified value
$ etcdctl watch --prev-kv foo
# 在另一个终端执行 etcdctl put foo bar_latest
PUT
foo # key
bar_new # last value of foo key before modification
foo # key
bar_latest # value of foo key after modification
观察进度
应用程序可能想要检查观察者进度以确定最新的观察者流的状态。例如,如果观察者更新的缓存,那么就可以通过原子读取与修改进度进行比较知道缓存内容是否已经过时。
进度请求可以通过progress
命令与观察者session进行交互在一个观察者流中告诉服务器发送一个进度提示更新.
$ etcdctl watch -i
$ watch a
$ progress
progress notify: 1
# 在另一个终端执行: etcdctl put x 0
# 在另一个终端执行: etcdctl put y 1
$ progress
progress notify: 3
注意,在进度提示响应中的修改号来自观察者流连接到的本地etcd服务器。如果该节点被分区并且不是该分区的一部分,这个进度提示修改版本可能会低于由未分区的etcd服务器节点返回的修改版本。
压缩修改
正如我们提到的,etcd保持修改信息所以应用可以读取过去版本的Keys,然而,为了避免无数的修改历史累积,对过去的修改进行压缩是很重要的。在压缩后,etcd移除了历史修改,释放资源为以后使用。在压缩修改版本之前所有的被修改的替代版本数据将不能获取。
这里的命令是对修改进行压缩:
$ etcdctl compact 5
compacted revision 5
# any revisions before the compacted one are not accessible
$ etcdctl get --rev=4 foo
Error: rpc error: code = 11 desc = etcdserver: mvcc: required revision has been compacted
注意:etcd服务器的当前版本可以使用json格式的命令通过(存在或不存在的)key发现。例如下面的通过查看在etcd服务器中不存在的myKey:
$ etcdctl get mykey -w=json
{"header":{"cluster_id":14841639068965178418,"member_id":10276657743932975437,"revision":15,"raft_term":4}}
授予租约
应用程序可以为etcd集群上的Keys授予一个租约。当Key附上租约后,它的生命周期会绑定到租约的生命周期并由存活时间(TTL)进行管理。每一个租约都有一个由应用程序授予的最小的TTL值.这个租约实际的TTL值至少是最小的TTL值,由etcd集群决定。一旦超过租约的TTL,租约将会超时并删除附上的所有的Keys。
这里有命令授予一个租约:
# grant a lease with 60 second TTL
$ etcdctl lease grant 60
lease 32695410dcc0ca06 granted with TTL(60s)
# attach key foo to lease 32695410dcc0ca06
$ etcdctl put --lease=32695410dcc0ca06 foo bar
OK
撤销租约
应用程序可以根据租约ID撤销租约,撤销一个租约将删除附上的所有的Keys。
例如我们完成下面的操作:
$ etcdctl lease grant 60
lease 32695410dcc0ca06 granted with TTL(60s)
$ etcdctl put --lease=32695410dcc0ca06 foo bar
OK
这里的命令可以撤销该租约:
$ etcdctl lease revoke 32695410dcc0ca06
lease 32695410dcc0ca06 revoked
$ etcdctl get foo
# empty response since foo is deleted due to lease revocation
保持租约存活
应用程序可以通过刷新租约的TTL使它不会超时保证租约存活。
例如我们完成下面的操作:
$ etcdctl lease grant 60
lease 32695410dcc0ca06 granted with TTL(60s)
这里有命令保持租约存活:
$ etcdctl lease keep-alive 32695410dcc0ca06
lease 32695410dcc0ca06 keepalived with TTL(60)
lease 32695410dcc0ca06 keepalived with TTL(60)
lease 32695410dcc0ca06 keepalived with TTL(60)
...
获取租约信息
应用程序可能想知道关于租约的信息,所以可以通过重新创建或者检查租约是否仍然生存或已经超时。应用程序可能也想知道一个具体的租约上所附的Key。
例如我们完成下面的操作:
# grant a lease with 500 second TTL
$ etcdctl lease grant 500
lease 694d5765fc71500b granted with TTL(500s)
# attach key zoo1 to lease 694d5765fc71500b
$ etcdctl put zoo1 val1 --lease=694d5765fc71500b
OK
# attach key zoo2 to lease 694d5765fc71500b
$ etcdctl put zoo2 val2 --lease=694d5765fc71500b
OK
这里有命令获取关于租约的信息:
$ etcdctl lease timetolive 694d5765fc71500b
lease 694d5765fc71500b granted with TTL(500s), remaining(258s)
这里有命令获取租约上所依附的关于Keys的信息:
$ etcdctl lease timetolive --keys 694d5765fc71500b
lease 694d5765fc71500b granted with TTL(500s), remaining(132s), attached keys([zoo2 zoo1])
# if the lease has expired or does not exist it will give the below response:
Error: etcdserver: requested lease not found
ETCD:与etcd进行交互的更多相关文章
- webserver Etcd Cluster / CoreOS etcd / macOS etcd
s https://coreos.com/etcd/ https://coreos.com/etcd/docs/latest/ macOS mojave etcd 003deMac-mini:~ ma ...
- rancher v2.2.4创建kubernetes集群出现[etcd] Failed to bring up Etcd Plane: [etcd] Etcd Cluster is not healthy
主机:rancher(172.16.2.17),master(172.16.2.95),node01(172.16.2.234),node02(172.16.2.67) 问题:开始是用的rancher ...
- 第17 章 : 深入理解 etcd:etcd 性能优化实践
深入理解 etcd:etcd 性能优化实践 本文将主要分享以下五方面的内容: etcd 前节课程回顾复习: 理解 etcd 性能: etcd 性能优化 -server 端: etcd 性能优化 -cl ...
- Centos7下Etcd集群搭建
一.简介 "A highly-available key value store for shared configuration and service discovery." ...
- etcd第一集
网站:https://github.com/coreos/etcd 一些观点:https://yq.aliyun.com/articles/11035 1.etcd是键值存储仓库,配置共享和服务发现2 ...
- etcd命令说明 etcd Version: 3.0.15
etcd Version: 3.0.15Git SHA: fc00305Go Version: go1.6.3Go OS/Arch: linux/amd64 https://github.com/co ...
- Etcd全套安装教程
一.安装 1.1 二进制安装 从这里下载: etcd-v3.2.11-linux-amd64.tar.gz 下载包后解压即可运行: # 解压 tar zxvf etcd-v3.2.11-linux-a ...
- Docker 搭建 etcd 集群
阅读目录: 主机安装 集群搭建 API 操作 API 说明和 etcdctl 命令说明 etcd 是 CoreOS 团队发起的一个开源项目(Go 语言,其实很多这类项目都是 Go 语言实现的,只能说很 ...
- ETCD相关介绍--整体概念及原理方面
etcd作为一个受到ZooKeeper与doozer启发而催生的项目,除了拥有与之类似的功能外,更专注于以下四点. 简单:基于HTTP+JSON的API让你用curl就可以轻松使用. 安全:可选SSL ...
随机推荐
- 201871010119-帖佼佼《面向对象程序设计(java)》第八周学习总结
博文正文开头格式:(2分) 项目 内容 这个作业属于哪个课程 https://www.cnblogs.com/nwnu-daizh/ 这个作业的要求在哪里 https://www.cnblogs.co ...
- Net Core 基于AngleSharp的HTML转实体工具
最近这几天在采集一些房产信息网站的二手房产数据.采用的是.net core 2.2+AngleSharp做的,放在自己服务器上跑着玩.写着写着,发现好麻烦.原因如下 部分代码如下图 1.每个节点都要手 ...
- intellij cpu占有高解决办法(亲测有效!)
File---Settings---Inspections---把勾都去掉或者选自己需要的部分.
- 《Java基础知识》Java IO流详解
Java IO概念 1. 用于设备之间的数据传输. 2. Java 将操作数据流的功能封装到了IO包中. 3. 数据流流向分:输入流和输出流,操作对象为文件. 4. 流按照操作数据分:字节流(通用)和 ...
- PythonI/O进阶学习笔记_8.python的可迭代对象和迭代器、迭代设计模式
content: 1.什么是迭代协议 2. 什么是迭代器(Iterator)和可迭代对象(Iterable) 3. 使用迭代器和可迭代对象 4. 创建迭代器和可迭代对象 5. 迭代器设计模式 一 ...
- sql server查询(SELECT ,where,distinct,like 查询,in,is null,group by 和having,order by,as)
基本查询: 实例表 示例表 --部门表 create table dept( deptno int primary key,--部门编号 dname ),--部门名 loc )--地址 ); --雇员 ...
- Jsonp的js实现,跨域请求,同源策略机制
Jsonp的js实现,跨域请求,同源策略机制1.跨域请求:请求URL的协议,域名,端口三者之间任意一个与当前页面地址不同即为跨域 存在跨域的情况: 网络协议不同,端口不通,域名不同,子域名不同,域名和 ...
- OLTP
On-Line Transaction Processing,联机事务处理过程(OLTP),也称为面向交易的处理过程 其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理,并在很短的时间内给出 ...
- Leetcode题解 - 链表简单部分题目代码+思路(21、83、203、206、24、19、876)
- sqlalchemy 执行原生sql语句
from contextlib import contextmanager from sqlalchemy import create_engine, ForeignKey from sqlalche ...