Kite: 一个分布式微服务框架(翻译)
原文链接:https://blog.gopheracademy.com/birthday-bash-2014/kite-microservice-library/ 此为中文翻译
用GO语言来编写web服务是一件很轻松的事。简单而又强大的net/http
包允许你以一种快速的方式编写高性能的web服务。然而,有时候你仅仅想要编写一个RPC后端应用。本质上,你想有很多独立运行的应用程序,他们各自负责自己的那块工作。他们应当接收请求并恰当的回复。
很显然,一旦脱离了基本的需求,事情就变得复杂了。在真实场景中,你可能拥有数百个正在运行的web服务,并希望能和他们安全的(并经过身份验证)通信交流。为了达成这一目的,首先必须与某一个应用建立连接。除非你只有很少的几个应用节点,你很难记住某个特定应用的IP地址或hostname(有太多应用)。仅仅把所有host的IP地址持久化储存也是不够的,因为host IP可能改变。你需要的是一个能让你访问、询问并取得某应用IP地址的服务,就像DNS服务器。
所以说搭建一个有许多应用的分布式系统比较难。Koding的Kite库旨在以一种简单快捷轻便的方式搭建分布式微服务应用。Kite框架本身有很多细节部分,在这篇文章中只会大概阐述Kite能干什么。
Kite介绍
Kite是一个用GO语言编写的微服务RPC框架,它使得用户能编写清晰易懂的分布式系统。它在便捷使用和性能之间找到了一个平衡。Kite既是一个RPC服务器又是客户端。它能与其它的Kite同伴进行双向通信。一个Kite节点由以下参数确定(顺序很重要):
- Username: Kite的拥有者,比如 Brian, Fatih, Damian etc..
- Environment: 当前环境,比如 “production”, “testing”, “staging”, etc…
- Name: 标识Kite类型的简称,比如 mykite,fs,terminal, etc…
- Version: 三位数的语义版本(semantic version)
- Region: 当前地区,比如 “Europe”, “Asia” 或其他地方
- Hostname: Kite的hostname
- ID: 唯一ID,用来确定一个Kite。由Kite框架生成,也可以自行更改
这些标识符很重要因为Kite就是通过他们来让他人鉴别和搜索自己。
Kite使用SockJS在很多不同传输方法(websocket, xhr, etc..)提供WebSocket模拟(emulation ),这意味着你也可以通过浏览器来链接Kite(见Kite.js)。Kite使用修改过的dnode protocal来进行RPC消息传递。Kite协议增加了一个额外的session和authentication层,这样就能轻松地识别Kite。在后台,它使用JWT进行身份验证和会话信息管理。
通过“Kontrol”这个服务发现机制,一个Kite可以发现其他Kites与他们安全地进行身份验证通信。Kontrol使用etcd作为后台储存。但是你也用其他的替代(当前支持PostgreSQL),只要它实现了 kontrol.Storage接口。Kontrol同时也有许多认证用户的方式。这是可定制的所以人们能用自己方式使用Kontrol。
如何使用Kite
我们现在来学习一下。编写Kite并让他们之间通信很有趣。首先,介绍一个最简单的形式(原谅我忽略了错误处理,你不应该像我这样:))
package main
import "github.com/koding/kite"
func main() {
k := kite.New("first", "1.0.0")
k.Run()
}
这里我们创建了一个kite,它的名字是first,版本是1.0.0。Run()
方法用来启动一个阻塞服务器(就像http.Serve
)。它现在能够接受请求。由于没分配端口号,操作系统会自动为我们分配一个。
现在我们分配一个端口号,这样我们就能使另一个kite和他连接(否则,你需要从日志中选择分配的URL)。为了更改Kite配置,例如端口号,一些属性(Environemt, Region, etc...),你需要更改Config
域:
package main
import "github.com/koding/kite"
func main() {
k := kite.New("first", "1.0.0")
k.Config.Port = 6000
k.Run()
}
如有需要,配置值也可以被环境变量覆盖。
让我们创建第二个kite来和第一个kite通信:
package main
import (
"fmt"
"github.com/koding/kite"
)
func main() {
k := kite.New("second", "1.0.0")
client := k.NewClient("http://localhost:6000/kite")
client.Dial()
response, _ := client.Tell("kite.ping")
fmt.Println(response.MustString())
}
这回我们直接连接新的kite,因为我们已经知道了URL。对于一个RPC系统,你得有URL路径的概念。Kite使用方法名来让别人调用。每个方法对应一个Handle(就像http.Handler
)。Kite框架有一些默认的方法,其中一个就是kite.ping
,它返回一个pong
字符串作为响应(他不需要任何身份验证信息)。响应可以是任何东西,从能被序列化的GO类型到JSON,这取决于发送方。Kite也有一些预先定义好的辅助方法来把响应转换成给定类型。在这个例子里,second kite 和 first kite 连接并调用了first kite 的 kite.ping
方法。我们没有传递任何参数(下面将解释),所以如果你运行,可以看到:
$ go run second.go
pong
为Kite添加方法
现在我们添加第一个自定义方法。这个方法用来接收一个值并返回它的平方值。方法名字是square
。要将函数分配给方法,只需确保其满足 kite.Handler
接口kite.Handler :
package main
import "github.com/koding/kite"
func main() {
k := kite.New("first", "1.0.0")
k.Config.Port = 6000
k.Config.DisableAuthentication = true
k.HandleFunc("square", func(r *kite.Request) (interface{}, error) {
a := r.Args.One().MustFloat64()
return a * a, nil
})
k.Run()
}
通过 second kite 调用:
package main
import (
"fmt"
"github.com/koding/kite"
)
func main() {
k := kite.New("second", "1.0.0")
client := k.NewClient("http://localhost:6000/kite")
client.Dial()
response, _ := client.Tell("square", 4)
fmt.Println(response.MustFloat64())
}
可以看到,唯一改变的是方法调用。调用 "square" 方法也传递了参数4。运行例子得到:
$ go run second.go
16
就这么简单。
服务发现,如何找到对方
服务发现被集成到了Kite框架中。就像前面所说,这是一个非常基本的概念,并且在Kite API也得到了充分体现。这意味着Kite框架强制用户使用服务发现机制。为了能发现自己,对方要知道你的真实身份。也就是说你需要进行身份验证。身份验证可以通过多种方法完成,这取决于Kontrol怎么执行。它可以被完全禁用,可以询问用户密码(通过kite cli),可以获取令牌并验证用户提供的内容等等。
kitectl
是一个方便的CLI程序,可用于通过命令行轻松管理kites。我们可以用它(通过 kitectl register
命令)来向Kontrol认证我们的host,所以I每个运行在我们host的kite实例将默认被验证。这个命令在home目录下创建kite.key
文件,它由kontrol自己签名认证。其中内容没有加密,但是因为已签名,所以可以用它和Kontrol安全交流。我们的用户名会被储存到Kontrol中,所以其他人可以信任我们(当然他们得使用同一个Kontrol服务器)。相信Kontrol意味着可以相信任何人。这很重要因为可能会有其他的Kontrol服务器,他们也在你的内网中或者是公开的。
我们将使用先前的例子,不过这次会把 first kite 注册到Kontrol并从 second kite 取得它的IP地址:
package main
import (
"net/url"
"github.com/koding/kite"
)
func main() {
k := kite.New("first", "1.0.0")
k.Config.Port = 6000
k.HandleFunc("square", func(r *kite.Request) (interface{}, error) {
a := r.Args.One().MustFloat64()
return a * a, nil
})
k.Register(&url.URL{Scheme: "http", Host: "localhost:6000/kite"})
k.Run()
}
如你所见, 我们用Register()
方法把自己注册到Kontrol中。唯一传递的参数时我们自己的URL,其他人可以通过它和我们连接。这个值保存在Kontrol中,其他kite实例可以从那里获取到它。Register()
方法很特殊,如果你断开连接并重连,它会自动重新注册。为了保护Kontrol,我们使用了exponential backoff算法进行重连尝试。因为Koding在实际生产也大量是用它,所以有许多类似这样的小细节小改进。另一点是注册时你不需要传递Kontrol的URL,因为你已经通过验证,Kontrol的URL被存放在kite.key
中了。你要做的仅仅是调用Register()
方法。
现在我们寻找first kite并调用其square
方法:
package main
import (
"fmt"
"github.com/koding/kite"
"github.com/koding/kite/protocol"
)
func main() {
k := kite.New("second", "1.0.0")
// search a kite that has the same username and environment as us, but the
// kite name should be "first"
kites, _ := k.GetKites(&protocol.KontrolQuery{
Username: k.Config.Username,
Environment: k.Config.Environment,
Name: "first",
})
// there might be several kites that matches our query
client := kites[0]
client.Dial()
response, _ := client.Tell("square", 4)
fmt.Println(response.MustFloat64())
}
首先GetKites()
方法获取了一个list,其中包含匹配我们查询的所有kites。GetKites()
连接到Kontrol并获取所有URL匹配给定查询的kites节点。该查询必须采用树路径形式(与etcd中使用的格式相同),所以Username和Environment需要在你搜索first kite之前给定。在这个例子中,我们假定只有一个匹配上了,接着取出它,拨号并调用方法,这样就能得到和之前一样的结果。
因此,动态注册和获取kites是一件大事。你可以设计一个分布式系统,它能容忍你定义的某些条件。一个例子是开启10个first
kites,每个都以你的名字命名。如果另一个kite节点从Kontrol中获取,它会得到一个包含10个kite节点及其URL的list,之后该怎么做完全取决于这个kite实例。可以随机挑选一个,也可以轮询调用,抑或是ping所有list里的kite节点并选取最快的一个等等。
这一切都交给了调用方。Kontrol并不知道某个kite实例会有什么行为,它只知道该节点是否连接(注册)上了。这样的简化让使用者可以基于该框架构建更复杂的系统。
结论
Kite框架还有许多其它这里没涉及的小改进与特性。比如Kite.js可以在浏览器上作为客户端使用。它还包含一个等效node.js的服务器。它包含开箱即用的通道代理和反向代理,可用于在单个端口/应用后面多路复用kite。Koding正在实际生产中使用它,因此默认情况下它具有许多基于性能的修复和改进。
编写Kite并使用它是最重要的部分。一旦开始使用它,你就可以感受到API的简单性。Kite库易于使用,因为它与Go具有相同的理念。它使用一些用Go编写的最好的开源项目(例如etcd)。Go使编写稳定平台作为Kite库的基础变得简单。由于Go的性质,扩展和改进Kite库也很容易。
希望你对这个框架的想法和意图及其功能和局限性有所了解。我们正在广泛使用和维护它。但是,我们也有很多事情想改进(例如提供其他消息协议和传输协议)。尽情fork项目(https://github.com/koding/kite)并随意使用。欢迎贡献!让我知道你的想法。
Kite: 一个分布式微服务框架(翻译)的更多相关文章
- Surging 分布式微服务框架使用入门
原文:Surging 分布式微服务框架使用入门 前言 本文非 Surging 官方教程,只是自己学习的总结.如有哪里不对,还望指正. 我对 surging 的看法 我目前所在的公司采用架构就是类似与S ...
- [转载]Surging 分布式微服务框架使用入门
前言 本文非 Surging 官方教程,只是自己学习的总结.如有哪里不对,还望指正. 我对 surging 的看法 我目前所在的公司采用架构就是类似与Surging的RPC框架,在.NET 4.0框架 ...
- 推荐一款分布式微服务框架 Surging
surging surging 是一个分布式微服务框架,提供高性能RPC远程服务调用,采用Zookeeper.Consul作为surging服务的注册中心,集成了哈希,随机,轮询,压力最小优先作为 ...
- Dapeng框架-开源高性能分布式微服务框架
我们公司性质是新零售,公司也有专门的框架组.这群大牛自己开发了一整套分布式微服务框架.我们也在使用这套框架,有很多心得体会. 该框架既Dapeng也!开源github地址:https://github ...
- .Net Core 分布式微服务框架 - Jimu 添加 Swagger 支持
系列文章 .Net Core 分布式微服务框架介绍 - Jimu .Net Core 分布式微服务框架 - Jimu 添加 Swagger 支持 一.前言 最近有空就优化 Jimu (一个基于.Net ...
- .Net Core 分布式微服务框架介绍 - Jimu
系列文章 .Net Core 分布式微服务框架介绍 - Jimu .Net Core 分布式微服务框架 - Jimu 添加 Swagger 支持 一.前言 近些年一直浸淫在 .Net 平台做企业应用开 ...
- Net Core 分布式微服务框架
Jimu : .Net Core 分布式微服务框架介绍 https://www.cnblogs.com/grissom007/p/9291345.html 一.前言 近些年一直浸淫在 .Net 平台做 ...
- 我的分布式微服务框架:YC-Framework
YC-Framework官方文档:http://framework.youcongtech.com/ YC-Framework源代码:https://github.com/developers-you ...
- 反应式微服务框架Flower
Flower是一个构建在Akka上的反应式微服务框架,开发者只需要针对每一个细粒度的业务功能开发一个Service服务,并将这些Service按照业务流程进行可视化编排,即可得到一个反应式系统. 即时 ...
随机推荐
- JavaSE的基本语法
JavaSE基本语法 一.语法的注意事项 1.严格区分大小写 2.每句命令结尾使用分号 3.符号都是英文状态 4.括号.引号都是成对出现的! 5.注意缩进 Tips: 文件名和类名可以不一致,但pub ...
- Jenkins项目构建运行
[准备环境] 继Jenkins环境搭建完成后,进行插件的管理 [思路] 项目顺序是,开发提交代码到代码仓库,测试通过Jenkins拉下开发的代码打包部署: 1.开发提交代码 2.Jenkins自动从代 ...
- 登录CentOS用户很慢/usr/bin/xauth: timeout in locking authority file /home/***/.Xauthority
当使用非root用户登录CentOS时,发现很慢,而且弹出以下信息: /usr/bin/xauth: timeout in locking authority file /home/***/.Xau ...
- JSON Web令牌(JWT)介绍与使用
手机端接口开发会遇到一个问题是,接口登录后需要返回一个Token.token首先有一点必须唯一,每次请求都需要把token给带上.基于必须唯一的特性,很多朋友在开发是都选择了uuid.是不是token ...
- 【DMCP】2020-CVPR-DMCP Differentiable Markov Channel Pruning for Neural Networks-论文阅读
DMCP 2020-CVPR-DMCP Differentiable Markov Channel Pruning for Neural Networks Shaopeng Guo(sensetime ...
- windows操作系统查看端口,关闭端口进程
根据端口号查找进程 netstat -ano | findstr "端口号" 杀死进程 taskkill /pid "pid(最后一个数值)" /f
- 新手安装配置git简洁教程
第一步,下载安装git 打开 [git官网] https://git-scm.com/,下载git对应操作系统的版本. 所有东西下载慢的话就可以去找镜像!官网下载太慢,我们可以使用淘宝镜像下载:htt ...
- jQuery动态生成<select>下拉框
前一阵在项目里需要动态生成下拉框,找了一下用jQuery实现比较方便,这里整理一下. 下文所述方法只是本人在项目中遇到问题的解决方法,场景较为简单,也希望能帮助有需要的朋友 1.动态生成下拉框的两种方 ...
- 问题 C: 最短路径
问题 C: 最短路径 在洛谷上刷最短路的题然后被老师拉回去做算法笔记上面的题... 拿到这道题,先确定所有路径唯一,然后是无向边,那么对于边权处理,直接赋值为2的k次方就可以了,然后直接跑最短路. 这 ...
- CentOS 7安装Oracle 12c图文详解
环境: CentOS7@VMware12,分配资源:CPU:2颗,内存:4GB,硬盘空间:30GB Oracle 12C企业版64位 下载地址:http://www.oracle.com/techne ...