Dubbo笔记(一)
一.简介
在编写分布式场景下高并发、高扩展的系统对技能的要求很高,因为这个过程会涉及到序列化/反序列化、多线程、网络编程、设计模式、性能优化等众多专业知识。而Dubbo框架对这些专业知识做了更高层的抽象和封装,提供了开箱即用的特性。所以换句话说Dubbo是为了解决大流量、高并发场景下提供高可用、提升系统性能的这样一个服务治理方案,也是优秀的RPC框架之一,因此被众多公司采用并根据自己的业务实现扩展。
Dubbo提供了注册中心机制,解耦了服务方和消费方动态发现的问题,并提供了高可靠能力,大量采用微内核+富插件设计思想,包括框架自身核心特性都作为扩展点实现,提供了灵活的扩展点能力。
二.架构
1.服务提供者Provider启动时会向注册中心把自己的元数据注册上去(比如服务IP、端口及需要注册的接口定义等信息);
2.服务消费方Consumer在启动时会从注册中心订阅(第一次订阅会拉取全量数据)服务提供方的元数据;
3.而当注册中心数据发生变更时会推送给订阅的Consumer(比如Provider某个节点Down掉了,又或者服务提供方进行了扩容,增加了节点。);
4.在Consumer获取到元数据后,Consumer可以发起RPC调用(本质其实是Socket通信+动态代理这样的一个实现机制);
5.RPC调用前后会向监控中心上报统计信息(比如并发数和调用接口)。
Dubbo总体分为业务层(Biz)、RPC层、Remote三层。如果把每一层继续细化,那一共可以分为10层。可以参考下图,图中左边是具体的分层,右边是该层中比较重要的接口:
其中Service与Config两层可以认为是API层,主要提供给API使用者,使用者无需关系底层的实现,只需要配置和完成业务代码即可;后面所有层级合在一起,可以认为是SPI层,主要提供给扩展者使用,即用户可以基于Dubbo框架做定制性的二次开发,扩展其功能。
Dubbo核心组件:
1.Service层
业务层。包括业务代码接口与实现,即我们自己实现的业务代码。
2.config层
配置层。主要围绕ServiceConfig(暴露的服务配置)和ReferenceConfig(引用的服务配置)两个实现类展开,初始化配置信息。可以理解为该层管理整个Dubbo配置。
3.proxy层
服务代理层。在Dubbo中,无论生产者还是消费者,框架都会生成一个代理类,整个过程对上层是透明的。当调用一个远程接口时,看起来就像调用本地接口一样,代理层会自动做远程调用并返回结果,即让业务层对远程调用完全无感。
4.registry层
注册层。服务Dubbo框架的服务注册与发现。当所有新的服务加入或者就服务下线时,注册中心都会感知并通知订阅方。整个过程不需要人工参与。
5.cluster层
集群容错层。主要负责远程调用失败时的容错策略(如失败重试、快速失败);选择具体调用节点时的复杂均衡策略(如随机、一致性Hash等);特殊调用路径的路由策略(如某个Consumer只会调用某个IP的Provider)。
6.monitor层
监控层。复杂监控统计调用次数和调用时间等。
7.protocol层
远程调用层。封装RPC调用的具体过程,Protocol是Invoker暴露(发布一个新功能让别人调用)和引用(引用一个远程服务到本地)的主功能入口。它负责管理Invoker的整个生命周期。Invoker是Dubbo核心模型,框架中所有其他模型都向它靠拢,或者转换成它,它代表一个可执行体。
8.exchange层
信息交换层。建立Request-Response模型,封装请求响应模式,如吧同步请求转化为一步请求。
9.transport层
网络传输层。把网络传输抽象为同一的接口,如Mina和Netty虽然接口不一样,但是Dubbo在他们上面又封装了统一的接口。我们也可以根据其扩展接口添加更多的网络传输方式。
10.Serialize层
序列化层。如果数据要通过网络进行发送,则需要先做做序列化,变成二进制流。序列化层负责管理整个框架网络传输时的序列化/反序列化工作。
三.特性及解决问题
特性:
1.面向接口代理的改性能RPC调用
提供了高性能的基于代理的远程调用能力,服务以接口为粒度,为开发者屏蔽调用的远程细节。
2.服务自动注册与发现
支持多种注册中心服务,服务实例上下线实时感知(上图中的第3步)。
3.运行期流量调度
内置条件、脚本等路由策略,通过配置不同的路由规则,轻松实现灰度发布、同机房优先等功能。
4.智能负载均衡
内置多种负载均衡策略,智能感知下游节点健康状况,显著减少调用延迟,提高系统吞吐量。
5.高度可扩展能力
遵循微内核+插件的设计思想,所有核心能力如Protocol、Transport、Serialization被设计为扩展点,平等对待内置实现和第三方实现。(Dubbo SPI 扩展点机制)
6.可视化的服务治理与运维
提供了丰富服务治理、运维工具(Dubbo Admin):随时查询服务元数据、服务简况状态及调用统计,实时下发路由策略、调整配置参数。
解决问题:
(1) 高性能、透明的RPC调用。只要涉及服务之间的通信,RPC就必不可。Dubbo可以让我们像调用本地服务一样简单的去调用远程服务,而不需要再代码中显示的指定远程调用。整个过程对上层开发者透明,Dubbo会自动完成后续的所有操作,例如:负载均衡、路由、协议转换、序列化等。开发者只需要接收对应的调用结果。
(2)服务的自动注册与发现。当服务越来越多时,服务URL配置管理变得非常困难,服务的注册与发现已经不可能由人工来管理。此时需要一个注册中心,动态的注册和发现服务,使服务的位置透明。Dubbo适配了多种注册中心。
(3)自动负载与容错。 当服务越来越多时,F5一年负载均衡器的单点压力也原来越大,Dubbo提供了完整的集群容错机制,可以实现软件层面的负载均衡,依次降低硬件的压力。Dubbo还提供了调用失败的各种容错机制,如Failover、Failfast、结果集合并等。
(4)动态的流量调度。在应用运行时,某些服务节点可能因为硬件原因需要减少负载或者某些节点需要人工手动下线;又或者需要实现单元化的调用、灰度功能。通过Dubbo Admin管理控制台,用户可以在界面上动态地调整每个服务的权重、路由规则、禁用/启用,实现运行时的流量调度。
(5)依赖分析和调用统计
Dubbo可以介入第三方的APM做分布式链路追踪与性能分析,或者使用已有的独立监控中心的调用次数及耗时,我们可以通过这些数据反推系统容量,在合适的时候通过加机器进行扩容,并且可以预估需要添加多少台机器。
Dubbo笔记(一)的更多相关文章
- dubbo 笔记-XML配置文件简介
<dubbo:service/> 服务配置,用于暴露一个服务,定义服务的元信息,一个服务可以用多个协议暴露,一个服务也可以注册到多个注册中心. eg.<dubbo:service r ...
- dubbo笔记
使用Maven打包依赖项,启动时从本地jar中读取dubbo.xsd 最近项目用到dubbo,打包启动时报错 Failed to read schema document from http://co ...
- Dubbo学习笔记(一) 基础知识HelloWorld
Dubbo是由阿里巴巴研发出的一款基于Java实现的RPC框架,现由Apache进行维护管理,笔记中使用zookeeper作为注册中心,dubbo+zookeeper环境安装教程:https://ww ...
- dubbo入门学习笔记之入门demo(基于普通maven项目)
注:本笔记接dubbo入门学习笔记之环境准备继续记录; (四)开发服务提供者和消费者并让他们在启动时分别向注册中心注册和订阅服务 需求:订单服务中初始化订单功能需要调用用户服务的获取用户信息的接口(订 ...
- dubbo入门学习笔记之环境准备
粗略的学完springcloud后由于公司的项目有用到一点dubbo,刚好手头上又有dubbo的学习资料,于是趁机相对系统的学了下duboo框架,今天开始记录下我的所学所悟;说来惭愧,今年之前,作为一 ...
- Dubbo -- 系统学习 笔记 -- 快速启动
Dubbo -- 系统学习 笔记 -- 目录 快速启动 服务提供者 服务消费者 快速启动 Dubbo采用全Spring配置方式,透明化接入应用,对应用没有任何API侵入,只需用Spring加载Dubb ...
- Dubbo -- 系统学习 笔记 -- 配置
Dubbo -- 系统学习 笔记 -- 目录 配置 Xml配置 属性配置 注解配置 API配置 配置 Xml配置 配置项说明 :详细配置项,请参见:配置参考手册 API使用说明 : 如果不想使用Spr ...
- Dubbo -- 系统学习 笔记 -- 示例 -- 泛化引用
Dubbo -- 系统学习 笔记 -- 目录 示例 想完整的运行起来,请参见:快速启动,这里只列出各种场景的配置方式 泛化引用 泛接口调用方式主要用于客户端没有API接口及模型类元的情况,参数及返回值 ...
- Dubbo -- 系统学习 笔记 -- 示例 -- 结果缓存
Dubbo -- 系统学习 笔记 -- 目录 示例 想完整的运行起来,请参见:快速启动,这里只列出各种场景的配置方式 结果缓存 结果缓存,用于加速热门数据的访问速度,Dubbo提供声明式缓存,以减少用 ...
随机推荐
- Java switch case语句
switch case 语句判断一个变量与一系列值中某个值是否相等,每个值称为一个分支. switch case 语句语法格式如下: switch(expression){ case value : ...
- Fabric CA的部署与使用
Fabric CA是Hyperledger Fbric的证书认证中心,提供以下功能:用户信息的登记与注册,数字证书的颁发与管理. 前言 之前使用CA服务一直是在docker容器中运行下载好的CA镜像, ...
- EventBus/EventQueue 再思考
EventBus/EventQueue 再思考 Intro 之前写过两篇文章,造轮子系列的 EventBus/EventQueue,回想起来觉得当前的想法有点问题,当时对 EvenStore 可能有点 ...
- 单词数(hdu2072)
这道题用到了(STL初步)集合:Set 的知识点.同时,也用到了stringstream 的知识点,还用到了getline(cin,line)的知识点. #include<iostream> ...
- c# 优化代码的一些规则——优先隐式类型[一]
前言 说到底就是优先使用var,这个关键字,在c# 3.0中出现了. 首先要确认几点,一个就是var 是静态变量,而不是动态变量,也就是说使用var 你是不必去担心性能问题得, 百度百科: 1)静态存 ...
- OpenStack的Swift组件详解
一:简介 一.背景 1. Swift 最初是由 Rackspace 公司开发的高可用分布式对象存储服务(Object Storage Service),并于 2010 年贡献给 OpenSt ...
- 如何在npm发布轮子
我们在前端工程开发中通常使用npm这个包管理器来安装各种好用的轮子(当然也有用yarn的),不安分的码工就想,也发布一个试试,哪怕只是一个小时候滚的铁环而不是轮子. 首先,要在 npmjs官网注册自己 ...
- [JavaWeb基础] 016.Struts2 国际化配置
如果一个软件想要让其受众是全球或者是几个国家的人,那么这个软件就需要支持多种语言,那么我们就需要软件的国际化去对一些文字信息进行国际化处理.web也一样,当外国人打开我们的网站,要是看到满屏幕的中文, ...
- Maven快速入门(三)Maven的坐标和仓库
之前通过一个helloworld的例子来说一说如何创建maven项目以及maven项目的项目结构,然后讲maven如何编译运行项目.接下来介绍maven中几个比较重要的概念:坐标和仓库.Maven快速 ...
- HTML中块级行级元素小分类
行内元素列表: <a>标签可定义锚 <abbr>表示一个缩写形式 <acronym>定义只取首字母缩写 <b>字体加粗 <bdo>可覆盖默认 ...