自己用 Netty 实现一个简单的 RPC
目录:
- 需求
- 设计
- 实现
- 创建 maven 项目,导入 Netty 4.1.16。
- 项目目录结构
- 设计接口
- 提供者相关实现
- 消费者相关实现
- 测试结果
- 总结
源码地址:github 地址
前言
众所周知,dubbo 底层使用了 Netty 作为网络通讯框架,而 Netty 的高性能我们之前也分析过源码,对他也算还是比较了解了。今天我们就自己用 Netty 实现一个简单的 RPC 框架。
1. 需求
模仿 dubbo,消费者和提供者约定接口和协议,消费者远程调用提供者,提供者返回一个字符串,消费者打印提供者返回的数据。底层网络通信使用 Netty 4.1.16。
2. 设计
- 创建一个接口,定义抽象方法。用于消费者和提供者之间的约定。
- 创建一个提供者,该类需要监听消费者的请求,并按照约定返回数据。
- 创建一个消费者,该类需要透明的调用自己不存在的方法,内部需要使用 Netty 请求提供者返回数据。
3. 实现
1. 创建 maven 项目,导入 Netty 4.1.16。
- <groupId>cn.thinkinjava</groupId>
- <artifactId>rpc-demo</artifactId>
- <version>1.0-SNAPSHOT</version>
- <dependencies>
- <dependency>
- <groupId>io.netty</groupId>
- <artifactId>netty-all</artifactId>
- <version>4.1.16.Final</version>
- </dependency>
2. 项目目录结构如下:
3. 设计接口
一个简单的 hello world:
- public interface HelloService {
- String hello(String msg);
- }
4. 提供者相关实现
4.1. 首先实现约定接口,用于返回客户端数据:
- /**
- * 实现类
- */
- public class HelloServiceImpl implements HelloService {
- public String hello(String msg) {
- return msg != null ? msg + " -----> I am fine." : "I am fine.";
- }
- }
4.2. 实现 Netty 服务端和自定义 handler
启动 Netty Server 代码:
- private static void startServer0(String hostName, int port) {
- try {
- ServerBootstrap bootstrap = new ServerBootstrap();
- NioEventLoopGroup eventLoopGroup = new NioEventLoopGroup();
- bootstrap.group(eventLoopGroup)
- .channel(NioServerSocketChannel.class)
- .childHandler(new ChannelInitializer<SocketChannel>() {
- @Override
- protected void initChannel(SocketChannel ch) throws Exception {
- ChannelPipeline p = ch.pipeline();
- p.addLast(new StringDecoder());
- p.addLast(new StringEncoder());
- p.addLast(new HelloServerHandler());
- }
- });
- bootstrap.bind(hostName, port).sync();
- } catch (InterruptedException e) {
- e.printStackTrace();
- }
- }
上面的代码中添加了 String类型的编解码 handler,添加了一个自定义 handler。
自定义 handler 逻辑如下:
- /**
- * 用于处理请求数据
- */
- public class HelloServerHandler extends ChannelInboundHandlerAdapter {
- @Override
- public void channelRead(ChannelHandlerContext ctx, Object msg) {
- // 如何符合约定,则调用本地方法,返回数据
- if (msg.toString().startsWith(ClientBootstrap.providerName)) {
- String result = new HelloServiceImpl()
- .hello(msg.toString().substring(msg.toString().lastIndexOf("#") + 1));
- ctx.writeAndFlush(result);
- }
- }
- }
这里显示判断了是否符合约定(并没有使用复杂的协议,只是一个字符串判断),然后创建一个具体实现类,并调用方法写回客户端。
还需要一个启动类:
- public class ServerBootstrap {
- public static void main(String[] args) {
- NettyServer.startServer("localhost", 8088);
- }
- }
好,关于提供者的代码就写完了,主要就是创建一个 netty 服务端,实现一个自定义的 handler,自定义 handler 判断是否符合之间的约定(算是协议吧),如果符合,就创建一个接口的实现类,并调用他的方法返回字符串。
5. 消费者相关实现
消费者有一个需要注意的地方,就是调用需要透明,也就是说,框架使用者不用关心底层的网络实现。这里我们可以使用 JDK 的动态代理来实现这个目的。
思路:客户端调用代理方法,返回一个实现了 HelloService 接口的代理对象,调用代理对象的方法,返回结果。
我们需要在代理中做手脚,当调用代理方法的时候,我们需要初始化 Netty 客户端,还需要向服务端请求数据,并返回数据。
5.1. 首先创建代理相关的类
- public class RpcConsumer {
- private static ExecutorService executor = Executors
- .newFixedThreadPool(Runtime.getRuntime().availableProcessors());
- private static HelloClientHandler client;
- /**
- * 创建一个代理对象
- */
- public Object createProxy(final Class<?> serviceClass,
- final String providerName) {
- return Proxy.newProxyInstance(Thread.currentThread().getContextClassLoader(),
- new Class<?>[]{serviceClass}, (proxy, method, args) -> {
- if (client == null) {
- initClient();
- }
- // 设置参数
- client.setPara(providerName + args[0]);
- return executor.submit(client).get();
- });
- }
- /**
- * 初始化客户端
- */
- private static void initClient() {
- client = new HelloClientHandler();
- EventLoopGroup group = new NioEventLoopGroup();
- Bootstrap b = new Bootstrap();
- b.group(group)
- .channel(NioSocketChannel.class)
- .option(ChannelOption.TCP_NODELAY, true)
- .handler(new ChannelInitializer<SocketChannel>() {
- @Override
- public void initChannel(SocketChannel ch) throws Exception {
- ChannelPipeline p = ch.pipeline();
- p.addLast(new StringDecoder());
- p.addLast(new StringEncoder());
- p.addLast(client);
- }
- });
- try {
- b.connect("localhost", 8088).sync();
- } catch (InterruptedException e) {
- e.printStackTrace();
- }
- }
- }
该类有 2 个方法,创建代理和初始化客户端。
初始化客户端逻辑: 创建一个 Netty 的客户端,并连接提供者,并设置一个自定义 handler,和一些 String 类型的编解码器。
创建代理逻辑:使用 JDK 的动态代理技术,代理对象中的 invoke 方法实现如下:
如果 client 没有初始化,则初始化 client,这个 client 既是 handler ,也是一个 Callback。将参数设置进 client ,使用线程池调用 client 的 call 方法并阻塞等待数据返回。
看看 HelloClientHandler 的实现:
- public class HelloClientHandler extends ChannelInboundHandlerAdapter implements Callable {
- private ChannelHandlerContext context;
- private String result;
- private String para;
- @Override
- public void channelActive(ChannelHandlerContext ctx) {
- context = ctx;
- }
- /**
- * 收到服务端数据,唤醒等待线程
- */
- @Override
- public synchronized void channelRead(ChannelHandlerContext ctx, Object msg) {
- result = msg.toString();
- notify();
- }
- /**
- * 写出数据,开始等待唤醒
- */
- @Override
- public synchronized Object call() throws InterruptedException {
- context.writeAndFlush(para);
- wait();
- return result;
- }
- void setPara(String para) {
- this.para = para;
- }
- }
该类缓存了 ChannelHandlerContext,用于下次使用,有两个属性:返回结果和请求参数。
当成功连接后,缓存 ChannelHandlerContext,当调用 call 方法的时候,将请求参数发送到服务端,等待。当服务端收到并返回数据后,调用 channelRead 方法,将返回值赋值个 result,并唤醒等待在 call 方法上的线程。此时,代理对象返回数据。
再看看设计的测试类:
- public class ClientBootstrap {
- public static final String providerName = "HelloService#hello#";
- public static void main(String[] args) throws InterruptedException {
- RpcConsumer consumer = new RpcConsumer();
- // 创建一个代理对象
- HelloService service = (HelloService) consumer
- .createProxy(HelloService.class, providerName);
- for (; ; ) {
- Thread.sleep(1000);
- System.out.println(service.hello("are you ok ?"));
- }
- }
- }
测试类首先创建了一个代理对象,然后每隔一秒钟调用代理的 hello 方法,并打印服务端返回的结果。
测试结果
总结
看了这么久的 Netty 源码,我们终于实现了一个自己的 Netty 应用,虽然这个应用很简单,甚至代码写的有些粗糙,但功能还是实现了,RPC 的目的就是允许像调用本地服务一样调用远程服务,需要对使用者透明,于是我们使用了动态代理。并使用 Netty 的 handler 发送数据和响应数据,完成了一次简单的 RPC 调用。
当然,还是那句话,代码比较简单,主要是思路,以及了解 RPC 底层的实现。
好吧。good luck!!!!
自己用 Netty 实现一个简单的 RPC的更多相关文章
- 教你用 Netty 实现一个简单的 RPC!
众所周知,dubbo 底层使用了 Netty 作为网络通讯框架,而 Netty 的高性能我们之前也分析过源码,对他也算还是比较了解了. 今天我们就自己用 Netty 实现一个简单的 RPC 框架. 1 ...
- 如何实现一个简单的RPC
在如何给老婆解释什么是RPC中,我们讨论了RPC的实现思路. 那么这一次,就让我们通过代码来实现一个简单的RPC吧! RPC的实现原理 正如上一讲所说,RPC主要是为了解决的两个问题: 解决分布式系统 ...
- 动手实现一个简单的 rpc 框架到入门 grpc (上)
rpc 全称 Remote Procedure Call 远程过程调用,即调用远程方法.我们调用当前进程中的方法时很简单,但是想要调用不同进程,甚至不同主机.不同语言中的方法时就需要借助 rpc 来实 ...
- 徒手撸一个简单的RPC框架
来源:https://juejin.im/post/5c4481a4f265da613438aec3 之前在牛逼哄哄的 RPC 框架,底层到底什么原理得知了RPC(远程过程调用)简单来说就是调用远程的 ...
- 手把手教你基于Netty实现一个基础的RPC框架(通俗易懂)
阅读这篇文章之前,建议先阅读和这篇文章关联的内容. [1]详细剖析分布式微服务架构下网络通信的底层实现原理(图解) [2][年薪60W的技巧]工作了5年,你真的理解Netty以及为什么要用吗?(深度干 ...
- Netty实现一个简单聊天系统(点对点及服务端推送)
Netty是一个基于NIO,异步的,事件驱动的网络通信框架.由于使用Java提供 的NIO包中的API开发网络服务器代码量大,复杂,难保证稳定性.netty这类的网络框架应运而生.通过使用netty框 ...
- 使用Netty和动态代理实现一个简单的RPC
RPC(remote procedure call)远程过程调用 RPC是为了在分布式应用中,两台主机的Java进程进行通信,当A主机调用B主机的方法时,过程简洁,就像是调用自己进程里的方法一样.RP ...
- 动手实现一个简单的 rpc 框架到入门 grpc (下)
之前手动实现了一次简陋的 rpc 调用,为了简单使用了 json 编码信息,其实这是非常不可靠的,go 中 json 解析会有一些问题,比如整数会变成浮点数,而且 json 字符串比较占空间. gRP ...
- 一个简单的RPC框架
一个 系统模型 二.数据库代码实现 1. mkdir database cd database vim dbInit.c /* * * Database Init tool * */ #include ...
随机推荐
- FFmpeg深入分析(一)
最近在做一个关于监控的项目,要在iphone 客户端实现播放监控的实时视频以及录像视频.使用到了FFmpeg,看到这篇文章,写的非常不错.转自:http://blog.chinaunix.net/ui ...
- Java Swing 之JTable及其简单的用法
我们都知道JTable需要使用一个Model配合才能更好地发挥其作用.而使用Model有好多种方法,但是难易程度却大大不同,比如说我们使用AbstractTableModel接口要实现里面的好多方法, ...
- [Java]数组排序-选择排序 冒泡排序 插入排序
1 选择排序 原理:a 将数组中的每个元素,与第一个元素比较 如果这个元素小于第一个元素, 就将这个 两个元素交换. b 每轮使用a的规则, 可以选择出 ...
- iOS开发支付集成之支付宝支付
项目中要用到支付功能,需要支付宝,微信,银联三大支付,所以打算总结一下,写两篇文章,方便以后的查阅, 大家在做的时候也能稍微参考下,用到的地方避免再次被坑.这是第二篇支付宝集成,第一篇银联支付在这里. ...
- 10_Android中通过HttpUrlConnection访问网络,Handler和多线程使用,读取网络html代码并显示在界面上,ScrollView组件的使用
编写如下项目: 2 编写Android清单文件 <?xml version="1.0" encoding="utf-8"?> <mani ...
- 【一天一道LeetCode】#54. Spiral Matrix
一天一道LeetCode系列 (一)题目 Given a matrix of m x n elements (m rows, n columns), return all elements of th ...
- Effective C++总结
条款01:视C++为一个语言联邦(View C++ as a federation of languages.) C++主要的四个次语言: (1)C.说到底C++仍是以C为基础:(2)Object-O ...
- Volley网络框架完全解析(实战篇)
好了,今天就通过一个瀑布流demo,来使用Volley框架请求网络图片. 前言: 我们使用NetworkImageView显示图片: 1.因为该控件可以自动的管理好请求的生命周期,当与父控件detac ...
- OpenCV kmeans代码
代码:出处忘了 // // Example 13-1. Using K-means // // /* *************** License:************************* ...
- 【43】Activity的几种LaunchMode及使用场景
standard 模式 这是默认模式,每次激活Activity时都会创建Activity实例,并放入任务栈中.使用场景:大多数Activity. singleTop 模式 如果在任务的栈顶正好存在该A ...