零拷贝:sendfile 生产端 生产端:消息压缩,缓存批量发送,异步解耦 多线程并发:防止某一个业务阻塞等待 接收消息缓存 BufferPool设计:不释放 服务端 Reactor模型,顺序写,页缓存,零拷贝 Reactor: 连接线程(main线程) 线程处理线程 放置在请求队列中 线程池中的线程去出去请求队列中的Request对象 进行消费(处理) 响应也不是直接发送给客户端(而是放在Response队列):防止高并发时,线程工作过于饱和,而导致延迟 顺序写:追加写,头部读(日志) 后写…

消费端的手工ACK和NACK 消费端进行消费的时候,如果由于业务异常我们可以进行日志的记录,然后进行补偿. 如果由于服务器宕机等严重问题,那么我们就需要手工进行ACK保障消费端成功. 消费端重回队列 为了对没有处理成功的消息,把消息重新回递给Broker. 一般我们在实际应用中,都会关闭重回队列,也就是设置为false. //生产端代码 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory…

之前使用MQ的时候是通过封装成dll发布Nuget包来使用,消息的发布和消费都耦合在使用的站点和服务里,这样会造成两个问题: 1.增加服务和站点的压力,因为每次消息的消费就意味着接口的调用,这部分的压力都加在了使用的站点和服务的机器上. 2.增加修改的复杂性,如果我们需要加两条消费日志,都需要再发布一个版本重新通过dll引用. 所以我们需要做以下两方面的工作: 1.MQ的接收拆分为Windows服务,通过zokeerper实现主从防止单点故障. 2.MQ的消费这里做成单独的WebApi服务. 这…

1.概念:SpringSecurity 安全访问 2.具体内容 所有的 Rest 服务最终都是暴露在公网上的,也就是说如果你的 Rest 服务属于一些你自己公司的私人业务,这样的结果会直接 导致你信息的泄漏,所以对于 Rest 访问,安全性是首要的因素. 2.1.配置安全验证 如果要想进行安全的验证处理,那么首先一定要先在服务的提供方上进行处理. 1. [microcloud-provider-dept-8001]修改 pom.xml 配置文件,追加 SpringSecurity 相关依赖包引入…

本文借用dubbo.learn的Dubbo API方式来解释原理. 服务消费端泛化调用 前面我们讲解到,基于Spring和基于Dubbo API方式搭建简单的分布式系统时,服务消费端引入了一个SDK二方包,里面存放着服务提供端提供的所有接口类,之所以需要引入接口类是因为服务消费端一般是基于接口使用JDK代理实现远程调用的. 泛化接口调用方式主要在服务消费端没有API接口类及模型类元(比如入参和出参的POJO类)的情况下使用.其参数及返回值中没有对应的POJO类,所以所有POJO均转换为Map表示…

Demo结构介绍 Demo使用Maven聚合功能,里面有三个模块,目录如下: 其中Consumer模块为服务消费者,里面TestConsumer和consumer.xml组成了基于Spring配置方式的服务调用,TestConsumerApi是基于Dubbo API方式的服务调用,TestConsumerApiGeneric是泛化方式的服务调用,TestConsumerAsync是异步调用的方式. 其中Provider模块为服务提供者,里面TestProvider和provider.xml组成了…

文章目录 Dubbo消费端直连提供者(开发调试) Dubbo服务只订阅(开发调试) Dubbo服务只注册 Dubbo消费端直连提供者(开发调试) Dubbo 官方文档: 用户指南 >> 示例 >> 直连提供者 注意点: 1. 直连提供者只需要在消费端设置,url指向本地的服务地址,如此便可以直接调用本地服务. 通过打断点本地调试,客户端可能回报错:"服务异常,异常代码:2:如有疑问:请联系管理员!",是正常的,因为我们断点拦截了,dubbo请求超时. 2. ${…

通过前面文章详解,我们知道Dubbo服务消费者标签dubbo:reference最终会在Spring容器中创建一个对应的ReferenceBean实例,而ReferenceBean实现了Spring生命周期接口:InitializingBean,接下来应该看一下其afterPropertiesSet方法的实现. 1.源码分析ReferenceBean#afterPropertiesSet ReferenceBean#afterPropertiesSet if (getConsumer() ==…

1. Dubbo简介 Dubbo是Alibaba开源的分布式框架,是RPC模式的一种成熟的框架,优点是可以与Spring无缝集成,应用到我们的后台程序中.具体介绍可以查看Dubbo官网. 2. Why Dubbo 项目服务化后,项目之间的高性能通讯问题.(项目被拆分成多个服务模块后必然会涉及模块之间的通讯).在应用Dubbo后,在项目中可以像调用本地方法一样调用远程方法. 利用ZooKeeper服务,可以使服务消费方能动态的查找服务提供方,使地址透明. 每个服务提供方相当于一个单独的项目,使我们…

继续上篇文章解决RabbitMQ消息丢失问题和保证消息可靠性(一) 未完成部分,我们聊聊MQ Server端的高可用和消费端如何保证消息不丢的问题? 回归上篇的内容,我们知道消息从生产端到服务端,为了保证消息不丢,我们必须做哪些事情? 发送端采用Confirm模式,注意Server端没成功通知发送端,需要重发操作需要额外处理 消息的持久化处理 上面两个操作保证消息到服务端不丢,但是非高可用状态,如果节点挂掉,服务暂时不可用,需要重启后,消息恢复,消息不会丢失,因为有磁盘存储. 本文先从消费端讲起…