ENode 2.6 架构与设计简介以及全新案例分享
前言
ENode是一个应用开发框架,为开发人员提供了一整套基于DDD+CQRS+ES+EDA架构风格的解决方案。ENode从发布1.0开始到现在的差不多两年时间,我几乎每周都在更新设计或实现代码。以至于从来没有一个稳定的版本可以提供给大家,非常惭愧。但我相信,随着时间的推移和我的努力的积累,ENode一定会越来越稳定和成熟的。我觉得我此刻很幸福,因为我有自己的兴趣且有机会在业余时间为了自己的兴趣而奋斗。
ENode开源地址:https://github.com/tangxuehua/enode
今天是个开心的日子,因为我终于使用ENode开发出了一个比较有说服力的真实案例,一个在线会议位置管理与订购系统。该案例与微软的Microfost CQRS Journey案例的功能一致,只是是用ENode开发完成的。目的是为了展示:
- 如何使用ENode支持DDD领域层的实现;
- 如何使用ENode实现CQRS+ES的架构;
- 如何使用ENode实现事件驱动的架构(EDA);
另外,在案例开发过程中,也不断发现了ENode, EQueue的很多问题。所以,通过做这个案例,也帮助ENode, EQueue完善了很多。真是要实践才能进步啊!
ENode架构简介
ENode目前的架构已经和最初的1.0版本有较大的差别了。比如,没有了对Redis的依赖,增加了Command Store的设计。最新版本的ENode架构图如下:
熟悉CQRS架构的人应该对这个图不太陌生。需要强调的有两点:
- 新版的架构图中,Domain Aggregate是常驻内存的;聚合根的职责就是封装状态、业务规则,同时产生领域事件;
- 新增了一个Command Store,用于实现Command的幂等处理;
关于图中的其他部分的介绍,请参看我之前写的关于ENode系列的文章。
ENode关键特性
- 实现了CQRS架构,支持分布式,基于队列的水平扩展,框架设计之初就考虑了架构的各个节点的水平扩展;
面向高并发设计;架构层面,充分考虑到了如何解决并发问题;通过用EQueue实现服务器之间的消息路由、通过单机内部实现类似Actor Mailbox的设计,从而避免并发的产生。提高CQRS架构C端的整体写入吞吐量;即便在某些极端情况下出现并发问题,也支持自动的乐观检测,并自动重试;另外,架构层面,规定一个command只能涉及一个聚合根的修改,从而规范应用开发者必须严格按照消息驱动的思路来实现复杂的业务流程,而不能使用工作单元的方式,以事务的方式实现数据的强一致性;
- 严谨的消息幂等处理支持;由于ENode是消息驱动的架构,所以对消息的幂等性处理,是框架关注的一个重要的方面,并在架构层面做了支持。这使得应用开发人员不必担心消息的重复处理带来的问题。
- Domain Aggregate常驻内存;这个设计可以提高C端command的处理性能。因为我们不必像传统的方式那样先把聚合根从db取出来,再修改,再保存回去了;
- 框架为开发人员展示了如何更好的实现Sagas,在CQRS架构中,Sagas指基于消息驱动的业务流程;一个Saga包含若干个聚合根以及一个(通常)流程管理器(Process Manager);聚合根维护流程中的所有参与者对象的状态以及流程本身的状态,流程管理器负责定义和实现流程控制逻辑,无状态;流程管理器的实现是通过响应事件、异常、应用层消息,然后发送相应的命令,从而实现消息驱动的流程;
- 采用Event Sourcing(简称ES)的方式来持久化聚合根状态;通过ES实现聚合根状态的还原以及通用的并发控制,通过聚合根ID+事件版本号作为唯一索引的思路实现乐观并发控制;
- 消息除了command, domain event外,还支持exception message, application message;这两种消息是我们在遇到有些消息不适合用domain event来表达时需要使用到;比如聚合里有时我们要修改某个状态前会先做业务规则的检查判断,如果不合法,通常会抛异常,然后这个异常我们又希望可以让流程管理器知道,从而流程管理器可以做后面的回滚或补偿措施;另外,我们有时可能会在应用层面(command handler里)和其他外部系统发生交互,那交互的结果,使用应用层的消息更合理;ENode在架构层面,对上面这些消息做了统一的支持;
- 框架提供返回单个command执行结果以及阻塞等待command执行结果的支持,这个对于开发者希望同步执行command并知道command执行结果的时候,非常有帮助;这样开发者就不用自己去轮训了。
- 除了对消息的幂等处理的支持外,ENode对domain event的顺序处理,也做了充分的考虑和支持,确保当C端产生的domain event同步到Q端时,Q端处理时,框架层面能确保Q端的处理顺序不会乱序。从而保证C,Q两端的数据是最终一致的;
- 保证消息能至少被处理一次;主要思路是确保消息的:1)持久化;2)消息ACK后才认为已消费;
- 支持一个聚合根一次可以产生多个domain event;虽然大部分情况,一个聚合根一次只会产生一个domain event,但有些场景,可能会产生两个或多个。此时,这些事件会以一个事件流的方式一起apply到当前聚合根;同时,在Q端,框架也会通过必要的手段,与用户代码一起保证了事件流中的事件的处理顺序的正确性;
- ENode所使用的分布式消息队列EQueue,参考了阿里的RocketMQ的架构思想,具有高性能、可扩展、轻量级的特性,支持不受限于机器内存大小的消息堆积能力,而且是纯C#开发。同时还提供了简单实用的管理控制台,可以让我们轻松的管理消息队列。比如可以方便的动态增加、禁用、启用、删除队列,查询消息内容、消息消费进度,等信息;目前,EQueue也已经经过多个迭代,并且已经有真实用户进行使用,功能基本趋于成熟稳定。
Conference案例简介
Conference是一个微软开发的,基于DDD+CQRS+ES的一个开源项目。项目主页:cqrsjourney.github.io
这个项目,对我们大家学习DDD领域驱动设计、CQRS+ES的架构,非常有帮助。
- 该案例从业务上,实现了一个典型的电子商务系统的关键环节:商品管理、库存管理、下单、减库存、支付;
- 该案例从技术上,很好的展示了CQRS架构的优点。比如可以在Q端定制不同的视图,以应对不同的查询需求;
- 该案例很好的向我们展示了如何划分领域,划分边界上下文(bounded context),并如何使用不同的架构技术,实现不同的上下文,非常具有学习价值。
正是因为这个项目的以上优点,让我有兴趣使用ENode作为技术支撑,实现同样功能的系统。在重写的过程中,保留了所有非技术的东西,比如边界上下文的划分、领域层等;所有技术相关的部分,用ENode替代。
使用ENode实现的Conference开源项目地址:https://github.com/tangxuehua/conference
演示地址,后台:http://www.enode.me/conference,前台:http://www.enode.me/registration
希望有兴趣的同学,可以去下载源代码进行研究。了解ENode,最快的方法就是从案例代码开始。如果想进行交流,可以加QQ群:185916873,随时欢迎有兴趣的道友加入。
最后,贴一个Conference案例中订单处理的Sagas流程图:
不早了,实在写不下去了,就到这吧。
ENode 2.6 架构与设计简介以及全新案例分享的更多相关文章
- UI设计:C4D作品案例分享
中文名4D电影,外文名CINEMA 4D,研发公司为德国Maxon Computer,特点为极高的运算速度和强大的渲染插件,使用在电影<毁灭战士>.<阿凡达>中,获得贸易展中最 ...
- PHP实现微信随机红包算法和微信红包的架构设计简介
微信红包的架构设计简介: 原文:https://www.zybuluo.com/yulin718/note/93148 @来源于QCon某高可用架构群整理,整理朱玉华. 背景:有某个朋友在朋友圈咨询微 ...
- PHP实现微信红包算法和微信红包的架构设计简介
微信红包的架构设计简介: 原文:https://www.zybuluo.com/yulin718/note/93148 @来源于QCon某高可用架构群整理,整理朱玉华. 背景:有某个朋友在朋友圈咨询微 ...
- 基于Flume的美团日志收集系统(一)架构和设计
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- 基于Flume的美团日志收集系统(一)架构和设计【转】
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- Micro 架构与设计
Micro 架构与设计 翻译自 Micro architecture & design patterns for microservices 注: 原文作者即 Micro 框架的开发者. 过去 ...
- 转:基于Flume的美团日志收集系统(一)架构和设计
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- 基于Flume的美团日志收集系统 架构和设计 改进和优化
3种解决办法 https://tech.meituan.com/mt-log-system-arch.html 基于Flume的美团日志收集系统(一)架构和设计 - https://tech.meit ...
- 常见Struts、Hibernate、Spring、J2EE、ibatis、Oracle等开发框架架构图及其简介
各种系统架构图及其简介 转载请保留出处,不胜人生一场醉汇总. 以下文字和架构图均在本人相关系统设计和架构方案中有所应用. 原文出处:http://space.itpub.net/6517/viewsp ...
随机推荐
- javascript面向切面
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- TFS Express backup and restore
When we setup source control server, we should always make a backup and restore plan for it. This ar ...
- F#之旅9 - 正则表达式
今天,cozy群有个群友发了条正则,问正则匹配相关的问题.虽然他的问题用html selector去处理可能更好,但是我也再一次发现:我忘了正则怎么写的了! 忘掉正则是有原因的,这篇文章会简单记录下F ...
- F#之旅6 - 简单AV推荐系统
上回说到用F#来写爬虫,这只是F#学习第一阶段的第一步.最开始,就对第一阶段做了这样的安排: 1.爬虫爬取AV数据 2.数据处理和挖掘 3.数据可视化(使用ECharts) 4.推荐系统 第一步很快就 ...
- 设计模式 之 原型模式(ProtoType)
什么时原型模式 或 原型模式的定义: 用原型实例来指定创建对象的种类,并通过拷贝这些原型创建新的对象. 原型模式的特点: 1),它是面向接口编程, 2),原型模式的新对象是对原型实例的一个克隆 ...
- ListView 的优化
listView 的宽高设为固定, 或match_parent,这样在加载布局是, 几面装下几个item 就首先加载几个 减少对象的创建 //减少对象的创建 if (convertView == nu ...
- Tween Animation---Scale渐变尺寸缩放动画
博主都是自己把代码测试过了才给大家分享的 在res/创建一个anim文件夹用来保存动画属性的xml 新建一个scale.xml <?xml version="1.0" enc ...
- getSlotFromBufferLocked: unknown buffer: 0xf3d94ca0
安卓6.0模拟器导致,换一个模拟器解决
- Hive文件存储格式
hive文件存储格式 1.textfile textfile为默认格式 存储方式:行存储 磁盘开销大 数据解析开销大 压缩的text文件 hive无法进行合并和拆分 2.sequencef ...
- 【Linux】crontab 定时任务
7月份,公司海外运营国发生数据库联接未释放,造成连接池连接不足的情况, 当时查询并没有及时解决问题, 为了避免现场同事多次人工重启系统的,因此写了个shell脚本,通过crontab 实现系统重启,但 ...