[2017-09-05]Abp系列——Abp后台作业系统介绍与经验分享
本系列目录:Abp介绍和经验分享-目录
什么是后台作业系统
后台作业系统即BackgroundJob,从需求上讲,是一套基础设施,允许我们定义一个作业,在未来指定的某个时间去执行。
后台作业的一般场景:
- 如果某个业务逻辑很复杂,但又不是立即需要反馈结果给用户;
- 如果有个任务需要定时循环执行;
- 如果有个批量任务;
- 如果有个任务需要延后一段时间(在未来某个指定的时间)执行;
举几个典型例子:
- 订单在创建后30分钟未支付则自动取消并释放库存;
- 一个有几万甚至几十万粉丝的公众号需要同步粉丝信息到数据库;
- 某个活动开始前15分钟通知感兴趣的用户进行预热;
- 某个与友商合作的项目涉及结算,需要在每月指定日子出账单;
- 每天空闲时间段全量刷新缓存或者重建索引;
Abp的后台作业系统
Abp的后台作业系统有两个抽象概念:
- BackgroundWorker;
- BackgroundJob;
如果是第一次用Abp的后台作业系统,可以点击下面这个链接到官方文档看具体使用方法,这里主要介绍下这两个的特点和联系。
BackgroundWorker
先说BackgroundWorker,BackgroundWorker其实就是基于一个Timer(AbpTimer)设置时间间隔,在进程中定时执行。
在Abp核心模块AbpKernelModule的PostInitialize方法的最后:
if (Configuration.BackgroundJobs.IsJobExecutionEnabled)
{
var workerManager = IocManager.Resolve<IBackgroundWorkerManager>();
workerManager.Start();
workerManager.Add(IocManager.Resolve<IBackgroundJobManager>());
}
我们看到可以通过Configuration.BackgroundJobs.IsJobExecutionEnabled控制是否启用workerManager,同时IBackgroundJobManager其实是个Worker(这里说的是JobManager,不是Job)。
BackgroundJob
IBackgroundJobManager继承了IBackgroundWorker,并且Abp默认实现的BackgroundJobManager也是基于Worker的机制,其基类是PeriodicBackgroundWorkerBase,静态构造方法中指定了每5秒拉取一次作业信息。
在Abp.dll程序集中,Configuration.BackgroundJobs.IsJobExecutionEnabled启用时,默认用InMemoryBackgroundJobStore来存储作业信息。
在Abp核心模块AbpKernelModule的PostInitialize方法的最开始RegisterMissingComponents(假如没有注册其他实现):
if (Configuration.BackgroundJobs.IsJobExecutionEnabled)
{
IocManager.RegisterIfNot<IBackgroundJobStore, InMemoryBackgroundJobStore>(DependencyLifeStyle.Singleton);
}
else
{
IocManager.RegisterIfNot<IBackgroundJobStore, NullBackgroundJobStore>(DependencyLifeStyle.Singleton);
}
如果Configuration.BackgroundJobs.IsJobExecutionEnabled未启用,则用NullBackgroundJobStore,如果启用,默认用的是InMemoryBackgroundJobStore,除非仅作演示用,否则InMemoryBackgroundJobStore没什么用,因为这些默认实现都没处理集群场景下Job的分布式执行和防止重复执行。
为便于我们在生产环境使用,看下面两个:
Abp框架提供了Abp.Hangfire和Abp.Quartz模块用于集成可用于集群化场景下的作业实现(防止重复执行等问题,Abp默认实现的IBackgroundWorkerManager和IBackgroundJobManager并未处理相关问题);
总结下
上面有点缺乏条理,总结下:
Configuration.BackgroundJobs.IsJobExecutionEnabled不仅影响BackgroundJob的执行,同时也影响BackgroundWorker的执行;- Abp默认实现的
IBackgroundJobStore不支持集群环境下、分布式环境下的Job执行; - Abp框架提供了
Abp.Hangfire和Abp.Quartz模块支持集群环境下、分布式环境下的Job执行;
然后,还有个关于module-zero的小坑,提一下:
当我们项目中使用了module-zero模块,这个模块在业务数据库中实现了一个简单版本的IBackgroundJobStore。
对,还是没处理重复执行的问题,而且你不用配置,只要用了module-zero,但没配置用Hangfire或者Quartz,这个机制就悄无声息的在跑!
这时候,job可能会重复执行,job可能去不同项目执行。
好多朋友都被这个坑过,引起的现象能让你怀疑人生!
module-zero的这个实现,个人认为是abp演示Notification机制的需要,其中有个分发机制是超出5人订阅,则转为Job进行分发。
明确一下不同Job配置实际上用的是哪个IBackgroundJobStore:
什么都不配置,而且没依赖module-zero模块:
IsJobExecutionEnabled默认是启用的,用的是基于内存的InMemoryBackgroundJobStore;什么都不配置,而且依赖了module-zero模块:用的是基于业务数据库的
BackgroundJobStore,实体是BackgroundJobInfo,并且注册在AbpZeroDbContext中;明确关闭
IsJobExecutionEnabled:如果没依赖module-zero则用的是空实现NullBackgroundJobStore,不进行存储,否则作业信息可以入队,能在其他开启job执行的宿主项目上执行(假如共享了job代码所在的程序集);明确配置依赖了
Abp.Hangfire或Abp.Quartz:IsJobExecutionEnabled启用的项目会执行,IsJobExecutionEnabled关闭的项目只入队不执行。
我们推荐的做法是(前提是核心的几个程序集共享,Abp框架并不是只能用于Web开发,也可以寄宿在控制台或win服务中,甚至桌面应用程序),所有iis站点关闭Job的执行,专门提供一个Windows服务启用IsJobExecutionEnabled。
所有宿主程序都必须明确配置集成Abp.Hangfire或Abp.Quartz,哪怕你觉得这个项目和作业系统八竿子打不着!
所有宿主程序都必须明确配置集成Abp.Hangfire或Abp.Quartz,哪怕你觉得这个项目和作业系统八竿子打不着!
所有宿主程序都必须明确配置集成Abp.Hangfire或Abp.Quartz,哪怕你觉得这个项目和作业系统八竿子打不着!
我中招的那次,有怀疑过是不是AppDomain串了,甚至怀疑代码去不同进程串门了,怀疑人生。
最后差点忘说了,如果集成且启用了Hangfire,一定记得单独给他配个数据库,作业信息的扫描频率实在太高,据说Hangfire收费版支持存Redis,估计会好一点。
[2017-09-05]Abp系列——Abp后台作业系统介绍与经验分享的更多相关文章
- [2017-08-21]Abp系列——如何使用Abp插件机制(注册权限、菜单、路由)
本系列目录:Abp介绍和经验分享-目录 Abp的模块系统支持插件机制,可以在指定目录中放置模块程序集,然后应用程序启动时会搜索该目录,加载其中所有程序集中的模块. 如何使用这套机制进行功能插件化开发? ...
- 基于DDD的现代ASP.NET开发框架--ABP系列文章总目录
ABP相关岗位招聘:给热爱.NET新技术和ABP框架的朋友带来一个高薪的工作机会 ABP交流会录像视频:ABP架构设计交流群-7月18日上海线下交流会的内容分享(有高清录像视频的链接) 代码自动生成: ...
- ABP文档 - 后台作业和工作者
文档目录 本节内容: 简介 后台作业 关于作业持久化 创建一个后台作业 在队列里添加一个新作业 默认的后台作业管理器 后台作业存储 配置 禁用作业执行 Hangfire 集成 后台工作者 创建一个后台 ...
- 基于DDD的现代ASP.NET开发框架--ABP系列之3、ABP分层架构
基于DDD的现代ASP.NET开发框架--ABP系列之3.ABP分层架构 ABP是“ASP.NET Boilerplate Project (ASP.NET样板项目)”的简称. ABP的官方网站:ht ...
- 基于DDD的现代ASP.NET开发框架--ABP系列之2、ABP入门教程
基于DDD的现代ASP.NET开发框架--ABP系列之2.ABP入门教程 ABP是“ASP.NET Boilerplate Project (ASP.NET样板项目)”的简称. ASP.NET Boi ...
- 点这里进入ABP系列文章总目录
基于DDD的现代ASP.NET开发框架--ABP系列之1.ABP总体介绍 ABP是“ASP.NET Boilerplate Project (ASP.NET样板项目)”的简称. ASP.NET Boi ...
- [2017-09-04]Abp系列——为什么值对象必须设计成不可变的
本系列目录:Abp介绍和经验分享-目录 这篇是之前翻备忘录发现漏了的,前阵子刚好同事又提及过这个问题,这里补上. 本文重点在于理解什么是值对象的不可变性. Abp的ValueObject以及EF的Co ...
- [2017-08-28]Abp系列——业务异常与错误码设计及提示语的本地化
本系列目录:Abp介绍和经验分享-目录 前言 ABP中有个异常UserFriendlyException经常被使用,但是它所在的命名空间是Abp.UI,总觉得和展现层联系过于紧密,在AppServic ...
- [2017-08-16]ABP系列——QuickStartB:正确理解Abp解决方案的代码组织方式、分层和命名空间
本系列目录:Abp介绍和经验分享-目录 介绍ABP的文章,大多会提到ABP框架吸收了很多最佳实践,比如: 1.N层 (复用一下上篇的图) 展现层(Personball.Demo.Web):asp.ne ...
随机推荐
- GNOME 3.x下安装配置小企鹅输入法框架及SunPinYin插件
fcitx 小企鹅输入法框架已经越来越成熟,并且具备极高的性能,配合 Sun PinYin 智能输入法就和 Windows 下的搜狗百度等输入法几乎无二了.事实上,现在Linux版本的搜狗输入法正是基 ...
- AC日记——[JLOI2014]松鼠的新家 洛谷 P3258
题目描述 松鼠的新家是一棵树,前几天刚刚装修了新家,新家有n个房间,并且有n-1根树枝连接,每个房间都可以相互到达,且俩个房间之间的路线都是唯一的.天哪,他居然真的住在”树“上. 松鼠想邀请小熊维尼前 ...
- PHP将emoji表情进行过滤
emoji表情是个麻烦的东西,不仅储存的时候需要处理,而且在PC的显示上需要三方的类库来处理.并且它还是经常更新.... 最近开发新项目的时候明确要求某个字段要过滤emoji表情,在网上找了个方法,亲 ...
- Codeforces 696E ...Wait for it...(树链剖分)
题目链接 ...Wait for it... 考虑树链剖分. 对于树上的每个点开一个set,记录当前该节点上所有的girls. 每个节点初始的权值为set中的最小值. 询问的时候每次在路径上寻找最小 ...
- Ubuntu 16.04安装MongoDB的GUI工具RoboMongo
一.下载: https://robomongo.org/download 离线版本:(链接: https://pan.baidu.com/s/1mirFi56 密码: y3t2) 二.安装: -lin ...
- 类加载器在加载类 的时候就已经对类的static代码块和static变量进行了初始化
类装载器ClassLoader 类装载器工作机制 类装载器就是寻找类的节码文件并构造出类在JVM内部表示对象的组件.在Java中,类装载器把一个类装入JVM中,要经过以下步骤: [1.]装载:查找和导 ...
- Android 关于view的getLayoutParams().width,getWidth(),getMeasuredWidth();
习惯了使用xml的布局方式,当动态布局的时候就有许多疑点,记录一下,帮助我这老头一样的记忆力. 网上也有许多解析这getLayoutParams().width,getWidth(),getMeasu ...
- 全方位绕过软WAF攻略
0×00 前言 现在软waf较为多,就在今年夏天苦逼挖洞的日子里经常遇到360主机卫士,安全狗,云锁之类的软waf进行拦截,经常碰到如下拦截提示: 看到以上三个拦截提示就让人头疼不已,欲罢不能. so ...
- 在win7上安装visual c++ 2008 redistributable 发生错误error 1935
方案一.原来服务"Windows Modules Installer"被禁用了, 启用该服务后, 问题就解决了. 方案二. 1.点开始——在运行框里输入regedit,按回车键 ...
- 用Visual C++ 2010 载入动态链接库三部曲(使用第三方库的一般方法)
以下以载入编译好的ACE动态链接库为例说明:这里如果你已经设置了环境变量ACE_ROOT ACE在VS2010下高速配置载入动态链接库三部曲:(这里如果你的ACE文件夹为E:\ACE_wrappers ...