.NET SAAS 架构与设计 -SqlSugar ORM
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary>
/// 数据库管理
/// </summary>
public class DbManger
{ /// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
}
var result=Db.GetConnection(configId);
//可以给业务库result设置AOP
return result;
}
} /// <summary>
/// 业取基础信息库
/// </summary>
public static ISqlSugarClient MasterDb
{
get
{
//如果是跨服务库分库,也需要动态配置的,因为库的IP会变
//参考业务库用法
return Db.GetConnection("default");
}
} /// <summary>
/// 利用SqlSugarScope单例+多租户来处理多库事务
/// </summary>
public static SqlSugarScope Db =new SqlSugarScope(new ConnectionConfig()
{
ConfigId="default",
DbType = SqlSugar.DbType.SqlServer,
ConnectionString = @"基础信息库连接字符串",
IsAutoCloseConnection = true
},
db =>
{
//基础库AOP
db.Aop.OnLogExecuting = (s, p) =>
{ }; }); /// <summary>
/// 获取用户数据库连接字符串信息
/// </summary>
/// <returns></returns>
private static UserInfo GetUserInfo()
{
throw new System.NotImplementedException();
} }
使用用例,继承后直接使用
public class OrderManger: DbManger
{
public void Test()
{
try
{
Db.BeginTran();//用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库
BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 }
catch (System.Exception ex)
{
Db.RollbackTran();
throw ex;
};
}
}
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>()
.LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id)
.AS<Custom>("SQLSUGAR4XTEST.dbo.Custom") //主表用AS("") 从表用AS<T>("")
.Where(o => o.Id == 1)
.Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name })
.ToList();
生成的SQL如下:
SELECT [o].[Id] AS [Id] ,
[cus].[Name] AS [CustomName]
FROM [Order] o
Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名
ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 )
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary>
/// 获取业务库对象
/// </summary>
public static ISqlSugarClient BizDb
{
get
{
UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息
var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID)
if(!Db.IsAnyConnection(configId)){
Db.AddConnection(new ConnectionConfig() {
ConfigId = configId,
ConnectionString = "DataSource=" + user.Connection,
DbType = DbType.SqlServer,
IsAutoCloseConnection = true });
} var result=Db.GetConnection(configId);
result.QueryFilter.Add(new TableFilterItem<Order>(it => it.OrgId==configId);//添加表过滤器
//可以多个表 return result;
}
}
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it =>
{
//操作前记录 包含: 字段描述 列名 值 表名 表描述
var editBeforeData = it.BeforeData;
//操作后记录 包含: 字段描述 列名 值 表名 表描述
var editAfterData = it.AfterData;
var sql = it.Sql;
var parameter = it.Parameters;
var data = it.BusinessData;//这边会显示你传进来的对象
var time = it.Time;
var diffType=it.DiffType;//enum insert 、update and delete //Write logic
}; db.Insertable(new Student() { Name = "beforeName" })
.EnableDiffLogEvent() //注意需要加上启用日志,可以传参数
.ExecuteReturnIdentity();
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
1、数据库设计
常用的Saas分库分为2种类型的库
1.1 基础信息库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
2.2 业务库
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E
性能优先:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
2、表设计
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
2.1 数据库配置表
主键、数据库连接信息、集团ID (基础信息库)
2.2 用户表
主键、用户名、密码、集团ID (基础信息库)
3、代码编写
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db
/// <summary> /// 数据库管理 /// </summary> public class DbManger { /// <summary> /// 获取业务库对象 /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo(); //获取用户数据库连接字符串信息 var configId = user.OrgId.ToString(); //集团ID(也可以叫租户ID) if (!Db.IsAnyConnection(configId)){ Db.AddConnection( new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); //可以给业务库result设置AOP return result; } } /// <summary> /// 业取基础信息库 /// </summary> public static ISqlSugarClient MasterDb { get { //如果是跨服务库分库,也需要动态配置的,因为库的IP会变 //参考业务库用法 return Db.GetConnection( "default" ); } } /// <summary> /// 利用SqlSugarScope单例+多租户来处理多库事务 /// </summary> public static SqlSugarScope Db = new SqlSugarScope( new ConnectionConfig() { ConfigId= "default" , DbType = SqlSugar.DbType.SqlServer, ConnectionString = @"基础信息库连接字符串" , IsAutoCloseConnection = true }, db => { //基础库AOP db.Aop.OnLogExecuting = (s, p) => { }; }); /// <summary> /// 获取用户数据库连接字符串信息 /// </summary> /// <returns></returns> private static UserInfo GetUserInfo() { throw new System.NotImplementedException(); } } |
使用用例,继承后直接使用
public class OrderManger: DbManger { public void Test() { try { Db.BeginTran(); //用Db管理 MasterDb和BizDb事务 MasterDb.Insertable(xxx).ExecuteCommand(); //操作基础信息库 BizDb.Insertable(xxx).ExecuteCommand(); //操作业务库 Db.CommitTran(); //统一事务 } catch (System.Exception ex) { Db.RollbackTran(); throw ex; }; } } |
4、跨库查询
4.1 跨库同服务器
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>() .LeftJoin<Custom>((o, cus) => o.CustomId == cus.Id) .AS<Custom>( "SQLSUGAR4XTEST.dbo.Custom" ) //主表用AS("") 从表用AS<T>("") .Where(o => o.Id == 1) .Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name }) .ToList(); |
生成的Sql如下
SELECT [o].[Id] AS [Id] , [cus].[ Name ] AS [CustomName] FROM [ Order ] o Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名 ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 ) |
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样,
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
4.2跨库不同服务器
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
5、业务表创建
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1207
7、表过滤
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary> /// 获取业务库对象 /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo(); //获取用户数据库连接字符串信息 var configId = user.OrgId.ToString(); //集团ID(也可以叫租户ID) if (!Db.IsAnyConnection(configId)){ Db.AddConnection( new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); result.QueryFilter.Add( new TableFilterItem<Order>(it => it.OrgId==configId); //添加表过滤器 //可以多个表 return result; } } |
https://www.donet5.com/Home/Doc?typeId=1205
8、高安全性日志
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it => { //操作前记录 包含: 字段描述 列名 值 表名 表描述 var editBeforeData = it.BeforeData; //操作后记录 包含: 字段描述 列名 值 表名 表描述 var editAfterData = it.AfterData; var sql = it.Sql; var parameter = it.Parameters; var data = it.BusinessData; //这边会显示你传进来的对象 var time = it.Time; var diffType=it.DiffType; //enum insert 、update and delete //Write logic }; db.Insertable( new Student() { Name = "beforeName" }) .EnableDiffLogEvent() //注意需要加上启用日志,可以传参数 .ExecuteReturnIdentity(); |
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
9、总结
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可能发贴,或者直接找我沟通
源码下载: https://github.com/donet5/sqlsugar
Nuget: 安装SqlSugarCore
.NET SAAS 架构与设计 -SqlSugar ORM的更多相关文章
- 记SqlSugar ORM框架之找不到主键问题
前端时间在.NetCore项目中使用SqlSugar ORM框架(引用sqlSugarCore依赖包)的时候遇到了一个奇葩问题:对表进行数据更新操作的时候,报错 “ You cannot have n ...
- 高性能数据导入方案&表过滤器&一对多支持筛选- .NET SqlSugar ORM
一.数据导入有哪些难题 1.数据分类 你需要将 插入.更新.忽略不计.错误数据 等进么分类汇总,最后返回给客户,如果没有很好的设计想把这些操作一步到位非常的难 2.高性能 对于插入或者更新 肯定不能单 ...
- Saas系统架构的思考,多租户Saas架构设计分析
ToB Saas系统最近几年都很火.很多创业公司都在尝试创建企业级别的应用 cRM, HR,销售, Desk Saas系统.很多Saas创业公司也拿了大额风投.毕竟Saas相对传统软件的优势非常明显. ...
- 要想不踩SaaS那些坑,得先了解“SaaS架构”
摘要:围绕当下许多企业青睐的SaaS应用开发,华为云开发者技术服务工程师程泽在DTT首期带来主题为 <SaaS云原生应用典型架构> 的DTT首期直播分享. 本文分享自华为云社区<DT ...
- SqlSugar ORM已经支持读写分离
目前只有MYSQL版 3.5.2.9 支持,其库版本12月3号更新该功能 用例讲解 using (var db = new SqlSugarClient("主连接字符串", &qu ...
- 基于Flume的美团日志收集系统(一)架构和设计
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- 基于Flume的美团日志收集系统(一)架构和设计【转】
美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收 ...
- Micro 架构与设计
Micro 架构与设计 翻译自 Micro architecture & design patterns for microservices 注: 原文作者即 Micro 框架的开发者. 过去 ...
- 也谈TDD,以及三层架构、设计模式、ORM……:没有免费的午餐
想在园子里写点东西已经很久了,但一直没有落笔,忙着做 一起帮 的开发直播,还有些软文做推广,还要做奶爸带孩子,还要……好吧,我承认,真正的原因是: 太特么的难写了! 但再难写也要写啊,要等到“能写好了 ...
随机推荐
- [火星补锅] siano 神奇的线段树
前言: 本来以为很难打的,没想到主干一次就打对了,然而把输入的b和d弄混了,这sb错误调了两个小时... 解析: 神奇的线段树.注意到有一个性质,无论怎么割草,生长速度快的一定不会比生长速度慢的矮.因 ...
- USART波特率 vs SPI速率--学习笔记
本篇文章将与大家探讨USART波特率 vs SPI速率.这里提出一个问题,为什么USART的波特率是内核时钟的1/8或者1/16,而SPI最快的频率可以是内核时钟的1/2. 请大家带着这个问题来阅读本 ...
- STM32中断编程三步曲教你弄会中断设置以及中断优先级设置
中断作为stm32中必不可少的一个功能,其重要性是不言而喻的因此把中断学习好是根本. 所以今天就来好好啃一下中断配置的知识,俗话说:磨刀不误砍柴工.问题是什么呢?项目中我用到了一个触摸键盘TTP229 ...
- django HTML 数据处理
一.介绍 dgango HTML 对 各种数据类型数据的调用展示 的个人工作总结 二.数据处理 1.元祖数据 t1 =('a','b','c',) 示例: {{ t1.0 }} {{ ...
- NSFOCUS建议您采取以下措施以降低威胁: * 修改源代码或者配置文件改变SSH服务的缺省banner。
老扫漏洞出来要整改 1.在 /etc/下创建一个文件 ssh_banner_change,在文件中输入内容,如:welcome! 2.修改/etc/ssh/sshd_config 文件,添加以下内容: ...
- PHP怎样写延时队列(定时器)
背景 PHP没有定时器,依托的都是crontab这样的系统工具,也没有go中defer这样的延时方法,本文介绍几种PHP写延时队列的几种姿势. 延时队列的定义 普通的队列是先进先出,但是延时队列并不是 ...
- makefile简单学习(一)
第一层 显式规则 目标:依赖 [tab] 指令 伪目标:.PHONY: 递归规则 hello : hello.o gcc hello.o -o hello hello.o : hello.s gcc ...
- maven添加代理,默认的.m2路径
Maven设置http代理 编辑~/.m2/settings.xml文件,添加如下配置 找到 <proxies> 节点.去掉相应的注释,设置代理信息如下: 1 <proxy> ...
- 一看就懂的IdentityServer4认证授权设计方案
查阅了大多数相关资料,总结设计一个IdentityServer4认证授权方案,我们先看理论,后设计方案. 1.快速理解认证授权 我们先看一下网站发起QQ认证授权,授权通过后获取用户头像,昵称的流程. ...
- ES6基础知识(Generator 函数应用)
1.Ajax 是典型的异步操作,通过 Generator 函数部署 Ajax 操作,可以用同步的方式表达 function* main() { var result = yield request(& ...