一个系统如果能用SAAS分库就尽量用SAAS分库,其主要原因是他成熟和稳定
原理:Saas分库是利用业务进行数据划分,特别适合 多账户系统的数据管理
功能点 | SAAS分库 | 聚合并发分库 |
性能 | 100 | 90 |
稳定性和成熟 | 100 | 80(.NET中更低) |
Sql语法兼容性 | 100 | 60 |
隔离数据之间的关联 | 不使用Sqlsugar : 40 使用Sqlsugar : 80 | 100 |
用户数据安全 | 100(用户可以独享库,互不干扰) | 80 |
从上面可以看出SAAS分库优势很多也是首选推荐,唯一需要注意的是避免隔离的数据之间有交集,这样就能做到扬长避短,软件设计就是这样
常用的Saas分库分为2种类型的库
主要存组织架构 、权限、字典、用户等 公共信息
性能优化:因为基础信息库是共享的,所以我们可以使用 读写分离,或者二级缓存来进行性能上的优化
我们要进行的分库都基于业务库进行分库,例如 A集团使用 A01库 ,B集团使用B01库 ,也可以多个小集团使用一个 数据库
如下:
业务库1 :集团A VIP用户独享一个库
业务库2 : 集团B, 集团F
业务库3 : 集团C, 集团D, 集团E ........... 集团Z 小客户多人共享一个库
性能无瓶颈可扩展:因为合理的进行了分库,所以在性能上并没有什么瓶颈,并且数据库可以扔到不同的服务器上
下面的表设计的比较简单,主要是通过用户可以拿到当前用户的连接字符串,然进行数据库操作
主键、数据库连接信息、集团ID (基础信息库)
主键、用户名、密码、集团ID (基础信息库)
考虑到租户迁移自增列禁止使用,可以用GUID和雪花ID
下面的代码很简单,我们通了多租户方式实现了动态根据用户获取不同的业务库
操作业务库我们使用 DbManger.BizDb
操作基础信息库我们使用 DbManger.MasterDb
如果我们要用到事务就用 DbManger.Db (如果是IOC只注入这个一个其它都是业务获取)
默认库一般存储字典,用户等基础数据库
//注册上下文:AOP里面可以获取IOC对象,如果有现成框架比如Furion可以不写这一行 services.AddHttpContextAccessor(); //注册SqlSugar services.AddSingleton<ISqlSugarClient>(s => { SqlSugarScope sqlSugar = new SqlSugarScope(new ConnectionConfig() { DbType = SqlSugar.DbType.SqlServer, ConnectionString = "DataSource=sqlsugar-dev.db", IsAutoCloseConnection = true, ConfigId="default" }, db => { //单例参数配置,所有上下文生效 db.Aop.OnLogExecuting = (sql, pars) => { //获取作IOC作用域对象 var appServive = s.GetService<IHttpContextAccessor>(); var obj = appServive?.HttpContext?.RequestServices.GetService<Log>(); Console.WriteLine("AOP" + obj.GetHashCode()); }; }); return sqlSugar; }); //业务库是动态添加的,只要注入主库就行
/// <summary> /// 数据库管理 /// </summary> public class DbManger { /// <summary> /// 获取业务库对象 (用IOC这块代码不能写到IOC里面) /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//根据Token获取用户信息和连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ //用非默认ConfigId进行测试 //添加业务库只在当前上下文有效(原理:SqlSugarScope模式入门文档去看) Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } //原理说明 //IsAnyConnection、AddConnection和GetConnection 都是Scope周期不同请求不会有影响 var result=Db.GetConnection(configId); //可以给业务库result设置AOP和过滤滤器 return result; } } /// <summary> /// 获基础信息库对象 (用IOC这块代码不能写到IOC里面) /// </summary> public static ISqlSugarClient MasterDb { get { //如果是跨服务器分库,也需要动态配置的,因为库的IP会变 //参考业务库用法 return Db.GetConnection("default"); } } //通过IOC获取注入的Db对象 public static SqlSugarScope Db { //如果用Furion就是 App.GetService<ISqlSugarClient>(); //IOC不会可以看文档: https://www.donet5.com/Doc/27/2563 var ihttp=你存储的Services.BuildServiceProvider().GetService<IHttpContextAccessor>(); var obj = ihttp?.HttpContext?.RequestServices.GetService<ISqlSugarClient>(); return (SqlSugarScope)obj ; } /// <summary> /// 获取用户数据库连接字符串信息 /// </summary> /// <returns></returns> private static UserInfo GetUserInfo() { //读数据库配置一般会有缓存,不然浪费性能 } }
使用用例,继承后直接使用 (老版本var myBizDb=BizDB要写在事务外面声名,声名的变量在写在事务中)
public class OrderManger: DbManger { public void Test() { try { Db.BeginTran();//用Db管理 MasterDb和BizDb事务 支持跨库事务 MasterDb.Insertable(xxx).ExecuteCommand();//操作基础信息库 BizDb.Insertable(xxx).ExecuteCommand();//操作业务库 Db.CommitTran();//统一事务 } catch (System.Exception ex) { Db.RollbackTran(); throw ex; }; } }
跨库查询我们要用BizDb进行查询,因为BizDb是多变的,而MasterDb是固定的,查询用BizDb为主
var List = BizDb.Queryable<Order>() .LeftJoin<Custom>((o, cus)=>o.CustomId==cus.Id,"SQLSUGAR4XTEST.dbo.Custom") // .LeftJoin<YYY> ... 可以多个 .Where(o => o.Id == 1) .Select((o, cus) => new ViewOrder { Id = o.Id, CustomName = cus.Name }) .ToList();
生成的Sql如下
SELECT [o].[Id] AS [Id] , [cus].[Name] AS [CustomName] FROM [Order] o Left JOIN [SQLSUGAR4XTEST].[dbo].[Custom] cus --生成的Sql就多了库名 ON ( [o].[CustomId] = [cus].[Id] ) WHERE ( [o].[Id] = @Id0 )
注意:上面的例子是SqlServer跨库查询的用法,不同的数据库跨库查询用法不一样,
更多用法: https://www.donet5.com/Home/Doc?typeId=2244
因为我们基础信息库是固定的,所以我们可以把基础信息库,同步到不同的服务器上,通过读分离的方式 ,那么每个业务服务器都会有一个
基础信息库了,然后在通过4.1的方式实现
我们可以通过CodeFirst创建业务库和表
https://www.donet5.com/Home/Doc?typeId=1206
一个业务库中的表对应多个集团,那我们设计表的时候肯定有个 OrgId或者租户ID进行数据表区别
我们需要将DbManger.bizDb进行修改,添加相应的表过滤器如果表中有OrgId的就可以添加过滤器
/// <summary> /// 获取业务库对象 /// </summary> public static ISqlSugarClient BizDb { get { UserInfo user = GetUserInfo();//获取用户数据库连接字符串信息 var configId = user.OrgId.ToString();//集团ID(也可以叫租户ID) if(!Db.IsAnyConnection(configId)){ //添加业务库只在当前上下文有效,其他上下文不会共享 Db.AddConnection(new ConnectionConfig() { ConfigId = configId, ConnectionString = "DataSource=" + user.Connection, DbType = DbType.SqlServer, IsAutoCloseConnection = true }); } var result=Db.GetConnection(configId); //接口过滤器 (继承接口的类都有效) 请升级 5.1.3.47 db.QueryFilter.AddTableFilter<IDeleted>(it => it.OrgId== user.OrgId); return result; } }
https://www.donet5.com/Home/Doc?typeId=1205
我们可以通过差异日志拿到数据更变记录,记录到日志,SAAS操作一些核心数据差异日志肯定少不了,安全系数高
db.Aop.OnDiffLogEvent = it => { //操作前记录 包含: 字段描述 列名 值 表名 表描述 var editBeforeData = it.BeforeData; //操作后记录 包含: 字段描述 列名 值 表名 表描述 var editAfterData = it.AfterData; var sql = it.Sql; var parameter = it.Parameters; var data = it.BusinessData;//这边会显示你传进来的对象 var time = it.Time; var diffType=it.DiffType;//enum insert 、update and delete //Write logic }; db.Insertable(new Student() { Name = "beforeName" }) .EnableDiffLogEvent() //注意需要加上启用日志,可以传参数 .ExecuteReturnIdentity();
具体用法:https://www.donet5.com/Home/Doc?typeId=1204
SAAS架构用到技术基本上都是现有功能,我这一篇文章相当于一个汇总,本人也做了6年SAAS架构,至少目前的方案是成熟方案 ,并且有产品验证并且上线运营,如果有更好的建议可以发贴,或者直接找我沟通
2016 © donet5.comApache Licence 2.0