企业🤖AI智能体构建引擎,智能编排和调试,一键部署,支持私有化部署方案 广告
# 多库使用 一个系统随着规模增加,会从单一数据库变成多数据库,包含如下变化 1)业务库变成主从库. 2)分库或者分表。根据数据特性来决定再哪个分表里操作,或者根据租户来决定是哪个分表还是哪个分库。 3)业务拆分多个库,比如拆分成客户库,订单库,商品库。 4)以上几种混合形式 5)数据通过消息,数据库日志等方式同步到大数据系统,大数据系统支持sql查询,比如发送给hive和clickhouse。 6)业务拆分多个库,写数据落入到业务库,查询数据可以从分布式查询引擎查询,如presto,drill等。 7)业务拆分多个库,可以使用ShardingSpher等中间件查询 BeetlSQL3 应对前4个模式,内置有简单的应对规则。如下 * 如果是同一种业务库,则使用一个SQLManager管理,无论是分库还是分表,都在底层路由到不同的数据库,通过ConnectionSource来实现 * 最常见情况,如果是主从库,那可以为ConnectionSource的配置多个从库,这样,更新操作(事务写)走主库,读取(事务读)操作走从库。 * 如果是单库分表操作,表名可以是表达式,比如@Table(name="${user}")。beetlsql能解析表达式,映射到不同的表,user_001,user_002 * 单库单表多租户,需要自动在sql语句中增加租户语句。可以对相关POJO增加租户属性,自动生成租户相关的sql片段 * 每个租户一个数据库,这需要ConditionalConnectionSource这样的能自动返回不同租户的数据库链接。 * BeetlSQL可以集成分库分表中间件。像MyCat,ShardingSphere,都可以透明的集成进来。这得益于这些中间件提供的集成功能 * 如果是多个业务库,则使用多个SQLMananger。 * 项目可以配置多个数据源对应多个业务库,为每个数据源配置一个SQLManager,比如orderSqlManagr,proudctSqlManager * 如果觉得多个SQLManager难以管理,多个SQLManager可以使用一个ThreadLocalSQLManager来管理,方便开发。ThreadLocalSQLManager.来决定当前操作使用哪一个SQLManager * 用户也可以自己参考ThreadLocalSQLManager那样,编写一个SQLManagerProxy,来管理多个SQLManager * 中间件MyCat,ShardingSphere等支持分库分表,多库。beetlsql与这些中间件无缝集成。 >个人建议:对于使用BeetlSQL的分库分表功能,还是使用中间件的分库分表,包括是否要引入SQL查询引擎或者大数据系统,这取决于业务发展。初期建议使用BeetlSQL的分库分表,后期使用BeetlSQL分表+大数据系统或者查询引擎。如果你对中间件掌握的很好,也可以使用中间件 BeetlSQL 同其他大多数ORM工具一样,在多库使用的缺点 * BeetlSQL3对于数据库分库分表后的汇总查询无能为力,这需要自己编写,或者使用SQL查询引擎实现。BeetlSQL支持很多SQL查询引擎。 * 对于多库下的事物,BeetlSQL 无法解决,因为BeetlSQL是一个ORM工具,来代理JDBC操作。要实现多库事物,可以使用XA或类似XA的事务管理器,或者Saga等分布式事物解决方案 本章例子来源于源码 [S6MoreDatabase](https://gitee.com/xiandafu/beetlsql/blob/master/sql-samples/sql-sample-quickstart/src/main/java/org/beetl/sql/test/S6MoreDatabase.java)或者单元[MoreDatabaseTest](https://gitee.com/xiandafu/beetlsql/blob/master/sql-test/src/test/java/org/beetl/sql/core/MoreDatabaseTest.java),或者[SpringBoot](https://gitee.com/xiandafu/beetlsql/tree/master/sql-integration/sql-springboot-starter/src/test/java/org/beetl/sql/springboot)下提供所有的例子