# 多库使用
一个系统随着规模增加,会从单一数据库变成多数据库,包含如下变化
1)业务库变成主从库.
2)分库或者分表。根据数据特性来决定再哪个分表里操作,或者根据租户来决定是哪个分表还是哪个分库。
3)业务拆分多个库,比如拆分成客户库,订单库,商品库。
4)以上几种混合形式
5)数据通过消息,数据库日志等方式同步到大数据系统,大数据系统支持sql查询,比如发送给hive和clickhouse。
6)业务拆分多个库,写数据落入到业务库,查询数据可以从分布式查询引擎查询,如presto,drill等。
7)业务拆分多个库,可以使用ShardingSpher等中间件查询
BeetlSQL3 应对前4个模式,内置有简单的应对规则。如下
* 如果是同一种业务库,则使用一个SQLManager管理,无论是分库还是分表,都在底层路由到不同的数据库,通过ConnectionSource来实现
* 最常见情况,如果是主从库,那可以为ConnectionSource的配置多个从库,这样,更新操作(事务写)走主库,读取(事务读)操作走从库。
* 如果是单库分表操作,表名可以是表达式,比如@Table(name="${user}")。beetlsql能解析表达式,映射到不同的表,user_001,user_002
* 单库单表多租户,需要自动在sql语句中增加租户语句。可以对相关POJO增加租户属性,自动生成租户相关的sql片段
* 每个租户一个数据库,这需要ConditionalConnectionSource这样的能自动返回不同租户的数据库链接。
* BeetlSQL可以集成分库分表中间件。像MyCat,ShardingSphere,都可以透明的集成进来。这得益于这些中间件提供的集成功能
* 如果是多个业务库,则使用多个SQLMananger。
* 项目可以配置多个数据源对应多个业务库,为每个数据源配置一个SQLManager,比如orderSqlManagr,proudctSqlManager
* 如果觉得多个SQLManager难以管理,多个SQLManager可以使用一个ThreadLocalSQLManager来管理,方便开发。ThreadLocalSQLManager.来决定当前操作使用哪一个SQLManager
* 用户也可以自己参考ThreadLocalSQLManager那样,编写一个SQLManagerProxy,来管理多个SQLManager
* 中间件MyCat,ShardingSphere等支持分库分表,多库。beetlsql与这些中间件无缝集成。
>个人建议:对于使用BeetlSQL的分库分表功能,还是使用中间件的分库分表,包括是否要引入SQL查询引擎或者大数据系统,这取决于业务发展。初期建议使用BeetlSQL的分库分表,后期使用BeetlSQL分表+大数据系统或者查询引擎。如果你对中间件掌握的很好,也可以使用中间件
BeetlSQL 同其他大多数ORM工具一样,在多库使用的缺点
* BeetlSQL3对于数据库分库分表后的汇总查询无能为力,这需要自己编写,或者使用SQL查询引擎实现。BeetlSQL支持很多SQL查询引擎。
* 对于多库下的事物,BeetlSQL 无法解决,因为BeetlSQL是一个ORM工具,来代理JDBC操作。要实现多库事物,可以使用XA或类似XA的事务管理器,或者Saga等分布式事物解决方案
本章例子来源于源码 [S6MoreDatabase](https://gitee.com/xiandafu/beetlsql/blob/master/sql-samples/sql-sample-quickstart/src/main/java/org/beetl/sql/test/S6MoreDatabase.java)或者单元[MoreDatabaseTest](https://gitee.com/xiandafu/beetlsql/blob/master/sql-test/src/test/java/org/beetl/sql/core/MoreDatabaseTest.java),或者[SpringBoot](https://gitee.com/xiandafu/beetlsql/tree/master/sql-integration/sql-springboot-starter/src/test/java/org/beetl/sql/springboot)下提供所有的例子
- BeetlSQL 3 指南
- 数据访问框架
- 适合用户
- 编译源码
- 直接看代码
- 闲大赋介绍
- BeetlSQL3 特点
- 数据库访问工具的痛点
- BeetlSQL3 例子
- 基础例子
- 结果集映射
- 翻页查询
- 演示like,batchUpdate,in 操作
- 自动fetch
- 多数据库
- 代码生成框架
- 安装BeetlSQL
- 直接安装
- 框架集成
- 编译源码
- 快速开始
- 环境准备
- 环境搭建
- 使用BeetlSQL
- 按照主键查寻
- 更新
- 按照模板查询
- 执行SQL
- 执行模板SQL
- 使用Query
- 使用Mapper
- 使用模板文件
- SQLManager
- 内置语句
- 内置查询API
- template查询
- 更新操作
- 执行SQL
- 执行模板SQL
- 把SQL放到文件里
- 翻页查询
- SQLResult
- Stream查询
- 存储过程调用
- NameConversion(重要)
- DBStyle
- Inerceptor
- SQLManagerExtend
- 强制使用数据源
- Mapper
- 实现Mapper
- @Sql
- @Update @BatchUpdate
- @Template
- 参数名称
- 参数返回值
- 执行SQL文件
- 翻页查询
- @SqlProvider
- @SpringData
- @SubQuery
- @InheritMapper
- @Call
- StreamData
- Default Method
- 定义自己的BaseMapper
- 限制Java代码中SQL长度
- 数据模型
- POJO
- 不严格的POJO
- 交集(重要)
- @Table 注解
- @Column 注解
- 主键
- RowMapper
- ResultSetMapper
- Json配置映射
- Json自动映射
- XML支持
- 自动Fetch
- AttributeConvert
- BeanConvert
- 枚举
- 混合模型
- Map模型
- 动态模型
- 模型其他注解
- 安全扩展注解
- BeetlSql 单表查询工具Query
- Query使用方式和风格介绍
- Query主要操作简介
- 查询器获取
- SELECT简单的条件查询
- 复杂的条件查询
- 查询字段智能处理
- 健壮的变量
- 自定义实现
- INSERT操作
- UPDATE操作
- DELETE操作
- single查询和unique
- COUNT查询
- GROUP分组查询和Having子句
- 分页查询
- ORDER BY 排序
- page分页查询
- 方法调用顺序
- Markdown文件
- Beetl 入门
- 定界符号
- 变量
- 算数表达式
- 逻辑表达式
- 控制语句
- 访问变量属性
- 判断对象非空(重要)
- 调用方法
- 自定义方法
- 内置方法
- 标签功能
- 附录
- Idea 插件
- 代码生成
- 多库使用
- 业务主从库
- 主从库延迟问题
- 多个业务库
- 合并多个业务库 1
- 合并多个业务库 2
- 单表多租户
- 每个租户一个表
- 多库多租户
- 使用ShardingSphere
- Saga(试验)
- 关于Saga的一些认识
- 关于隔离性
- BeetlSQL Saga
- SagaMapper
- Saga 多库事务实现
- Saga 微服务 实现
- 配置 Saga Server
- Swagger
- BeetlSQL 性能
- 测试方法
- 最新
- 2021-11-21
- 2020-9-28
- Spring 快速开始
- 环境准备
- 环境搭建
- SpringBoot 快速开始
- 环境准备
- 环境搭建
- 扩展BeetlSQL3
- 完整配置
- BaseMapper定制
- 代码生成
- SQLExecutor定制
- 第三方
- MetadataManager
- JFinal集成
- ExecuteContext
- 参考ACT
- 数据库表到Java对象
- Solon
- NameConversion
- ViewType
- RowMapper
- ResultSetMapper
- AttributeConvert
- BeanConvert
- Fetch
- 代码生成
- 扩展BeetlSQL3
- BaseMapper定制
- SQLExecutor定制
- MetadataManager
- ExecuteContext
- 数据库表到Java对象
- NameConversion
- ViewType
- RowMapper
- ResultSetMapper
- AttributeConvert
- BeanConvert
- Fetch
- 代码生成
- BeetlSQL 多数据库支持
- 多库之间的不同
- 跨库支持实现
- DBStyle
- MySqlStyle 例子
- H2Style例子
- ClickHouseStyle例子
- HBaseStyle例子
- DruidStyle例子
- MetadataManager
- BeanProcessor
- 与BeetlSQL2的区别
- 使用区别