# 多庫使用
一個系統隨著規模增加,會從單一數據庫變成多數據庫,包含如下變化
1)業務庫變成主從庫.
2)分庫或者分表。根據數據特性來決定再哪個分表里操作,或者根據租戶來決定是哪個分表還是哪個分庫。
3)業務拆分多個庫,比如拆分成客戶庫,訂單庫,商品庫。
4)以上幾種混合形式
5)數據通過消息,數據庫日志等方式同步到大數據系統,大數據系統支持sql查詢,比如發送給hive和clickhouse。
6)業務拆分多個庫,寫數據落入到業務庫,查詢數據可以從分布式查詢引擎查詢,如presto,drill等。
7)業務拆分多個庫,可以使用ShardingSpher等中間件查詢
BeetlSQL3 應對前4個模式,內置有簡單的應對規則。如下
* 如果是同一種業務庫,則使用一個SQLManager管理,無論是分庫還是分表,都在底層路由到不同的數據庫,通過ConnectionSource來實現
* 最常見情況,如果是主從庫,那可以為ConnectionSource的配置多個從庫,這樣,更新操作(事務寫)走主庫,讀取(事務讀)操作走從庫。
* 如果是單庫分表操作,表名可以是表達式,比如@Table(name="${user}")。beetlsql能解析表達式,映射到不同的表,user_001,user_002
* 單庫單表多租戶,需要自動在sql語句中增加租戶語句。可以對相關POJO增加租戶屬性,自動生成租戶相關的sql片段
* 每個租戶一個數據庫,這需要ConditionalConnectionSource這樣的能自動返回不同租戶的數據庫鏈接。
* BeetlSQL可以集成分庫分表中間件。像MyCat,ShardingSphere,都可以透明的集成進來。這得益于這些中間件提供的集成功能
* 如果是多個業務庫,則使用多個SQLMananger。
* 項目可以配置多個數據源對應多個業務庫,為每個數據源配置一個SQLManager,比如orderSqlManagr,proudctSqlManager
* 如果覺得多個SQLManager難以管理,多個SQLManager可以使用一個ThreadLocalSQLManager來管理,方便開發。ThreadLocalSQLManager.來決定當前操作使用哪一個SQLManager
* 用戶也可以自己參考ThreadLocalSQLManager那樣,編寫一個SQLManagerProxy,來管理多個SQLManager
* 中間件MyCat,ShardingSphere等支持分庫分表,多庫。beetlsql與這些中間件無縫集成。
>個人建議:對于使用BeetlSQL的分庫分表功能,還是使用中間件的分庫分表,包括是否要引入SQL查詢引擎或者大數據系統,這取決于業務發展。初期建議使用BeetlSQL的分庫分表,后期使用BeetlSQL分表+大數據系統或者查詢引擎。如果你對中間件掌握的很好,也可以使用中間件
BeetlSQL 同其他大多數ORM工具一樣,在多庫使用的缺點
* BeetlSQL3對于數據庫分庫分表后的匯總查詢無能為力,這需要自己編寫,或者使用SQL查詢引擎實現。BeetlSQL支持很多SQL查詢引擎。
* 對于多庫下的事物,BeetlSQL 無法解決,因為BeetlSQL是一個ORM工具,來代理JDBC操作。要實現多庫事物,可以使用XA或類似XA的事務管理器,或者Saga等分布式事物解決方案
本章例子來源于源碼 [S6MoreDatabase](https://gitee.com/xiandafu/beetlsql/blob/master/sql-samples/sql-sample-quickstart/src/main/java/org/beetl/sql/test/S6MoreDatabase.java)或者單元[MoreDatabaseTest](https://gitee.com/xiandafu/beetlsql/blob/master/sql-test/src/test/java/org/beetl/sql/core/MoreDatabaseTest.java),或者[SpringBoot](https://gitee.com/xiandafu/beetlsql/tree/master/sql-integration/sql-springboot-starter/src/test/java/org/beetl/sql/springboot)下提供所有的例子
- BeetlSQL 3 指南
- 數據訪問框架
- 適合用戶
- 編譯源碼
- 直接看代碼
- 閑大賦介紹
- BeetlSQL3 特點
- 數據庫訪問工具的痛點
- BeetlSQL3 例子
- 基礎例子
- 結果集映射
- 翻頁查詢
- 演示like,batchUpdate,in 操作
- 自動fetch
- 多數據庫
- 代碼生成框架
- 安裝BeetlSQL
- 直接安裝
- 框架集成
- 編譯源碼
- 快速開始
- 環境準備
- 環境搭建
- 使用BeetlSQL
- 按照主鍵查尋
- 更新
- 按照模板查詢
- 執行SQL
- 執行模板SQL
- 使用Query
- 使用Mapper
- 使用模板文件
- SQLManager
- 內置語句
- 內置查詢API
- template查詢
- 更新操作
- 執行SQL
- 執行模板SQL
- 把SQL放到文件里
- 翻頁查詢
- SQLResult
- Stream查詢
- 存儲過程調用
- NameConversion(重要)
- DBStyle
- Inerceptor
- SQLManagerExtend
- 強制使用數據源
- Mapper
- 實現Mapper
- @Sql
- @Update @BatchUpdate
- @Template
- 參數名稱
- 參數返回值
- 執行SQL文件
- 翻頁查詢
- @SqlProvider
- @SpringData
- @SubQuery
- @InheritMapper
- @Call
- StreamData
- Default Method
- 定義自己的BaseMapper
- 限制Java代碼中SQL長度
- 數據模型
- POJO
- 不嚴格的POJO
- 交集(重要)
- @Table 注解
- @Column 注解
- 主鍵
- RowMapper
- ResultSetMapper
- Json配置映射
- Json自動映射
- XML支持
- 自動Fetch
- AttributeConvert
- BeanConvert
- 枚舉
- 混合模型
- Map模型
- 動態模型
- 模型其他注解
- 安全擴展注解
- BeetlSql 單表查詢工具Query
- Query使用方式和風格介紹
- Query主要操作簡介
- 查詢器獲取
- SELECT簡單的條件查詢
- 復雜的條件查詢
- 查詢字段智能處理
- 健壯的變量
- 自定義實現
- INSERT操作
- UPDATE操作
- DELETE操作
- single查詢和unique
- COUNT查詢
- GROUP分組查詢和Having子句
- 分頁查詢
- ORDER BY 排序
- page分頁查詢
- 方法調用順序
- Markdown文件
- Beetl 入門
- 定界符號
- 變量
- 算數表達式
- 邏輯表達式
- 控制語句
- 訪問變量屬性
- 判斷對象非空(重要)
- 調用方法
- 自定義方法
- 內置方法
- 標簽功能
- 附錄
- Idea 插件
- 代碼生成
- 多庫使用
- 業務主從庫
- 主從庫延遲問題
- 多個業務庫
- 合并多個業務庫 1
- 合并多個業務庫 2
- 單表多租戶
- 每個租戶一個表
- 多庫多租戶
- 使用ShardingSphere
- Saga(試驗)
- 關于Saga的一些認識
- 關于隔離性
- BeetlSQL Saga
- SagaMapper
- Saga 多庫事務實現
- Saga 微服務 實現
- 配置 Saga Server
- Swagger
- BeetlSQL 性能
- 測試方法
- 最新
- 2021-11-21
- 2020-9-28
- Spring 快速開始
- 環境準備
- 環境搭建
- SpringBoot 快速開始
- 環境準備
- 環境搭建
- 擴展BeetlSQL3
- 完整配置
- BaseMapper定制
- 代碼生成
- SQLExecutor定制
- 第三方
- MetadataManager
- JFinal集成
- ExecuteContext
- 參考ACT
- 數據庫表到Java對象
- Solon
- NameConversion
- ViewType
- RowMapper
- ResultSetMapper
- AttributeConvert
- BeanConvert
- Fetch
- 代碼生成
- 擴展BeetlSQL3
- BaseMapper定制
- SQLExecutor定制
- MetadataManager
- ExecuteContext
- 數據庫表到Java對象
- NameConversion
- ViewType
- RowMapper
- ResultSetMapper
- AttributeConvert
- BeanConvert
- Fetch
- 代碼生成
- BeetlSQL 多數據庫支持
- 多庫之間的不同
- 跨庫支持實現
- DBStyle
- MySqlStyle 例子
- H2Style例子
- ClickHouseStyle例子
- HBaseStyle例子
- DruidStyle例子
- MetadataManager
- BeanProcessor
- 與BeetlSQL2的區別
- 使用區別