執行恢復 · k8s原理與實踐

[TOC] # 執行恢復目前 OceanBase 數據庫支持租戶級別的基于時間點的恢復。 ## 通過命令進行恢復恢復會先根據用戶輸入的命令，從備份的目的地將全量備份恢復回來。之后，再將增量備份恢復到全量備份上面。最后，應用備份出去的事務日志。 **說明** 本節中的操作需要使用 root 用戶在 sys 租戶上執行。 1. 執行以下語句，停止日志備份。 ~~~ obclient> ALTER SYSTEM NOARCHIVELOG; ~~~ **說明** 由于當前版本暫不支持日志備份在集群上發起恢復，如果發起恢復，則會導致日志備份斷流，故建議在執行恢復前先停止日志備份。 2. 創建 Unit（資源單元）。示例如下： ~~~ obclient> CREATE RESOURCE UNIT box_16c96g max_cpu 16, max_memory 103079215104, max_iops 10240, max_disk_size 53687091200, max_session_num 64, MIN_CPU=16, MIN_MEMORY=103079215104, MIN_IOPS=10240; ~~~ 3. 創建 Resource Pool（資源池）。示例如下： ~~~ obclient> CREATE RESOURCE POOL restore_pool unit = 'box_16c96g', unit_num = 1, zone_list = ('z1','z2','z3'); ~~~ 4. 執行以下語句，設置加密信息。 **說明** 如果未加密或恢復時可以訪問原來的 KMS，則跳過本步驟。 ~~~ obclient> SET @kms_encrypt_info = '<加密string>'; ~~~ 其中，`<加密string>`為`EXTERNAL_KMS_INFO`的值，`EXTERNAL_KMS_INFO`為租戶級配置項。 5. 打開恢復配置。檢查`restore_concurrency`是否為`0`，如果為`0`，則需要執行以下語句： ~~~ obclient> ALTER SYSTEM SET restore_concurrency = 50; ~~~ 6. （可選）修改恢復的等待時間。默認恢復等待時間`_restore_idle_time`為 1 分鐘，整個恢復期間會有 3 次等待，即 3 分鐘的等待時間。對于測試恢復性能的場景，為了減少恢復的空閑時間，您可以執行以下語句將等待時間調整為`10s`。 ~~~ obclient> ALTER SYSTEM SET _restore_idle_time = '10s'; ~~~ 7. 根據現場需要，設置恢復的密碼。 ~~~ obclient> SET DECRYPTION IDENTIFIED BY 'password'; ~~~ 只有在備份時添加了密碼的場景下才需要設置恢復的密碼。同時如果全量備份+增量備份設置的密碼不一樣，則需要輸入多個密碼，密碼之間使用逗號分隔。示例如下： ~~~ obclient> SET DECRYPTION IDENTIFIED BY 'password1'，'password2'; ~~~ 8. 執行以下語句，開始執行恢復任務。 ~~~ obclient> ALTER SYSTEM RESTORE <dest_tenantname> FROM <source_tenantname> at 'uri' UNTIL 'timestamp' WITH 'restore_option'; ~~~ 部分參數說明如下表所示。 <table cols="2" id="table-6ly-tjy-v8h" class="table"><colgroup colname="col1" colnum="1" colwidth="2*" id="colgroup-dr9-hpw-1uq" style="width:40%"></colgroup><colgroup colname="col2" colnum="2" colwidth="3*" id="colgroup-2ki-mkd-jtj" style="width:60%"></colgroup><thead id="thead-ccy-uto-yf7" class="thead"><tr id="tr-wj7-dxf-4sm"><th id="td-cxm-ycf-jz4">參數</th><th id="td-dfl-c6i-rug">描述</th></tr></thead><tbody id="tbody-ydv-dhs-2mm" class="tbody"><tr id="tr-4vb-elx-4jr"><td id="td-x2p-ynl-5lb">dest_tenantname</td><td id="td-tcn-t20-lxe">指恢復的新租戶的名稱。</td></tr><tr id="tr-bcr-du6-58v"><td id="td-v9y-1i2-sth">source_tenantname</td><td id="td-jvf-t7q-bpr">指原集群的租戶。</td></tr><tr id="tr-6ij-1on-nun"><td namest="col1" nameend="col1" id="td-tf2-mfa-zx1">uri</td><td namest="col2" nameend="col2" id="td-c8k-p08-0yt">指備份時設置的 <code data-tag="code" class="code">backup_dest</code>。</td></tr><tr id="tr-z98-of5-ezf"><td namest="col1" nameend="col1" id="td-f2c-8k4-9f3">timestamp</td><td namest="col2" nameend="col2" morerows="0" id="td-ina-qpx-v0f">指恢復的時間戳，需要大于等于最早備份的數據備份的 <code data-tag="code" class="code">CDB_OB_BACKUP_SET_DETAILS </code>的<code data-tag="code" class="code">START_TIME</code>，小于等于日志備份 <code data-tag="code" class="code">CDB_OB_BACKUP_ARCHIVELOG_SUMMARY</code> 的 <code data-tag="code" class="code">MAX_NEXT_TIME</code>。</td></tr><tr id="tr-h5s-epj-prc"><td namest="col1" nameend="col1" id="td-8un-joy-bia">restore_option</td><td namest="col2" nameend="col2" id="td-bc2-3b5-mg5">支持 <code data-tag="code" class="code">backup_cluster_name</code>、<code data-tag="code" class="code">backup_cluster_id</code>、<code data-tag="code" class="code">pool_list</code>、<code data-tag="code" class="code">locality</code>、<code data-tag="code" class="code">kms_encrypt</code>：<ul id="ul-vx4-eu3-x02"><li id="li-kta-44h-kek"><code data-tag="code" class="code">backup_cluster_name</code> 為必選項，填寫源集群的名稱。</li><li id="li-wq7-c4o-9kh"><code data-tag="code" class="code">backup_cluster_id</code> 為必選項，填寫源集群的 <code data-tag="code" class="code">cluster_id</code>。</li><li id="li-msc-u4i-jcc"><code data-tag="code" class="code">pool_list</code> 為必選項，填寫用戶的資源池。</li><li id="li-ky0-zjz-tb7"><code data-tag="code" class="code">locality</code> 為可選項，填寫租戶的 Locality 信息。</li><li id="li-tdh-ex1-bw4"><code data-tag="code" class="code">kms_encrypt</code> 為可選項，為 <code data-tag="code" class="code">true</code> 則表示在恢復時需要使用步驟 4 指定的 <code data-tag="code" class="code">kms_encrypt_info</code>。</li></ul></td></tr></tbody></table> 1. 恢復示例： * NFS ~~~ obclient> ALTER SYSTEM RESTORE restored_trade FROM trade at 'file:///data/nfs/backup' until '2020-05-21 09:39:54.071670' with 'backup_cluster_name=ob20daily.backup&backup_cluster_id=1&pool_list=restore_pool; ~~~ * OSS ~~~ obclient> ALTER SYSTEM RESTORE restored_trade FROM trade at 'oss://antsys-oceanbasebackup/backup_rd/?host=cn-hangzhou-alipay-b.oss-cdn.aliyun-inc.com&access_id=xxx&access_key=xxx' until ' 2020-03-23 08:59:45' with 'backup_cluster_name=ob20daily.backup&backup_cluster_id=1&pool_list=restore_pool'; ~~~ * 騰訊云 COS ~~~ obclient> ALTER SYSTEM RESTORE restored_trade from trade at 'cos://backup-1304745170/backup_rd/20210127?host=cos.ap-nanjing.myqcloud.com&access_id=xxx&access_key=xxx&appid=xxx' until ' 2020-03-23 08:59:45' with 'backup_cluster_name=ob20daily.backup&backup_cluster_id=1&pool_list=restore_pool'; ~~~ 2. 執行以下語句，查看恢復進度。 * 查看系統表 Root Table： ~~~ obclient> SELECT svr_ip,role, is_restore, COUNT(*) FROM __all_root_table AS a, (SELECT value FROM __all_restore_info WHERE name='tenant_id') AS b WHERE a.tenant_id=b.value GROUP BY role, is_restore, svr_ip ORDER BY svr_ip, is_restore; ~~~ 其中，`is_restore`的取值含義如下： * 0：表示正常副本 * 1：表示邏輯恢復的副本 * 2：表示物理恢復需要恢復基線的副本 * 3：表示物理恢復需要恢復轉儲的副本 * 4：物理恢復需要恢復 clog 的副本 * 5：物理恢復需要轉儲的副本 * 6：物理恢復等待所有副本轉儲完成的副本 * 7：物理恢復設置 member list 的副本 `role`的取值含義如下： * 1：表示 Leader * 2：表示 Follower * 3：表示恢復中的 Leader * 查看用戶表 Meta Table： ~~~ obclient> SELECT svr_ip,role, is_restore, COUNT(*) FROM __all_virtual_meta_table AS a, (SELECT value FROM __all_restore_info WHERE name='tenant_id') AS b WHERE a.tenant_id=b.value GROUP BY role, is_restore, svr_ip ORDER BY svr_ip, is_restore; ~~~ 或者 ~~~ obclient> SELECT svr_ip ,is_restore, COUNT(*) FROM __all_virtual_partition_store_info WHERE tenant_id>1002 group by svr_ip,is_restore order by svr_ip, is_restore; ~~~ 3. 執行以下語句，查看恢復結果。 ~~~ obclient> SELECT * FROM __all_restore_info; ~~~ ~~~ obclient> SELECT * FROM __all_restore_history; ~~~