INTERSECT · k8s原理與實踐

[TOC] # INTERSECT INTERSECT 算子用于對左右孩子算子輸出進行交集運算，并進行去重。 OceanBase 數據庫支持的 INTERSECT 算子包括 MERGE INTERSECT DISTINCT 和 HASH INTERSECT DISTINCT。 ## MERGE INTERSECT DISTINCT 如下示例中，Q1 對兩個查詢使用 INTERSECT 聯接，c1 有可用排序，0 號算子生成了 MERGE INTERSECT DISTINCT 進行求取交集、去重。由于 c2 無可用排序，所以在 3 號算子上分配了 SORT 算子進行排序。算子執行時從左右子節點讀取有序輸入，利用有序輸入進行 MERGE，實現去重并得到交集結果。 ~~~ obclient>CREATE TABLE t1(c1 INT PRIMARY KEY, c2 INT); Query OK, 0 rows affected (0.12 sec) obclient>INSERT INTO t1 VALUES(1,1); Query OK, 1 rows affected (0.12 sec) obclient>INSERT INTO t1 VALUES(2,2); Query OK, 1 rows affected (0.12 sec) Q1: obclient>EXPLAIN SELECT c1 FROM t1 INTERSECT SELECT c2 FROM t1\G; *************************** 1. row *************************** Query Plan: ================================================= |ID|OPERATOR |NAME|EST. ROWS|COST| ------------------------------------------------- |0 |MERGE INTERSECT DISTINCT| |2 |77 | |1 | TABLE SCAN |T1 |2 |37 | |2 | SORT | |2 |39 | |3 | TABLE SCAN |T1 |2 |37 | ================================================= Outputs & filters: ------------------------------------- 0 - output([INTERSECT(T1.C1, T1.C2)]), filter(nil) 1 - output([T1.C1]), filter(nil), access([T1.C1]), partitions(p0) 2 - output([T1.C2]), filter(nil), sort_keys([T1.C2, ASC]) 3 - output([T1.C2]), filter(nil), access([T1.C2]), partitions(p0) ~~~ 上述示例中，執行計劃展示中的 outputs & filters 詳細列出了所有 INTERSECT 算子的輸出信息如下： <table data-tag="table" id="table-wru-g7l-tvj" class="table"><colgroup span="1" width="139" data-tag="col" id="col-8o9-opb-dr0" colwidth="1*" colnum="1" colname="col1" style="width:50%" class="col"></colgroup><colgroup span="1" width="609" data-tag="col" id="col-cin-b32-gfz" colwidth="1*" colnum="2" colname="col2" style="width:50%" class="col"></colgroup><thead id="thead-rhu-v8c-u9y" class="thead"><tr id="tr-o01-zem-u8v"><th id="td-8vj-u6h-4hd"><p id="p-pia-ebo-beh"><b>信息名稱</b></p></th><th id="td-rd0-8w2-4c2"><p id="p-cnp-wue-har"><b>含義</b></p></th></tr></thead><tbody data-tag="tbody" id="tbody-k74-vgb-j0u" class="tbody"><tr data-tag="tr" id="tr-k4e-a3d-tz5" class="tr"><td data-tag="td" id="td-g0t-mtw-wvi" class="td"><p id="p-04x-c0x-nfk">output</p></td><td data-tag="td" id="td-vuf-3m2-055" class="td"><p id="p-njy-6jy-xtr">該算子的輸出表達式。</p><p id="p-xnh-9yq-gii">使用 INTERSECT 聯接的兩個子算子對應輸出，即表示交集運算輸出結果中的一列，括號內部為左右子節點對應此列的輸出列。</p></td></tr><tr data-tag="tr" id="tr-i31-32i-k07" class="tr"><td data-tag="td" id="td-844-1kv-kpa" class="td"><p id="p-pti-9gg-c1j">filter</p></td><td data-tag="td" id="td-tg2-zlh-try" class="td"><p id="p-z2n-n5m-5pv">該算子上的過濾條件。</p><p id="p-vrd-nhg-kqe">由于示例中 INTERSECT 算子沒有設置 filter，所以為 nil。</p></td></tr></tbody></table> ## HASH INTERSECT DISTINCT 如下例所示，Q2 對兩個查詢使用 INTERSECT 進行聯接，不可利用排序，0 號算子使用 HASH INTERSECT DISTINCT 進行求取交集、去重。算子執行時先讀取一側子節點輸出建立哈希表并去重，再讀取另一側子節點利用哈希表求取交集并去重。 ~~~ Q2: obclient>EXPLAIN SELECT c2 FROM t1 INTERSECT SELECT c2 FROM t1\G; *************************** 1. row *************************** Query Plan: ================================================ |ID|OPERATOR |NAME|EST. ROWS|COST| ------------------------------------------------ |0 |HASH INTERSECT DISTINCT| |2 |77 | |1 | TABLE SCAN |T1 |2 |37 | |2 | TABLE SCAN |T1 |2 |37 | ================================================ Outputs & filters: ------------------------------------- 0 - output([INTERSECT(T1.C2, T1.C2)]), filter(nil) 1 - output([T1.C2]), filter(nil), access([T1.C2]), partitions(p0) 2 - output([T1.C2]), filter(nil), access([T1.C2]), partitions(p0) ~~~ 上述示例的執行計劃展示中的 outputs & filters 詳細列出了 HASH INTERSECT DISTINCT 算子的輸出信息，字段的含義與 MERGE INTERSECT DISTINCT 算子相同。