# OpenEBS
[OpenEBS](https://github.com/openebs/openebs)是一款使用Go語言編寫的基于容器的塊存儲開源軟件。OpenEBS使得在容器中運行關鍵性任務和需要數據持久化的負載變得更可靠。
OpenEBS由[CloudByte](http://www.cloudbyte.com/)研發,這是一家專業做容器化存儲的公司,OpenEBS是其一款開源產品,CloudByte將其在企業級容器存儲的經驗付諸到該項目中。這個項目的愿景也很簡單,就是讓需要持久化存儲的工作負載中的存儲服務能夠直接集成在環境中,存儲服務可以自動管理,將存儲的細節隱藏起來,就像存儲系統是另一套基礎架構一樣。
我們知道AWS中提供了[EBS](https://amazonaws-china.com/cn/ebs/)(Elastic Block Storage),適用于 Amazon EC2 的持久性塊存儲,可以滿足要求最苛刻的應用程序在功能和性能方面的要求,OpenEBS即其開源實現。
## 簡介
使用OpenEBS,你可以將有持久化數據的容器,像對待其他普通容器一樣來對待。OpenEBS本身也是通過容器來部署的,支持Kubernetes、Swarm、Mesos、Rancher編排調度,存儲服務可以分派給每個pod、應用程序、集群或者容器級別,包括:
- 跨節點的數據持久化
- 跨可用區和云廠商的數據同步
- 使用商業硬件和容器引擎來提供高可擴展的塊存儲
- 與容器編排引擎集成,開發者的應用程序可以自動的配置OpenEBS
- 基于CloudByte在BSD的容器化經驗,為用戶提供OpenEBS的QoS保證
## 架構
OpenEBS存儲控制器本身就運行在容器中。OpenEBS Volume由一個或多個以微服務方式運行的容器組成。這種存儲控制器功能基于微服務架構——每個卷的數據由其自己的一組容器來提供,而不是由一個統一的同時為多個卷提供控制的,單體(monolithic)存儲控制器來提供。這就是OpenEBS與傳統存儲設備的本質區別。
OpenEBS的架構可以分為數據平面(Data Plane)和控制平面(Control Plane)兩部分:
- 數據平面:為應用程序提供數據存儲
- 控制平面:管理OpenEBS卷容器,這通常會用到容器編排軟件的功能
### 數據平面
下圖是OpenEBS對應在Kubernetes集群上部署的架構圖。其中,黃色部分是OpenEBS持久化存儲卷,通過Kubernetes的PV來創建,使用iSCSI來實現,數據保存在node節點上或者云中的卷(如EBS、GPD等),這取決于您的集群部署在哪里。OpenEBS的卷完全獨立于用戶的應用的生命周期來管理,這也是Kuberentes中的PV的基本思路。

OpenEBS卷為容器提供持久化存儲,具有針對系統故障的彈性,更快地訪問存儲,快照和備份功能。此外,它還提供了監控使用情況和執行QoS策略的機制。
存儲數據的磁盤稱為存儲后端,可以是主機目錄,附加塊設備或遠程磁盤。每個OpenEBS卷包含一個iSCSI目標容器(在上圖中表示為openebs-vol1)和一個或多個副本容器(openebs-vol1-R1和openebs-vol1-R2)。
應用程序pod通過iSCSI目標容器訪問存儲,iSCSI目標容器將數據復制到其所有副本。在發生節點故障時,iSCSI目標容器將從剩余的其中一個在線節點上啟動,并通過連接到可用副本容器來提供數據。
**源碼**
該部分的實現包括兩個容器:
- [openebs/jiva](https://github.com/openebs/jiva):存儲控制功能,包括復制邏輯
- [openebs/gotgt](https://github.com/openebs/gotgt):由openebs/jiva使用的iSCSI目標功能
### 控制平面
OpenEBS控制平面又叫做存儲編排或maya。目的是為了創建超融合的OpenEBS,將其掛載到如Kubernetes、Swarm、Nomad等容器編排調度引擎上,用來擴展特定的容器編排系統提供的存儲功能。

OpenEBS的控制平面也是基于微服務的,它的服務可以分成以下幾個部分:
- 容器編排插件,用于增加強容器編排框架的功能:
- **Kubernetes動態配置**:[openebs-provisioner](https://github.com/openebs/external-storage/tree/master/openebs)
- **Kubernetes-dashboard**:[openebs-dashboard](https://github.com/openebs/dashboard)
- **擴展的schema**:基于Kubernetes的CRD(自定義資源類型),存儲OpenEBS相關的配置數據
- 集群服務,提供OpenEBS特定的存儲智能,如:
- **maya-apiserver**:包含執行卷操作的API,可將請求轉換為容器編排系統特定的操作
- **maya-mulebot**:使用收集的信息來建議優化的布局和事件處理提示
- **maya-connect**:允許將監控數據上傳到`maya-cloud`,以便進一步進行存儲訪問模式分析
- 節點服務,提供OpenEBS特定的隨kubelet一起運行的存儲智能,如:
- **maya-agent**:包括存儲管理功能
通過使用prometheus、heapster、grafana和jaegar進行上述服務,可以添加監控和跟蹤功能。
**源碼**
- [openebs/maya](https://github.com/openebs/maya):所有特定的二進制代碼(非插件)都存儲在這個倉庫中,比如`maya-apiserver`、`maya-agent`、`maya-mulebot`、`maya-connect`、`mayactl`等等。
- [openebs-dashboard](https://github.com/openebs/dashboard):kubernetes-dashboard項目的分支,擴展了存儲功能。
- [openebs-provisioner](https://github.com/openebs/external-storage/tree/master/openebs):來自Kubernetes孵化器項目的OpenEBS K8s Provisioner。
## 參考
- https://www.openebs.io/
- https://github.com/openebs/openebs
- [Data Scientists adopting tools and solutions that allow them to focus more on Data Science and less on the infrastructure around them](https://blog.openebs.io/data-scientists-adopting-tools-and-solutions-that-allow-them-to-focus-more-on-data-science-and-less-db9654063bd5)
- 序言
- 云原生
- 云原生(Cloud Native)的定義
- CNCF - 云原生計算基金會簡介
- CNCF章程
- 云原生的設計哲學
- Play with Kubernetes
- 快速部署一個云原生本地實驗環境
- Kubernetes與云原生應用概覽
- 云原生應用之路——從Kubernetes到Cloud Native
- 云原生編程語言
- 云原生編程語言Ballerina
- 云原生編程語言Pulumi
- 云原生的未來
- Kubernetes架構
- 設計理念
- Etcd解析
- 開放接口
- CRI - Container Runtime Interface(容器運行時接口)
- CNI - Container Network Interface(容器網絡接口)
- CSI - Container Storage Interface(容器存儲接口)
- Kubernetes中的網絡
- Kubernetes中的網絡解析——以flannel為例
- Kubernetes中的網絡解析——以calico為例
- 具備API感知的網絡和安全性管理開源軟件Cilium
- Cilium架構設計與概念解析
- 資源對象與基本概念解析
- Pod狀態與生命周期管理
- Pod概覽
- Pod解析
- Init容器
- Pause容器
- Pod安全策略
- Pod的生命周期
- Pod Hook
- Pod Preset
- Pod中斷與PDB(Pod中斷預算)
- 集群資源管理
- Node
- Namespace
- Label
- Annotation
- Taint和Toleration(污點和容忍)
- 垃圾收集
- 控制器
- Deployment
- StatefulSet
- DaemonSet
- ReplicationController和ReplicaSet
- Job
- CronJob
- Horizontal Pod Autoscaling
- 自定義指標HPA
- 準入控制器(Admission Controller)
- 服務發現
- Service
- Ingress
- Traefik Ingress Controller
- 身份與權限控制
- ServiceAccount
- RBAC——基于角色的訪問控制
- NetworkPolicy
- 存儲
- Secret
- ConfigMap
- ConfigMap的熱更新
- Volume
- Persistent Volume(持久化卷)
- Storage Class
- 本地持久化存儲
- 集群擴展
- 使用自定義資源擴展API
- 使用CRD擴展Kubernetes API
- Aggregated API Server
- APIService
- Service Catalog
- 資源調度
- QoS(服務質量等級)
- 用戶指南
- 資源對象配置
- 配置Pod的liveness和readiness探針
- 配置Pod的Service Account
- Secret配置
- 管理namespace中的資源配額
- 命令使用
- Docker用戶過度到kubectl命令行指南
- kubectl命令概覽
- kubectl命令技巧大全
- 使用etcdctl訪問kubernetes數據
- 集群安全性管理
- 管理集群中的TLS
- kubelet的認證授權
- TLS bootstrap
- 創建用戶認證授權的kubeconfig文件
- IP偽裝代理
- 使用kubeconfig或token進行用戶身份認證
- Kubernetes中的用戶與身份認證授權
- Kubernetes集群安全性配置最佳實踐
- 訪問Kubernetes集群
- 訪問集群
- 使用kubeconfig文件配置跨集群認證
- 通過端口轉發訪問集群中的應用程序
- 使用service訪問群集中的應用程序
- 從外部訪問Kubernetes中的Pod
- Cabin - Kubernetes手機客戶端
- Kubernetic - Kubernetes桌面客戶端
- Kubernator - 更底層的Kubernetes UI
- 在Kubernetes中開發部署應用
- 適用于kubernetes的應用開發部署流程
- 遷移傳統應用到Kubernetes中——以Hadoop YARN為例
- 最佳實踐概覽
- 在CentOS上部署Kubernetes集群
- 創建TLS證書和秘鑰
- 創建kubeconfig文件
- 創建高可用etcd集群
- 安裝kubectl命令行工具
- 部署master節點
- 安裝flannel網絡插件
- 部署node節點
- 安裝kubedns插件
- 安裝dashboard插件
- 安裝heapster插件
- 安裝EFK插件
- 生產級的Kubernetes簡化管理工具kubeadm
- 使用kubeadm在Ubuntu Server 16.04上快速構建測試集群
- 服務發現與負載均衡
- 安裝Traefik ingress
- 分布式負載測試
- 網絡和集群性能測試
- 邊緣節點配置
- 安裝Nginx ingress
- 安裝配置DNS
- 安裝配置Kube-dns
- 安裝配置CoreDNS
- 運維管理
- Master節點高可用
- 服務滾動升級
- 應用日志收集
- 配置最佳實踐
- 集群及應用監控
- 數據持久化問題
- 管理容器的計算資源
- 集群聯邦
- 存儲管理
- GlusterFS
- 使用GlusterFS做持久化存儲
- 使用Heketi作為Kubernetes的持久存儲GlusterFS的external provisioner
- 在OpenShift中使用GlusterFS做持久化存儲
- GlusterD-2.0
- Ceph
- 用Helm托管安裝Ceph集群并提供后端存儲
- 使用Ceph做持久化存儲
- 使用rbd-provisioner提供rbd持久化存儲
- OpenEBS
- 使用OpenEBS做持久化存儲
- Rook
- NFS
- 利用NFS動態提供Kubernetes后端存儲卷
- 集群與應用監控
- Heapster
- 使用Heapster獲取集群和對象的metric數據
- Prometheus
- 使用Prometheus監控kubernetes集群
- Prometheus查詢語言PromQL使用說明
- 使用Vistio監控Istio服務網格中的流量
- 分布式跟蹤
- OpenTracing
- 服務編排管理
- 使用Helm管理Kubernetes應用
- 構建私有Chart倉庫
- 持續集成與發布
- 使用Jenkins進行持續集成與發布
- 使用Drone進行持續集成與發布
- 更新與升級
- 手動升級Kubernetes集群
- 升級dashboard
- 領域應用概覽
- 微服務架構
- 微服務中的服務發現
- 使用Java構建微服務并發布到Kubernetes平臺
- Spring Boot快速開始指南
- Service Mesh 服務網格
- 企業級服務網格架構
- Service Mesh基礎
- Service Mesh技術對比
- 采納和演進
- 定制和集成
- 總結
- Istio
- 安裝并試用Istio service mesh
- 配置請求的路由規則
- 安裝和拓展Istio service mesh
- 集成虛擬機
- Istio中sidecar的注入規范及示例
- 如何參與Istio社區及注意事項
- Istio教程
- Istio免費學習資源匯總
- 深入理解Istio Service Mesh中的Envoy Sidecar注入與流量劫持
- 深入理解Istio Service Mesh中的Envoy Sidecar代理的路由轉發
- Linkerd
- Linkerd 使用指南
- Conduit
- Condiut概覽
- 安裝Conduit
- Envoy
- Envoy的架構與基本術語
- Envoy作為前端代理
- Envoy mesh教程
- SOFAMesh
- SOFAMesh中的Dubbo on x-protocol
- SOFAMosn
- 使用 SOFAMosn 構建 SOFAMesh
- 大數據
- Spark standalone on Kubernetes
- 運行支持Kubernetes原生調度的Spark程序
- Serverless架構
- 理解Serverless
- FaaS-函數即服務
- OpenFaaS快速入門指南
- 邊緣計算
- 人工智能