## 切到容器文件系統目錄 ``` cd /var/lib/docker/overlay2/ ``` ## 查找磁盤占用量大的容器目錄 ``` du -sh * | grep G 1.2G 95ea9025f6723e783be5691ca26fbd849e6747870c64cacd53db4b2c3c8e4646 61G b9249ef4c19bb13e6b8a0152d13c94e4958f6609b326ae66f949093419b5df1b ``` ## 看一下里面都是什么文件 ``` ls -lh b9249ef4c19bb13e6b8a0152d13c94e4958f6609b326ae66f949093419b5df1b total 61.2G -rw------- 1 root root 44M Nov 12 23:07 core.988 -rw------- 1 root root 44M Nov 12 23:07 core.991 -rw------- 1 root root 38M Nov 12 23:07 core.994 -rw------- 1 root root 44M Nov 12 23:07 core.997 …… ``` **大量的core Dump文件，說明應用有問題，但不知道因為什么，先復制一下最新的幾個到備份目錄，后續準備拿來分析** ## 查找該目錄被那個容器使用 ``` docker ps -q | xargs docker inspect --format '{{.State.Pid}}, {{.Name}}, {{.GraphDriver.Data.WorkDir}}'| grep "b9249ef4c19bb13e6b8a0152d13c94e4958f6609b326ae66f949093419b5df1b" 50882, /k8s_fluent-bit_fluent-bit-bj4r5_kubesphere-logging-system_19be828e-d484-456f-b594-9bce78c3f235_1, /var/lib/docker/overlay2/b9249ef4c19bb13e6b8a0152d13c94e4958f6609b326ae66f949093419b5df1b/work ``` 上方標紅的那一段是容器名，這個容器是k8s向es發送日志用的，DaemonSet類型，不影響業務，可以操作 ## 先停止容器 ``` docker stop k8s_fluent-bit_fluent-bit-bj4r5_kubesphere-logging-system_19be828e-d484-456f-b594-9bce78c3f235_1 ``` ## 再刪除容器 ``` docker rm k8s_fluent-bit_fluent-bit-bj4r5_kubesphere-logging-system_19be828e-d484-456f-b594-9bce78c3f235_1 ``` 注意：**一定要先停止，再刪除，不要restart重啟，因為重啟不會釋放磁盤空間** `由于是DaemonSet控制器管理的容器，刪除后應該會自動重建，檢查一下` ``` docker ps | grep fluent-bit ``` ``` 7515e36a77c2 4963c2c07dd7 "/fluent-bit/bin/flu…" 10 seconds ago Up 10 seconds k8s_fluent-bit_fluent-bit-bj4r5_kubesphere-logging-system_19be828e-d484-456f-b594-9bce78c3f235_2 ``` 能看到新的容器已經啟動 ## 此時再檢查下磁盤占用 ``` du -sh * | grep G 1.2G 95ea9025f6723e783be5691ca26fbd849e6747870c64cacd53db4b2c3c8e4646 # 能看到61G的那個目錄已經刪除了 ```