## 日志與監控 Mesos 自身提供了強大的日志和監控功能，某些應用框架也提供了針對框架中任務的監控能力。通過這些接口，用戶可以實時獲知集群的各種狀態。 ### 日志配置 日志文件默認在 `/var/log/mesos` 目錄下，根據日志等級帶有不同后綴。 用戶可以通過日志來調試使用中碰到的問題。 一般的，推薦使用 `--log_dir` 選項來指定日志存放路徑，并通過日志分析引擎來進行監控。 ### 監控 Mesos 提供了方便的監控接口，供用戶查看集群中各個節點的狀態。 #### 主節點 通過 `http://MASTER_NODE:5050/metrics/snapshot` 地址可以獲取到 Mesos 主節點的各種狀態統計信息，包括資源（CPU、硬盤、內存）使用、系統狀態、從節點、應用框架、任務狀態等。 例如查看主節點 `10.0.0.2` 的狀態信息，并用 jq 來解析返回的 json 對象。 ```sh $ curl -s http://10.0.0.2:5050/metrics/snapshot |jq . { "system/mem_total_bytes": 4144713728, "system/mem_free_bytes": 153071616, "system/load_5min": 0.37, "system/load_1min": 0.6, "system/load_15min": 0.29, "system/cpus_total": 4, "registrar/state_store_ms/p9999": 45.4096616192, "registrar/state_store_ms/p999": 45.399272192, "registrar/state_store_ms/p99": 45.29537792, "registrar/state_store_ms/p95": 44.8336256, "registrar/state_store_ms/p90": 44.2564352, "registrar/state_store_ms/p50": 34.362368, ... "master/recovery_slave_removals": 1, "master/slave_registrations": 0, "master/slave_removals": 0, "master/slave_removals/reason_registered": 0, "master/slave_removals/reason_unhealthy": 0, "master/slave_removals/reason_unregistered": 0, "master/slave_reregistrations": 2, "master/slave_shutdowns_canceled": 0, "master/slave_shutdowns_completed": 1, "master/slave_shutdowns_scheduled": 1 } ``` #### 從節點 通過 `http://SLAVE_NODE:5051/metrics/snapshot` 地址可以獲取到 Mesos 從節點的各種狀態統計信息，包括資源、系統狀態、各種消息狀態等。 例如查看從節點 `10.0.0.10` 的狀態信息。 ```sh $ curl -s http://10.0.0.10:5051/metrics/snapshot |jq . { "system/mem_total_bytes": 16827785216, "system/mem_free_bytes": 3377315840, "system/load_5min": 0.11, "system/load_1min": 0.16, "system/load_15min": 0.13, "system/cpus_total": 8, "slave/valid_status_updates": 11, "slave/valid_framework_messages": 0, "slave/uptime_secs": 954125.458927872, "slave/tasks_starting": 0, "slave/tasks_staging": 0, "slave/tasks_running": 1, "slave/tasks_lost": 0, "slave/tasks_killed": 2, "slave/tasks_finished": 0, "slave/executors_preempted": 0, "slave/executor_directory_max_allowed_age_secs": 403050.709525191, "slave/disk_used": 0, "slave/disk_total": 88929, "slave/disk_revocable_used": 0, "slave/disk_revocable_total": 0, "slave/disk_revocable_percent": 0, "slave/disk_percent": 0, "containerizer/mesos/container_destroy_errors": 0, "slave/container_launch_errors": 6, "slave/cpus_percent": 0.025, "slave/cpus_revocable_percent": 0, "slave/cpus_revocable_total": 0, "slave/cpus_revocable_used": 0, "slave/cpus_total": 8, "slave/cpus_used": 0.2, "slave/executors_registering": 0, "slave/executors_running": 1, "slave/executors_terminated": 8, "slave/executors_terminating": 0, "slave/frameworks_active": 1, "slave/invalid_framework_messages": 0, "slave/invalid_status_updates": 0, "slave/mem_percent": 0.00279552715654952, "slave/mem_revocable_percent": 0, "slave/mem_revocable_total": 0, "slave/mem_revocable_used": 0, "slave/mem_total": 15024, "slave/mem_used": 42, "slave/recovery_errors": 0, "slave/registered": 1, "slave/tasks_failed": 6 } ``` 另外，通過 `http://MASTER_NODE:5050/monitor/statistics.json` 地址可以看到該從節點上容器網絡相關的統計數據，包括進出流量、丟包數、隊列情況等。獲取方法同上，在此不再演示。