最近在 Jenkins 中执行 Docker 多阶段构建镜像时，发现在构建镜像阶段经常弹出 layer does not exist 错误，这里对该问题进行分析并解决，并记录下这个过程。

cAdvisor 是 Google 推出的容器监控工具，专门用于收集容器的运行信息。而 KubeStateMetrics 则是用于监听 Kubernetes 服务资源的工具，用于关注集群内部各种资源对象的运行状态。俩个组件结合使用来监控 Kubernetes 集群，能达到很好的监控效果。这里将演示如何使用这俩个工具来监控 Kubernetes 集群服务，并记录这个过程。

Node Exporter 是 Prometheus 官方提供的一个节点资源采集组件，可以用于收集服务器节点的数据，如 CPU 频率信息、磁盘 IO 统计、剩余可用内存等等。Prometheus 可以从 Node Exporter 对这些指标进行收集与存储，并且可以根据这些数据的实时变化进行服务器节点资源监控，这里介绍下如何在 Kubernetes 环境中部署 Node Exporter 组件与 Prometheus 结合监控 Kubernetes 集群中的全部节点。

Grafana 是一个开源的度量分析与可视化工具。该工具提供查询、可视化、报警和指标展示等功能，能灵活创建图表、仪表盘等可视化界面。我们在监控系统中会经常部署该工具，将采集到的监控到的数据指标转换为图形形式进行展示。所以，这里记录一下 Kubernetes 下部署 Grafana 的过程。

Prometheus 是一个业界流行的监控与告警系统，且也是 CNCF 基金会的毕业项目，在云原生的模式下使用 Prometheus 作为监控工具是非常方便与高效的，这里我们在 Kubernetes 下部署一下这个应用。