VIP20

本课程属于：033-Prometheus误差预算 DevOps、SRE 与可观测性工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

误差预算台账数据不准Prometheus采集链路排查

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

误差预算台账概述

什么是误差预算 · 台账在SRE中的角色 · 数据不准的典型表现

误差预算台账概述什么是误差预算

Prometheus采集链路全景

从Exporter到Alertman… · 各环节关键组件

Prometheus采集链路全景

Exporter端排查

Exporter指标暴露格式验证 · metrics端点健康检查 · 常见Exporter配置错误

Exporter端排查

ServiceMonitor与PodMonitor配置

标签匹配规则 · 命名空间选择 · 端口与路径配置错误排查

ServiceMonit…PodMonitor

Prometheus服务发现机制

基于Kubernetes的服务发现 · relabel_configs常见陷… · target丢失原因分析

Prometheus服务发现机制

采集目标状态分析

UP/DOWN状态解读 · scrape_duration_se… · scrape_samples_scr…

采集目标状态分析UP/DOWN

采集超时与重试机制

scrape_timeout配置 · scrape_interval与sc… · 超时导致数据缺失

采集超时重试机制

指标命名与标签规范化

指标命名冲突 · 标签基数爆炸 · __name__与job标签问题

指标命名标签规范化

数据存储与压缩

Prometheus本地存储架构 · WAL与TSDB块 · 数据保留策略对台账的影响

数据存储压缩

远程写入与数据丢失

remote_write配置 · 队列参数调优 · 写入失败重试与数据丢失排查

远程写入数据丢失

PromQL查询准确性

查询时间范围 · rate与increase函数陷阱 · counter重置问题

PromQL查询准确性

Recording Rules与台账

预聚合规则配置错误 · 规则评估周期 · 规则结果与原始数据不一致

Alerting Rules与误差告警

告警规则表达式错误 · for持续时间 · 告警沉默与数据不准的关系

Grafana面板数据不一致

数据源配置 · 时间范围对齐 · 面板查询与原始PromQL差异

Grafana面板数据不一致

多Prometheus实例数据合并

联邦集群配置 · 数据重复与去重 · 全局视图与局部台账差异

Prometheus实例数据合并

Thanos与长期存储

Thanos Sidecar · Store Gateway · 数据压缩与查询延迟对台账影响

Thanos长期存储

Cortex与Mimir多租户

租户隔离 · 数据分片 · 查询路由错误导致台账不准

日志与事件关联

Prometheus自身日志分析 · scrape错误日志 · WAL损坏日志

日志事件关联

网络与DNS问题

Exporter可达性 · DNS解析失败 · 网络延迟导致采集超时

证书与认证问题

HTTPS Exporter证书过期 · Bearer 失效 · mTLS配置错误

证书认证问题

资源限制与OOM

Prometheus内存与CPU限制 · OOM导致采集中断 · 资源配额检查

OOM资源限制

时间同步问题

NTP偏移 · 时间戳错误 · 数据点时间戳混乱导致台账计算错误

时间同步问题NTP

数据重复与去重

多Prometheus实例重复采集 · Thanos dedup机制 · 重复数据对误差预算影响

数据重复去重

数据缺失与补点

采集间隙 · 数据点稀疏 · 插值策略对SLI计算的影响

数据缺失补点

误差预算计算模型

SLI定义 · SLO阈值 · 错误率计算

误差预算计算模型SLI

台账数据校验方法

原始数据与台账数据对比 · 自动化校验脚本 · 数据一致性检查

台账数据校验方法原始数据

链路追踪工具

Prometheus自监控指标 · pprof性能分析 · trace与span关联

链路追踪工具Prometheus

常见故障模式与案例

Exporter重启 · 配置热加载失败 · 存储损坏恢复

常见故障模式案例

自动化排查脚本

Python脚本批量检查target… · PromQL异常检测 · 告警规则验证

自动化排查脚本Python

最佳实践与预防

采集链路健康检查 · 台账数据质量监控 · 定期审计与演练

最佳实践预防