资源配额基础：Requests 与 Limits 的概念及 Prometheus 组件配额设置

在 Kubernetes 中运行 Prometheus 时，资源配额是保障集群稳定性和服务质量的基石。理解 Requests（请求） 与 Limits（限制） 的差异，并正确为 Prometheus 各组件设置 CPU 和内存配额，是避免资源争抢、防止 OOMKill 和提升调度效率的关键。

Requests 与 Limits 核心概念

Kubernetes 通过两个维度管理容器资源：

• Requests：容器启动时向集群保证的最小资源量。调度器依据 Requests 选择满足条件的节点，并确保容器至少能获得该资源量。
• Limits：容器运行时允许使用的资源上限。当容器尝试超过 Limits 时，CPU 会被限流（Throttling），内存则可能触发 OOMKill。

Requests 与 Limits 的调度与运行机制

下图展示了 Requests 和 Limits 在调度阶段与运行阶段的作用路径：

Prometheus 组件资源特征分析

Prometheus 生态包含多个组件，每个组件的资源消耗模式不同：

为 Prometheus 组件设置 CPU 和内存配额

以下示例展示如何在 Prometheus StatefulSet 中配置资源配额：

apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: prometheus-server
  namespace: monitoring
spec:
  replicas: 1
  selector:
    matchLabels:
      app: prometheus
  template:
    metadata:
      labels:
        app: prometheus
    spec:
      containers:
      - name: prometheus
        image: prom/prometheus:v2.53.0
        args:
          - "--config.file=/etc/prometheus/prometheus.yml"
          - "--storage.tsdb.path=/prometheus"
          - "--storage.tsdb.retention.time=15d"
        resources:
          requests:
            memory: "4Gi"
            cpu: "2"
          limits:
            memory: "6Gi"
            cpu: "4"
        ports:
        - containerPort: 9090
          name: http
        volumeMounts:
        - name: prometheus-data
          mountPath: /prometheus
        - name: config-volume
          mountPath: /etc/prometheus
      volumes:
      - name: prometheus-data
        persistentVolumeClaim:
          claimName: prometheus-data-pvc
      - name: config-volume
        configMap:
          name: prometheus-config

组件配额推荐参考表

以下为中小规模集群（约 500 节点、50 万活跃序列）的推荐初始值：

配额设置常见陷阱与避坑指南

• 陷阱 1：Requests 设置过高 → 导致节点资源碎片化，Pod 无法调度。解决方案：使用 requests = 实际稳态使用量 × 1.2。
• 陷阱 2：Limits 未设置或过大 → 内存泄漏时影响同节点其他 Pod。解决方案：始终设置 Limits，且不超过节点内存的 60%。
• 陷阱 3：CPU Limits 过小 → 查询高峰期出现 CPU Throttling，导致查询超时。解决方案：监控 container_cpu_cfs_throttled_seconds_total 指标。
• 陷阱 4：所有组件使用相同配额 → 浪费资源或导致瓶颈。解决方案：按组件特征差异化配置。

验证配额生效的方法

部署后可通过以下命令验证配额是否生效：

# 查看 Pod 实际资源使用
kubectl top pod prometheus-server-0 -n monitoring

# 查看 cgroup 限制是否生效（需进入容器）
kubectl exec -it prometheus-server-0 -n monitoring -- cat /sys/fs/cgroup/memory/memory.limit_in_bytes

# 监控 CPU Throttling
kubectl exec -it prometheus-server-0 -n monitoring -- cat /sys/fs/cgroup/cpu/cpu.stat | grep throttled