4. Fluent Bit 轻量采集：架构、对比与 DaemonSet 部署

Fluent Bit 是云原生生态中性能最突出的轻量级日志采集器，专为容器化与边缘场景设计。本章深入拆解其内部架构、与 Fluentd 的选型差异，以及如何在 Kubernetes 中以 DaemonSet 模式完成日志采集部署。

4.1 Fluent Bit 核心架构

Fluent Bit 采用插件化流水线架构，所有数据流经 Input → Parser → Filter → Buffer → Router → Output 六个阶段。每个阶段均可通过配置文件热插拔插件，实现极低资源占用下的高吞吐采集。

4.2 Fluent Bit vs Fluentd：选型对比

Fluent Bit 与 Fluentd 同属 Fluent 生态，但定位截然不同。Fluent Bit 主打轻量嵌入，Fluentd 侧重复杂路由与高可用集群。以下从 7 个维度进行对比：

4.3 Kubernetes DaemonSet 部署模式

在 Kubernetes 中，Fluent Bit 最推荐的部署模式是 DaemonSet：每个 Node 上运行一个 Fluent Bit Pod，采集该节点上所有容器的标准输出日志（stdout/stderr）。

部署流程分为三步：

1. 创建 ConfigMap：定义 Fluent Bit 主配置与解析规则。
2. 创建 DaemonSet：挂载宿主机日志目录与 ConfigMap。
3. 配置 RBAC：允许 Fluent Bit 通过 Kubernetes API 获取 Pod 元数据。

4.3.1 核心 ConfigMap 示例

apiVersion: v1
kind: ConfigMap
metadata:
  name: fluent-bit-config
  namespace: logging
data:
  fluent-bit.conf: |
    [SERVICE]
        Flush        1
        Log_Level    info
        Parsers_File parsers.conf

    [INPUT]
        Name              tail
        Path              /var/log/containers/*.log
        Parser            docker
        Tag               kube.<namespace_name>.<pod_name>.<container_name>
        Mem_Buf_Limit     5MB
        Skip_Long_Lines   On

    [FILTER]
        Name                kubernetes
        Match               kube.*
        Kube_URL            https://kubernetes.default.svc:443
        Kube_Tag_Prefix     kube.
        Merge_Log           On
        Merge_Log_Key       log_parsed
        K8S-Logging.Parser  On

    [OUTPUT]
        Name            es
        Match           *
        Host            elasticsearch.logging.svc.cluster.local
        Port            9200
        Logstash_Format On
        Retry_Limit     False

  parsers.conf: |
    [PARSER]
        Name        docker
        Format      json
        Time_Key    time
        Time_Format %Y-%m-%dT%H:%M:%S.%L

4.3.2 DaemonSet 部署清单

apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: fluent-bit
  namespace: logging
  labels:
    app: fluent-bit
spec:
  selector:
    matchLabels:
      app: fluent-bit
  template:
    metadata:
      labels:
        app: fluent-bit
    spec:
      serviceAccountName: fluent-bit
      containers:
      - name: fluent-bit
        image: cr.fluentbit.io/fluent/fluent-bit:2.1.10
        volumeMounts:
        - name: varlog
          mountPath: /var/log
        - name: varlibdockercontainers
          mountPath: /var/lib/docker/containers
          readOnly: true
        - name: fluent-bit-config
          mountPath: /fluent-bit/etc/
      volumes:
      - name: varlog
        hostPath:
          path: /var/log
      - name: varlibdockercontainers
        hostPath:
          path: /var/lib/docker/containers
      - name: fluent-bit-config
        configMap:
          name: fluent-bit-config

4.4 生产部署关键参数

以下参数直接影响采集稳定性与资源开销，建议在部署前逐项确认：