1. 课程导论：Android相机架构全景概览
Android相机系统是一个从应用层到硬件层的多层软件栈。理解完整的预览数据流路径，是优化Surface绑定效率、降低延迟、提升帧率的基础。本章将为你绘制一张全景架构图，并逐层拆解关键组件与数据流动方向。
1.1 四层架构模型
Android相机预览数据流贯穿以下四个层级，每一层都承担着特定的职责与转换任务：
| 层级 | 核心组件 | 主要职责 |
|---|---|---|
| App层 | Camera2 API / CameraX | 发起预览请求、配置Surface、接收帧回调 |
| Framework层 | CameraService / CameraDeviceClient | 管理会话、协调流配置、分发CaptureRequest |
| HAL层 | Camera HAL 3.x / 4.x | 驱动传感器、处理3A、输出YUV/RAW/BLOB帧 |
| Kernel层 | V4L2 / ISP驱动 / DMA-BUF | 硬件寄存器控制、帧缓冲区分配与同步 |
关键认知：预览数据流并非简单的“App→HAL”单向传递。每一层都包含缓冲区管理、同步信号和回调机制，Surface正是连接这些层的核心抽象。
1.2 完整数据流路径：从App到HAL
一次典型的相机预览请求，数据从App发起请求到HAL返回帧，经历以下7个关键步骤：
- App创建CaptureRequest：通过Camera2 API构建请求，指定目标Surface（如TextureView、ImageReader）。
- CameraService接收并验证：Framework层的CameraService检查请求合法性，绑定Surface到对应的流配置。
- CameraDeviceClient转发：将请求封装为内部格式，通过IPC发送到HAL进程。
- HAL处理请求：Camera HAL解析请求参数，配置传感器、ISP和3A算法。
- 传感器曝光与输出：硬件捕获一帧原始数据，ISP处理后输出YUV/RAW帧到HAL分配的缓冲区。
- HAL回调帧数据：通过process_capture_result回调，将填充好的缓冲区句柄返回Framework。
- Framework通知App：CameraService将帧数据通过Surface的dequeue/queue机制送达App指定的Surface。
性能关键点：步骤5→6→7之间的缓冲区传递路径，是Surface绑定优化的核心战场。缓冲区所有权在HAL、Framework、App之间的切换效率，直接决定预览延迟。
1.3 架构全景SVG图
下图展示了从App到HAL的完整数据流路径，以及各层之间的关键接口与缓冲区流动方向：
1.4 关键接口与数据格式
在数据流路径中，不同层级之间通过特定接口和缓冲区格式进行交互。以下是各层间的主要接口与数据格式对照：
| 层级边界 | 接口/协议 | 缓冲区格式 | 同步机制 |
|---|---|---|---|
| App ↔ Framework | Camera2 API (AIDL) | Surface (GraphicBuffer) | Fence / BufferQueue |
| Framework ↔ HAL | Camera HAL 3.x (HIDL/AIDL) | StreamBuffer (handle) | ReleaseFence |
| HAL ↔ Kernel | V4L2 / DMA-BUF | DMA-BUF fd / ion | Sync File |
| Kernel ↔ 硬件 | ISP驱动 / MIPI CSI | RAW10/12 Bayer | 硬件VSYNC |
常见陷阱：很多开发者只关注App层的API调用，忽略了Framework与HAL之间的缓冲区所有权切换开销。每次Fence等待、每次BufferQueue的dequeue/queue操作，都可能引入1~3帧的延迟。本课程后续章节将逐一剖析这些瓶颈点。
1.5 预览数据流的时间线
从App发起请求到第一帧显示，典型的时间线如下（以60fps预览为例，每帧约16.67ms）：
- T0 ~ T1 (0~2ms)：App构建CaptureRequest，通过Camera2 API发送到CameraService。
- T1 ~ T2 (2~4ms)：CameraService验证请求，配置Stream，通过IPC转发到HAL。
- T2 ~ T3 (4~8ms)：HAL解析请求，配置传感器曝光参数，等待VSYNC。
- T3 ~ T4 (8~12ms)：传感器曝光，ISP处理RAW数据，输出YUV帧到HAL缓冲区。
- T4 ~ T5 (12~14ms)：HAL回调process_capture_result，Framework将缓冲区入队到Surface。
- T5 ~ T6 (14~16.67ms)：SurfaceFlinger合成，显示到屏幕。
优化空间：从T2到T5的区间（HAL处理+缓冲区回传）是优化预览延迟的核心。通过预分配缓冲区、减少Fence等待、使用DMA-BUF直接传递，可以将该区间压缩30%~50%。本课程第4~6章将深入这些技术细节。