2. RAW数据存储：RAW文件结构、位深与数据打包
RAW数据是图像传感器输出的原始数字信号，未经ISP（图像信号处理器）任何处理。理解RAW文件的存储结构、位深定义以及数据打包方式，是进行ISP Pipeline调试的基础。本章将深入解析DNG、RAW、TIFF-EP三种主流RAW文件格式，对比不同位深的动态范围与数据量，并展示数据打包与解包的具体实现。
2.1 RAW文件结构：DNG、RAW、TIFF-EP
RAW文件并非单一格式，不同厂商和标准定义了不同的容器结构。下表对比了三种最常见的RAW文件格式：
| 特性 | DNG (Digital Negative) | RAW (厂商私有) | TIFF-EP (TIFF for Electronic Photography) |
|---|---|---|---|
| 标准制定者 | Adobe (开放标准) | 各相机厂商 (如.CR2, .NEF, .ARW) | ISO 12234-2 (国际标准) |
| 核心结构 | 基于TIFF 6.0，扩展私有Tag | 私有二进制格式，通常包含IFD | 基于TIFF 6.0，严格遵循ISO标准 |
| 元数据 | 标准化的EXIF、XMP、相机校准数据 | 厂商自定义，通常包含大量私有数据 | 标准化的EXIF、IPTC，限制私有Tag |
| 压缩支持 | 支持无损JPEG、线性无损、未压缩 | 支持未压缩、无损压缩、有损压缩 | 支持未压缩、无损JPEG |
| 互操作性 | 高 (广泛被软件支持) | 低 (需厂商SDK或逆向工程) | 中 (主要用于专业/工业领域) |
| 典型应用 | 数字存档、后期处理、移动设备 | 单反、微单、专业相机 | 工业相机、扫描仪、医疗影像 |
调试建议： 在ISP Pipeline调试中，推荐使用DNG格式作为中间存储格式。其开放性和标准化的元数据（如Black Level、White Balance、Color Matrix）可以极大简化调试工具链的开发。
下图展示了DNG文件的核心结构，它基于TIFF容器，通过Image File Directory (IFD) 组织数据：
2.2 位深：8bit / 10bit / 12bit / 14bit / 16bit
位深（Bit Depth）决定了每个像素可以表示的灰度级数量，直接关联到图像的动态范围和信噪比。位深每增加1bit，可表示的灰度级数量翻倍。
| 位深 | 灰度级数 (2^N) | 理论动态范围 (dB) | 每像素数据量 (未压缩) | 典型应用场景 |
|---|---|---|---|---|
| 8-bit | 256 | ~48 dB | 1 Byte | 预览图、视频、显示输出 |
| 10-bit | 1,024 | ~60 dB | 1.25 Bytes | 早期手机传感器、部分工业相机 |
| 12-bit | 4,096 | ~72 dB | 1.5 Bytes | 主流手机传感器、消费级相机 |
| 14-bit | 16,384 | ~84 dB | 1.75 Bytes | 专业单反、微单、高端工业相机 |
| 16-bit | 65,536 | ~96 dB | 2 Bytes | 科学级相机、天文摄影、医疗影像 |
位深选择原则： ISP Pipeline调试时，建议使用传感器原生位深（通常为10/12/14-bit）进行RAW数据采集。8-bit会丢失暗部细节，16-bit则增加不必要的存储和带宽开销。调试完成后，再根据输出需求进行位深转换。
下图直观展示了不同位深下，从暗部到亮部的灰度级分布密度：
2.3 数据打包与解包
由于传感器输出的位深（如10/12/14-bit）通常不是8-bit的整数倍，为了节省存储空间和带宽，RAW数据在存储时需要进行数据打包（Packing）。解包（Unpacking）则是将打包后的数据恢复为每个像素独立占用的标准格式。
2.3.1 常见打包模式
- 连续打包 (Contiguous Packing): 将像素数据按位连续排列，忽略字节边界。例如，12-bit数据每2个字节存储1.5个像素。
- 对齐打包 (Aligned Packing): 每个像素数据从一个字节的起始位开始，不足部分补0。例如，10-bit数据每个像素占用2个字节，高10位有效，低6位填充0。
- MIPI CSI-2 打包: 遵循MIPI联盟标准，用于移动设备传感器接口。例如，10-bit数据采用“4像素打包成5字节”的方式。
| 位深 | 打包模式 | 每N个像素占用字节数 | 存储效率 | 解包复杂度 |
|---|---|---|---|---|
| 10-bit | MIPI CSI-2 | 4像素 → 5字节 | 80% | 低 (有标准查表法) |
| 12-bit | 连续打包 | 2像素 → 3字节 | 100% | 中 (需位操作) |
| 14-bit | 连续打包 | 4像素 → 7字节 | 100% | 高 (需跨字节拼接) |
| 16-bit | 对齐打包 (小端序) | 1像素 → 2字节 | 100% | 低 (直接读取) |
2.3.2 解包代码示例 (12-bit 连续打包)
以下C代码演示了如何将12-bit连续打包的RAW数据解包为16-bit标准格式：
/**
* @brief 解包12-bit连续打包的RAW数据
* @param packed 输入打包数据缓冲区 (每2个像素占用3字节)
* @param unpacked 输出解包数据缓冲区 (每个像素占用2字节, 低12位有效)
* @param pixel_count 需要解包的像素总数
*/
void unpack_12bit_contiguous(const uint8_t* packed, uint16_t* unpacked, uint32_t pixel_count) {
for (uint32_t i = 0; i < pixel_count; i += 2) {
// 从packed中读取3个字节
uint8_t b0 = packed[(i / 2) * 3 + 0];
uint8_t b1 = packed[(i / 2) * 3 + 1];
uint8_t b2 = packed[(i / 2) * 3 + 2];
// 提取第一个像素 (高8位来自b0, 低4位来自b1的高4位)
unpacked[i] = ((uint16_t)b0 << 4) | ((b1 >> 4) & 0x0F);
// 提取第二个像素 (高4位来自b1的低4位, 低8位来自b2)
unpacked[i + 1] = ((uint16_t)(b1 & 0x0F) << 8) | b2;
}
}
调试陷阱： 解包时务必确认字节序（Endianness）。ARM Cortex系列处理器通常为小端序，而某些DSP或GPU可能为大端序。错误的字节序会导致图像出现“棋盘格”或“条纹”噪声。
2.3.3 打包与解包流程
下图展示了从传感器输出到RAW文件存储，再到ISP读取的完整数据流：
2.4 本章小结
- 文件结构： DNG基于TIFF容器，通过SubIFD组织RAW数据，是ISP调试的首选格式；TIFF-EP适用于工业场景；厂商私有RAW格式互操作性差。
- 位深选择： 12-bit是消费级传感器的主流选择，14-bit用于专业领域。调试时应使用传感器原生位深，避免早期量化损失。
- 打包与解包： 理解MIPI CSI-2和连续打包模式是嵌入式ISP开发的基础。解包算法必须考虑字节序和边界条件，并通过测试图案验证正确性。