📚 课程目录第4章 HDR与AE的耦合关系

4. HDR与AE的耦合关系：AE如何决定帧曝光时间，HDR如何依赖AE输出的多帧参数

HDR和AE的关系，说白了就是「谁听谁的」问题。

很多工程师把这两个模块分开调，结果HDR死活出不来效果。我刚开始做HDR项目时也踩过这个坑——AE自己算自己的曝光，HDR自己拼自己的帧，最后图像不是过曝就是欠曝。

今天咱们就把这个耦合关系彻底讲清楚。

4.1 AE的核心任务：决定曝光时间

AE（自动曝光）的目标很简单：让图像亮度落在目标区间。但HDR场景下，这个「目标区间」变了。

关键认知：普通模式下AE只输出一组曝光参数；HDR模式下AE必须输出多组参数，且每组参数之间要有明确的曝光量级差。

AE决定帧曝光时间的流程大致如下：

统计当前亮度——从上一帧的直方图、平均亮度、区域权重等数据估算场景亮度
计算目标亮度——根据用户设定的目标亮度区间（比如18%灰）确定需要调整的方向
分配多帧参数——如果是HDR模式，AE要把总曝光量拆成短、中、长三帧（或两帧）
输出给ISP——把每帧的曝光时间、模拟增益、数字增益打包发给HDR融合模块

这里有个细节：AE不是直接输出「曝光时间=10ms」这么简单。它输出的是一个曝光三角——曝光时间、模拟增益、数字增益三者之间的权衡。

我个人习惯：在HDR模式下，优先调整曝光时间，尽量不动增益。因为增益会放大噪声，而HDR融合本身就会引入噪声放大问题。能靠拉长曝光时间解决的，就别动增益。

4.2 HDR对AE输出的依赖：多帧参数的「契约」

HDR融合模块拿到AE给的三帧参数后，它要做什么？

说白了，HDR要做三件事：

对齐——三帧图像在空间上对齐（消除手抖、物体运动）
融合——把短帧的亮部细节、长帧的暗部细节合成一帧
映射——把高动态范围的融合结果映射到8bit或10bit输出

这三步每一步都依赖AE输出的参数。举个例子：

如果AE给的长帧曝光时间是30ms，短帧是1ms，那么HDR融合时就知道：长帧的暗部信噪比高，短帧的亮部不会过曝。但如果AE给的长帧和短帧曝光量差距太小（比如30ms和20ms），那HDR融合就失去了意义——两帧的动态范围几乎一样。

我曾经遇到过一个坑：某平台AE在HDR模式下自动把短帧增益拉得很高，结果短帧噪声爆炸，HDR融合后暗部全是噪点。查了两天才发现是AE的增益上限没做HDR场景适配。后来我强制AE在HDR模式下把模拟增益上限砍掉一半，问题解决。

4.3 AE与HDR的交互流程

我画了一张流程图，帮你理清AE和HDR之间的数据流：

4.4 曝光时间分配策略：短/中/长帧怎么配

AE在HDR模式下最核心的工作就是分配三帧的曝光时间。我见过几种常见策略：

策略名称	短帧:中帧:长帧	适用场景	优缺点
等比分配	1:4:16	室内、逆光	动态范围大，但运动伪影明显
等差分配	1:2:3	室外、运动场景	运动伪影少，但动态范围提升有限
自适应分配	根据场景动态调整	通用	效果好，但算法复杂度高

我个人比较推荐自适应分配。为什么？因为场景是变化的——白天室外和夜晚室内需要的曝光比完全不同。

举个例子：

白天室外：场景动态范围大（亮部可达10000nit，暗部只有10nit），需要1:8:64甚至更大的比例
夜晚室内：动态范围小（亮部100nit，暗部1nit），1:2:4就够用了

如果固定用1:4:16，夜晚室内场景的长帧会严重过曝，融合后暗部细节反而丢失。

我建议：AE在HDR模式下不要用固定比例。让AE先估算场景的动态范围，再动态计算三帧的曝光时间。具体做法是——AE统计模块输出直方图后，计算最亮5%和最暗5%的亮度比值，这个比值就是场景的动态范围。然后按这个比值分配三帧的曝光时间。

4.5 避坑指南：AE与HDR配合的常见问题

做HDR项目这几年，我总结了几条血泪教训：

帧率抖动——HDR三帧的总曝光时间不能超过帧周期。如果长帧曝光时间太长，会导致帧率下降。我曾经遇到一个项目，AE在暗光下把长帧拉到100ms，结果帧率从30fps掉到15fps，视频卡成PPT。解决方案是给AE设置HDR模式下的最大曝光时间上限。
增益不一致——三帧的增益要尽量一致。如果短帧用高增益、长帧用低增益，融合时会出现明显的噪声差异。我习惯让三帧的模拟增益保持一致，只调整曝光时间。
AE收敛速度——HDR模式下AE的收敛速度要比普通模式慢。因为AE需要等三帧都采集完才能做统计。如果场景亮度突变（比如从室内走到室外），AE可能需要3-5帧才能稳定。这个延迟在视频预览时能明显感觉到。

特别注意：有些平台的AE在HDR模式下会忽略短帧的统计信息，只根据长帧做亮度调整。这会导致短帧过曝——因为AE觉得场景暗，就把所有帧的曝光时间都拉长，结果短帧也变长了，失去了保留亮部细节的能力。正确的做法是：AE应该根据中帧或长帧做亮度统计，但短帧的曝光时间要独立计算。

4.6 实战参数示例

最后给一组我在项目中实际用过的参数，供你参考：

// HDR模式AE参数配置示例
struct hdr_ae_config {
    // 帧率控制
    uint32_t max_exposure_time_ms = 33;  // 30fps下最大33ms
    uint32_t min_exposure_time_ms = 0.1; // 最短0.1ms
    
    // 三帧曝光比例（自适应范围）
    float short_ratio = 0.1;   // 短帧占中帧的10%
    float long_ratio = 4.0;    // 长帧是中帧的4倍
    
    // 增益限制
    uint32_t max_analog_gain_db = 24;  // HDR模式下增益上限24dB
    uint32_t max_digital_gain_db = 6;  // 数字增益上限6dB
    
    // 收敛参数
    uint32_t convergence_frames = 5;   // HDR模式下5帧收敛
    float target_luminance = 0.18;     // 目标亮度18%灰
};

嗯，这套参数在大部分场景下都能工作。但记住——没有万能参数。你拿到新平台后，一定要根据实际传感器特性和场景做微调。