18. HDR与夜景模式：HDR原理与实现、多帧合成技术、夜景模式优化
说到手机摄像头的HDR和夜景模式，很多同学第一反应就是「拍亮一点」。其实没那么简单。HDR和夜景模式，说白了就是一套「多帧合成」的功夫。我最早接触这个是在做一款户外运动相机的时候，白天大光比场景下，天空一片死白，暗部又黑成一团。后来才明白，单帧传感器的动态范围根本不够用。
嗯，这一章我们就来拆解一下，HDR到底怎么实现，多帧合成有哪些坑，夜景模式又该怎么优化。
18.1 HDR原理：为什么要多帧？
先问一个问题：为什么单帧拍不出高动态范围？
因为传感器每个像素的感光能力是有限的。亮的地方容易过曝，暗的地方容易欠曝。你想想看，一个12bit的RAW图，理论上能记录4096级亮度，但实际场景的亮度跨度可能超过10万级。这就是矛盾所在。
HDR的核心思路很简单：拍多张不同曝光的照片，然后把它们合成一张。
关键点：HDR不是简单的「亮图+暗图平均」，而是基于每帧的曝光质量，做像素级的权重融合。
我在项目中遇到过一种情况：用三帧曝光（-2EV、0EV、+2EV）合成，结果运动物体出现了鬼影。后来才意识到，多帧合成必须考虑对齐和去鬼影。
18.2 多帧合成技术：从对齐到融合
多帧合成，我习惯把它拆成三步：对齐 → 权重计算 → 融合。每一步都有坑。
18.2.1 对齐：别让画面「重影」
手持拍摄时，手会抖。不同帧之间，像素位置会偏移。如果不做对齐，合成出来的图像就像叠了层半透明的重影。
常用的对齐方法有两种：
- 全局对齐：基于陀螺仪或特征点匹配，计算一个仿射变换矩阵。适合场景整体平移。
- 局部对齐：用光流法或块匹配，逐区域做对齐。适合有运动物体的场景。
我曾经踩过一个坑：用全局对齐处理夜景模式，结果画面边缘总是模糊。后来发现，夜景模式下曝光时间长，手抖是非线性的，全局仿射根本不够用。换成局部光流对齐后，边缘清晰度明显提升。
18.2.2 权重计算：哪些像素值得信任？
不是所有帧的每个像素都值得用。比如过曝区域的像素，信息已经丢失了，权重应该给低。欠曝区域的像素，噪声太大，权重也要压低。
我常用的权重策略是：
| 曝光状态 | 权重策略 | 说明 |
|---|---|---|
| 正常曝光 | 高权重 | 细节丰富，噪声低 |
| 过曝 | 低权重 | 高光细节丢失，不可恢复 |
| 欠曝 | 中等权重 | 暗部细节可提亮，但噪声会放大 |
嗯，这里要注意：权重不是非0即1的。我习惯用高斯函数，根据像素亮度距离理想曝光值的远近，生成连续权重。
18.2.3 融合：拉普拉斯金字塔
最简单的融合就是加权平均。但这样会丢失高频细节。我推荐用拉普拉斯金字塔融合。
思路是这样的：
- 对每帧图像构建高斯金字塔（多尺度模糊）
- 从高斯金字塔中提取拉普拉斯金字塔（高频细节）
- 在不同尺度上，分别做加权融合
- 最后重建回全分辨率图像
这样做的好处是：低频部分平滑过渡，高频部分保留细节。我在做夜景模式时，用这个方法把暗部纹理保留得很好。
小技巧：融合时，权重图也要做高斯模糊，避免融合边界出现「硬边」。
18.3 夜景模式优化：不只是提亮
夜景模式，说白了就是「多帧降噪+提亮」。但很多同学做出来要么噪点满天飞，要么画面糊成一片。
我总结了几条优化经验：
18.3.1 帧数不是越多越好
有人觉得夜景模式拍10帧、20帧，合成效果一定好。其实不然。帧数多了，手抖累积误差大，对齐难度指数级上升。我个人经验是：手持夜景4-6帧就够了，上三脚架可以到8-10帧。
18.3.2 曝光策略：短曝光为主
夜景模式不要用长曝光。长曝光容易糊，而且传感器热噪声会累积。我建议：用短曝光（比如1/15秒），拍多帧，然后合成。这样既保证了手持稳定性，又能通过多帧降噪提升信噪比。
18.3.3 去噪要分频段
夜景图像的噪声，低频是亮度噪声，高频是彩色噪声。我习惯分开处理：
- 低频：用双边滤波或非局部均值去噪，保留边缘
- 高频：用色度降噪，只处理彩色通道，不破坏亮度细节
避坑指南：我曾经在夜景模式中直接用了全局降噪，结果暗部细节全没了。后来改成「亮度通道保留细节，色度通道强力降噪」，效果好了很多。
18.4 知识体系总览
下面这张图，是我整理的多帧合成与夜景优化的核心流程。你可以把它当作一个检查清单：
18.5 实战建议
最后，给你几个可以直接用的建议：
- 先做对齐，再做融合。 顺序错了，鬼影会让你怀疑人生。
- 权重图一定要平滑。 硬边权重会导致融合后出现「拼接感」。
- 夜景模式不要贪多帧。 6帧以内，效果和效率最平衡。
- 多测试不同场景。 我习惯在黄昏、室内、极暗光三种场景下验证算法。
个人习惯：我每次调试HDR算法，都会先拍一张RAW图做参考。这样能清楚知道，合成后的图像到底损失了多少动态范围。
嗯，这一章的内容就到这里。多帧合成和夜景优化，说到底就是「对齐、权重、融合」这三个字。把每一步做扎实了，效果自然就出来了。
公众号:蓝海资料掘金营，微信deep3321