9.1 图像预处理¶
图像预处理是算法流水线的第一道关口,目的是将原始采集图像转化为适合后续分析的标准化输入。预处理质量直接影响特征提取、分类或检测的最终精度,通常包括几何校正、灰度校正、去噪和归一化等环节。
一、预处理流程概览¶
原始图像(Raw)
↓ 几何校正(畸变矫正 / 配准)
几何对齐图像
↓ 灰度校正(暗场 / 平场 / 辐射定标)
线性响应图像
↓ 去噪(空域 / 频域滤波)
信噪比提升图像
↓ 归一化 / 格式转换
算法可用输入
二、几何校正¶
2.1 镜头畸变校正¶
光学镜头引入的几何失真分为两类:
| 畸变类型 | 表现 | 校正方式 |
|---|---|---|
| 径向畸变 | 直线变弯,桶形或枕形 | 多项式模型($k_1, k_2, k_3$) |
| 切向畸变 | 图像平面与镜头平面不平行 | 切向系数($p_1, p_2$) |
校正公式(以归一化坐标 $(x, y)$ 为例):
$$x' = x(1 + k_1 r^2 + k_2 r^4) + 2p_1 xy + p_2(r^2 + 2x^2)$$
其中 $r^2 = x^2 + y^2$,参数由标定板(棋盘格)标定得到。
2.2 图像配准¶
多帧或多传感器图像需要对齐到同一坐标系,常用方法:
- 特征点配准:SIFT / ORB 提取关键点 → 描述符匹配 → RANSAC 估计变换矩阵
- 强度配准:最大化互信息(MI),适合多模态图像(可见光 + 红外)
- 仿射 / 单应变换:4 点以上对应关系估计 3×3 单应矩阵
三、灰度校正¶
3.1 暗场校正(Dark Frame Subtraction)¶
探测器存在暗电流和固定模式噪声,采集纯暗帧 $D$ 后逐像元减除:
$$I_{corr} = I_{raw} - D$$
3.2 平场校正(Flat-Field Correction)¶
消除像元响应不均匀和光照不均匀,用均匀白板采集平场帧 $F$:
$$I_{corr} = \frac{I_{raw} - D}{F - D} \times \bar{F}$$
其中 $\bar{F}$ 为平场均值,保持整体亮度。
3.3 辐射定标¶
光电成像系统中,将 DN 值转换为辐射亮度 $L$(单位 W·m⁻²·sr⁻¹·μm⁻¹):
$$L = G \cdot DN + B$$
$G$ 为增益,$B$ 为偏置,由积分球或标准辐射源标定。
四、去噪¶
4.1 噪声来源¶
| 噪声类型 | 来源 | 典型特征 |
|---|---|---|
| 高斯噪声 | 热噪声、放大器噪声 | 均值为零,正态分布 |
| 泊松噪声(散粒噪声) | 光子统计 | 方差等于均值 |
| 椒盐噪声 | ADC 误码、传输错误 | 随机亮/暗点 |
| 固定模式噪声 | 像元响应不均匀 | 结构性条纹 |
4.2 空域滤波¶
- 均值滤波:计算邻域均值,抑制高斯噪声,但模糊边缘
- 中值滤波:邻域像元取中值,对椒盐噪声效果好,保边能力强
- 高斯滤波:加权均值(权重按高斯分布),比均值滤波更平滑,频率特性好
- 双边滤波:同时考虑空间距离和灰度差,保边去噪
4.3 频域滤波¶
对图像做傅里叶变换,在频域乘以低通滤波器 $H(\omega)$(巴特沃斯、理想低通等),再逆变换。适合去除周期性条纹噪声。
4.4 深度学习去噪¶
DnCNN、FFDNet 等卷积网络直接学习噪声残差,在高斯噪声场景下 PSNR 比传统方法高 1–2 dB,支持盲去噪(无需已知噪声水平)。
五、归一化与格式转换¶
5.1 灰度归一化¶
将图像像素值映射到 $[0, 1]$ 或 $[-1, 1]$,消除光照差异对网络输入的干扰:
$$\hat{I} = \frac{I - \mu}{\sigma}$$
其中 $\mu$、$\sigma$ 为数据集的全局均值和标准差(ImageNet 预训练模型常用 RGB 各通道独立归一化)。
5.2 尺寸对齐¶
不同来源图像分辨率不同,需裁剪(Crop)或缩放(Resize)到统一尺寸(如 640×640)。缩放时注意保持长宽比,避免目标变形。
5.3 数据类型转换¶
| 原始格式 | 常用转换 | 注意事项 |
|---|---|---|
| uint16(14-bit RAW) | 线性映射到 float32 | 保留高动态范围 |
| uint8(8-bit) | 直接归一化 ÷255 | 信息已损失高位 |
| 浮点辐射亮度 | 标准化后送网络 | 防止梯度爆炸 |
六、工程注意事项¶
- 标定一致性:同一批任务使用同一批标定参数,切勿跨设备混用。
- 顺序不能颠倒:必须先暗场/平场校正,再几何校正,再去噪,顺序改变会引入新偏差。
- 版本留痕:预处理参数(标定文件哈希、去噪参数)应随数据版本一起记录,确保结果可复现。
参考资料¶
- Gonzalez & Woods, Digital Image Processing, 4th ed., Pearson
- OpenCV 文档:https://docs.opencv.org/
- Zhang, Z., \"A Flexible New Technique for Camera Calibration\", IEEE TPAMI, 2000
更新时间¶
2026-03-03