560 字
3 分钟
[计算机视觉] 图像金字塔与图像融合
所谓金字塔就是将原图处理成一系列不同分辨率的版本,形成一个金字塔结构
高斯金字塔
用于降采样
步骤:
- 对图像进行高斯模糊,去除高频信息,防止混叠(伪影)
- 对模糊后的图像进行下采样,通常是删除偶数行和偶数列的像素
- 重复上述步骤,直到达到所需的层数
拉普拉斯金字塔
是高斯金字塔的逆过程,用于图像重建
步骤:
- 从高斯金字塔的最底层开始,逐层向上进行重建
- 对比当前高一层(低分辨率)的高斯金字塔图像进行上采样,通常是插值
- 将上采样后的图像与当前层的高斯金字塔图像进行相减,得到拉普拉斯金字塔的当前层,所以拉普拉斯金字塔的每一层都是高斯金字塔相邻两层之间的差异图像
拉普拉斯金字塔每层和高斯金字塔的对应层具有相同的分辨率,但总层数比高斯金字塔少一层
图像融合
步骤:
- 分别构建两张图像的高斯金字塔(GA, GB)和拉普拉斯金字塔(LA, LB)
- 根据要融合的方式,构造一个蒙版(比如左右融合,就是一侧全为255,另一侧全为0),并计算蒙版的高斯金字塔(GM)
- 在金字塔每一层,根据蒙版的权重进行融合得到新的拉普拉斯金字塔:
- 从融合后的新拉普拉斯金字塔的最底层开始,逐层向上进行重建,得到最终的融合图像
这种方式融合的图像在边界处过渡自然,避免了直接拼接可能出现的明显边界问题,同时保留了两张图像的细节信息
重建方法
拿到高斯金字塔最顶层的最小分辨率图像,逐层向下重建:
最后得到,即融合后的图像
实现时应使用浮点数而非u8,避免负数和精度问题
[计算机视觉] 图像金字塔与图像融合
https://a1kari8.github.io/posts/cv/pyramid_fuse/