面向火星HiRISE多CCD立体测图的无重采样、抖动感知光束法平差
《ISPRS JOURNAL OF PHOTOGRAMMETRY AND REMOTE SENSING》:Resampling-free jitter-aware bundle adjustment for HiRISE multi-CCD stereo mapping on Mars
【字体:
大
中
小
】
时间:2026年09月27日
来源:ISPRS JOURNAL OF PHOTOGRAMMETRY AND REMOTE SENSING 12.9
编辑推荐:
摘要
从高清晰度成像科学实验(HiRISE)立体图像中进行精确的地形重建,对于火星地貌分析和着陆点评估至关重要。然而,高频传感器抖动和非共线电荷耦合器件(CCD)之间的几何不一致性,会引入与接缝相关的伪影、周期性残差以及局部数字高程模型(DEM)的变形。传统的校正流程通常是
摘要
从高清晰度成像科学实验(HiRISE)立体图像中进行精确的地形重建,对于火星地貌分析和着陆点评估至关重要。然而,高频传感器抖动和非共线电荷耦合器件(CCD)之间的几何不一致性,会引入与接缝相关的伪影、周期性残差以及局部数字高程模型(DEM)的变形。传统的校正流程通常是在图像空间中估计抖动,或者在立体量测之前更新姿态参数,因此未能充分利用HiRISE焦平面内部的重叠约束进行光束法平差。本文提出了一种无重采样的摄影测量框架,用于HiRISE多CCD立体制图,将谐波抖动补偿直接嵌入严格的光束法平差中。一个时间连续的外方位模型将低阶多项式运动与傅里叶级数抖动项相结合,抖动项由相邻CCD重叠区域的视差进行初始化。然后,轨道间立体连接点和CCD间重叠连接点被联合使用,以在统一的平差模型中约束立体几何、随时间变化的指向变化和焦平面一致性。对于原始CCD图像的匹配,开发了一种受约束的由粗到精的流程。主要在最低金字塔层级使用经过预训练的XFeat并进行测试时描述子自适应,以实现无先验的粗初始化,然后将所得的几何关系传播至更高层次,以指导受局部约束的高效Harris+归一化互相关(NCC)精化和密集网格匹配。在四个HiRISE立体图像对上进行了实验,分别覆盖勇气号着陆区域、Mawrth Vallis、祝融号着陆区域以及盖尔陨石坑中地形更具挑战性的反演河道区域,以评估所提框架在不同地形起伏条件下的表现。结果表明,所提框架在所有四个立体图像对中均保持了亚像素级的检查点重投影残差(两个图像方向),抑制了由抖动引起的周期性残差,改善了CCD接缝处的一致性,并且无需图像重采样即可产生与火星轨道器激光高度计(MOLA)及官方HiRISE/行星数据系统(PDS)参考一致的DEM。实现代码将在以下地址公开:https://github.com/wbl1997/mars_images_ba.git。
引言
高分辨率地形制图是火星地貌调查、着陆点评估、火星车路线规划和区域环境分析的基本前提。在过去几十年中,多个火星任务逐步提高了轨道地形产品的可用性和精度。火星轨道器激光高度计(MOLA)为火星提供了第一个全球一致的高程参考,而火星轨道相机(MOC)、高分辨率立体相机(HRSC)、上下文相机(CTX)和高分辨率成像科学实验(HiRISE)等轨道成像系统,则使得从立体图像中进行越来越精细的局部和区域三维重建成为可能(Abshire等人,2000;Kirk等人,2003;Kirk等人,2006;Albertz等人,2005;Malin等人,2007;McEwen等人,2010)。最近,搭载于_exoMars_痕量气体轨道器上的彩色和立体表面成像系统(CaSSIS),利用推扫帧采集模式进一步拓展了高分辨率火星立体成像,并且专门为CaSSIS立体表面重建开发了3DPD等专用摄影测量流程(Thomas等人,2017;Simioni等人,2021)。这些产品还支持下游的局部地形配准和比对任务(Wang等人,2024)。最近,天问一号图像也展示了高分辨率摄影测量制图能力,进一步凸显了严格行星立体重建方法的重要性(Li等人,2022;Li等人,2021)。
在当前可用的火星成像系统中,HiRISE仍然是分辨率最高的轨道相机,有效红色幅宽约为20,048像素,图像分辨率可达约0.25米/像素(Kirk等人,2008)。截至2026年8月4日,官方立体图像对列表中列出了9184对HiRISE立体图像。1 这些数据为米级到亚米级地形分析提供了独特机会,但也对几何建模提出了严格要求。特别是,HiRISE使用多电荷耦合器件(多CCD)推扫式焦平面,相邻CCD的非共线排列引入了在常规单线推扫相机中不会遇到的内部几何约束。
高精度HiRISE立体制图面临的一个主要挑战是传感器抖动。图像采集过程中平台姿态的高频扰动会引入随时间变化的几何畸变,这些畸变表现为图像量测中的残余振荡、CCD接缝处的不匹配以及重建DEM中的周期性伪影(Kirk等人,2003;Mattson等人,2009;Sutton等人,2018)。随着图像分辨率的提高,这些效应变得越来越重要,因为即使亚像素级的指向变化,经过立体交会后也可能传播为米级的高程误差。
现有的推扫图像抖动校正方法大致可分为两类。第一类在图像空间中估计畸变并直接对图像进行重采样,以减少可见的抖动模式(Teshima和Iwasaki,2007;Zhang和Guan,2018;Pan等人,2020)。尽管这类方法可能改善图像的可解释性,但反复的重采样过程会传播插值误差,并不适合严格的立体几何处理。第二类从图像配准误差或辅助观测中估计随时间变化的姿态校正,然后在后续的正射校正和量测之前更新传感器姿态模型(Teshima和Iwasaki,2007;Tong等人,2014;Tong等人,2015;Zhu等人,2018;Sutton等人,2018)。这些方法通常更适合几何应用,但仍将抖动校正与最终的立体平差过程分离,且往往未显式利用HiRISE多CCD焦平面的内部重叠约束。
对于HiRISE图像,先前的研究表明,相邻CCD重叠区域的连接点对于约束内部条带一致性并减少与接缝相关的模型变形很有价值(Li等人,2011;Hwangbo等人,2010)。然而,一个仍然存在的局限是,抖动补偿和多CCD一致性往往不是基于原始图像观测在单一严格的光束法平差框架内解决的。因此,接缝不一致性可能得到部分缓解,但最终的立体几何仍可能继承残余的抖动效应或来自中间图像校正步骤的误差传播。
为解决这一问题,本文开发了一种无重采样的抖动感知光束法平差框架,用于HiRISE立体制图。该方法不是先校正图像再进行立体重建,而是直接在时间连续的外方位(EO)参数中建模抖动,并将校正项与立体几何联合估计。在相邻CCD重叠区域中测得的随时间变化的视差用于初始化主要的抖动频率,而轨道间立体连接点和CCD间重叠连接点则被纳入统一的平差模型。通过这种方式,所提工作流直接优化原始图像量测,无需进行图像重采样即可产生改进的立体模型和DEM。整体工作流如图1所示。
HiRISE图像匹配中另一个实际问题是如何在不同的金字塔层级之间平衡匹配的鲁棒性和计算效率。在最低金字塔层级,尚未有可靠的几何先验可用时,直接使用Harris角点配合归一化互相关(NCC)需要进行大范围的NCC遍历,导致计算成本高昂且误匹配数量较多。经典的基于描述子的替代方法,如尺度不变特征变换(SIFT)和加速鲁棒特征(SURF),可以改进许多地面图像匹配任务中的不变性(Lowe,2004;Bay等人,2008;He等人,2025),但它们在大型原始HiRISE CCD图像上的直接应用仍然不如受约束的分层策略高效。当NCC稳定性因成像质量下降、较大的采集时间差或由风吹沙尘等环境因素引起的局部表面外观变化而减弱时,这一困难变得更加显著。为解决这一问题,所提框架引入了预训练的XFeat——一种轻量级的学习型局部特征提取和匹配方法(Potje等人,2024)——并配合测试时描述子自适应,主要用于这一最低无先验匹配阶段。所得的低分辨率几何关系随后被传播至更高分辨率层级,作为局部搜索先验。在精化层级中,Harris通常被用作默认的 Efficient 分支,而当需要额外鲁棒性时,也可重复使用带有相同测试时描述子自适应的XFeat。通过这种方式,学习型组件被嵌入到受约束的由粗到精的匹配过程中,而不是作为孤立的特征替代模块,而下游的几何验证、光束法平差和密集重建模块则保持不变。
本文的主要贡献如下:
- 通过结合低阶多项式运动与基于傅里叶级数的谐波抖动项,建立了一个严格的时间连续HiRISE外方位模型。抖动项直接嵌入光束法平差中,而非通过先验图像重采样来应用。
- 通过联合使用轨道间立体连接点和CCD间重叠连接点,构建了一个统一的多CCD平差框架,从而同时改善了立体几何和CCD接缝一致性。
- 为原始HiRISE CCD图像开发了一种受约束的由粗到精的匹配框架。分块XFeat配合测试时描述子自适应主要引入最低金字塔层级以实现无先验的粗初始化,而Harris+NCC匹配置换更常用于在传播的局部约束下进行高效的层级精化。最细层级的稀疏对应关系进一步指导迭代网格点匹配,以实现密集或半密集的地形重建。
本文其余部分组织为四个主要章节。第2节介绍多CCD投影成像模型和所提出的抖动参数化。第3节介绍统一的光束法平差公式。第4节描述层级化的稀疏和密集匹配策略。第5节报告实验设计和评估结果,第7节对论文进行总结并讨论当前的局限性。
章节片段
多CCD推扫几何
如图2所示,HiRISE焦平面包含14个非共线排列的CCD探测器,其中包括10个红色CCD、2个蓝-绿CCD和2个近红外CCD。每个CCD在横轨方向有2048个像素,沿轨方向有128个时间延迟积分(TDI)行。10个红色CCD用于高分辨率地形制图,相邻探测器之间约有48个像素的重叠,有效红色幅宽约为20,048像素,
HiRISE立体图像的抖动感知光束法平差
对于推扫式立体摄影测量,每个图像观测必须满足地面点、瞬时投影中心和对应图像点之间的共线关系:
$$\begin{pmatrix} x_p \\ y_p \end{pmatrix} - f = (R_\varphi R_\omega R_\kappa)^T \begin{pmatrix} X - X_s \\ Y - Y_s \\ Z - Z_s \end{pmatrix} = \begin{pmatrix} a_1 & b_1 & c_1 \\ a_2 & b_2 & c_2 \\ a_3 & b_3 & c_3 \end{pmatrix} \begin{pmatrix} X - X_s \\ Y - Y_s \\ Z - Z_s \end{pmatrix}$$
其中 $(x_p, y_p)$ 是经内方位校正后的图像坐标,$f$ 为主距,$(X, Y, Z)$ 为地面点的物方坐标,$(X_s, Y_s, Z_s)$ 为瞬时传感器位置,$R_\varphi$、$R_\omega$ 和 $R_\kappa$ 分别表示……
图像预处理
如第2节所述,HiRISE图像由多个非共线CCD采集。在匹配之前,必须处理辐射不一致和局部无效像素,以在保留原始图像几何的同时提高连接点提取的稳定性。特别是,CCD列之间的灰度偏移、局部缺失值和立体图像之间的强烈光照差异,如果处理不一致,都可能降低匹配性能(Xue等人,2025)。
数据与评估方案
实验在四个HiRISE立体图像对上进行,分别覆盖古谢夫陨石坑中的勇气号着陆区域、Mawrth Vallis、乌托邦平原南部的祝融号着陆区域以及盖尔陨石坑中的反演河道区域。这四个案例涵盖了不同的地形条件,包括陨石坑平原、层状沉积物、广阔平原、反演河道、脊线、撞击坑以及局部陡峭表面。所有立体图像对均在原始CCD域中使用相同的无重采样……
讨论
实验结果支持三个主要观察。第一,将谐波抖动项直接嵌入光束法平差比在平差前通过显式重采样步骤校正图像更适合严格的立体几何处理。由于观测保持在原始CCD图像域中,插值引起的误差传播风险得到了降低。第二,CCD间重叠连接点对稳定HiRISE……的内部几何是必需的。
结论
本文提出了一种用于HiRISE多CCD立体制图的无重采样摄影测量工作流,将抖动补偿直接嵌入严格的光束法平差中。通过利用相邻CCD之间的重叠观测,该方法从随时间变化的图像偏移中初始化谐波抖动参数,然后利用原始CCD图像量测将这些参数与立体几何联合精化。通过这种方式,所提框架避免了……的需要。
CRediT作者贡献声明
Wang Binliang:撰写——初稿、软件、方法论、调查、数据整理。Zhao Shuangming:撰写——审阅与编辑、监督、资金获取。Wang Shiyan:监督、资金获取。Guo Xinyi:撰写——审阅与编辑、可视化、数据整理。Zhan Zhihao:撰写——审阅与编辑。Wang Ke:撰写——审阅与编辑、软件。
利益冲突声明
作者声明他们没有已知的竞争性经济利益或个人关系,这些利益或关系可能影响本论文所报告的工作。
Binliang Wang | Shuangming Zhao | Shiyan Wang | Xinyi Guo | Zhihao Zhan | Ke Wang
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号