2025-11-16T23:28:12.885484

Enhancing the Quality of 3D Lunar Maps Using JAXA's Kaguya Imagery

Iwashita, Moe, Cheng et al.

As global efforts to explore the Moon intensify, the need for high-quality 3D lunar maps becomes increasingly critical-particularly for long-distance missions such as NASA's Endurance mission concept, in which a rover aims to traverse 2,000 km across the South Pole-Aitken basin. Kaguya TC (Terrain Camera) images, though globally available at 10 m/pixel, suffer from altitude inaccuracies caused by stereo matching errors and JPEG-based compression artifacts. This paper presents a method to improve the quality of 3D maps generated from Kaguya TC images, focusing on mitigating the effects of compression-induced noise in disparity maps. We analyze the compression behavior of Kaguya TC imagery, and identify systematic disparity noise patterns, especially in darker regions. In this paper, we propose an approach to enhance 3D map quality by reducing residual noise in disparity images derived from compressed images. Our experimental results show that the proposed approach effectively reduces elevation noise, enhancing the safety and reliability of terrain data for future lunar missions.

academic

JAXA月探査機かぐやの画像を用いた3次元月面図の品質向上

基本情報

論文ID: 2510.11817
タイトル: Enhancing the Quality of 3D Lunar Maps Using JAXA's Kaguya Imagery
著者: Yumi Iwashita (JPL)、Haakon Moe (オスロ大学)、Yang Cheng (JPL)、Adnan Ansar (JPL)、Georgios Georgakis (JPL)、Adrian Stoica (LunaSol Space LLC)、中島和人 (九州大学)、倉爪亮 (九州大学)、Jim Torresen (オスロ大学)
分類: cs.CV cs.LG
発表日: 2024年10月13日 (arXiv プレプリント)
論文リンク: https://arxiv.org/abs/2510.11817

要旨

世界的な月面探査活動の強化に伴い、高品質な3次元月面図の必要性が急速に高まっている。特にNASAの「Endurance」ミッション構想など、月面車が南極エイトケン盆地を2000km走行する長距離ミッションにおいて重要である。かぐやTC カメラ画像は全球で10m/画素の分解能を提供しているが、ステレオマッチング誤差とJPEG圧縮アーティファクトに起因する高度精度の低下に悩まされている。本論文は、JPEG圧縮に起因する視差図ノイズの影響を軽減することに焦点を当てた、かぐやTC画像から生成される3D図の品質改善手法を提案する。研究ではかぐやTC画像の圧縮特性を分析し、特に暗い領域における体系的な視差ノイズパターンを特定した。実験結果は、提案手法が高度ノイズを効果的に低減し、将来の月面ミッションの地形データの安全性と信頼性を向上させることを示している。

研究背景と動機

問題の定義

中核的課題: JPEG圧縮に起因するかぐやTC画像の3D再構成における高度精度の低下。特に暗い領域で約20mの高度誤差が発生
応用ニーズ: NASAのEnduranceミッションなど長距離月面探査ミッションでは、安全な航行のために高精度な3D地形図が必要
データの現状:
- LRO LOLA データは高精度だが、主に極地域をカバーし、ミッション期間に制限がある
- かぐやTC データは全球カバレッジを提供するが、圧縮アーティファクト問題がある

重要性の分析

安全性: 高度誤差は斜面の急峻さと通行不可能な領域の誤った推定につながり、月面車の安全を脅かす
ミッション成功率: 高品質な地形図は長距離月面ミッションの成功を保証する重要な要素
データ利用: 既存のかぐやデータリソースを十分に活用し、新規取得の高コストを回避

既存手法の限界

従来の信号処理手法: 神谷らの低周波成分補正手法など、改善は限定的で高周波細部を失うことが多い
深層学習手法: QGAC、FBCNN、DDRM-JPEGなど、主に地上画像を対象とし、衛星画像の粗い分解能特性に不適切
ステレオマッチング後処理: PSMNet、RAFT-Stereoなど、典型的なマッチング誤差に対応するが、圧縮ノイズには対応していない

中核的貢献

初めて提案: 圧縮に起因する視差図ノイズ改善の専門的手法
体系的分析: かぐやTC画像のJPEG圧縮が視差推定精度に与える影響、特に異なる輝度領域での性能を分析
革新的応用: 条件付き拡散モデル(Palette)と先進的なステレオマッチングモデル(IGEV++)を用いた圧縮視差残差の処理
実験的検証: 高度誤差を1.26mから0.54mに低減し、理論的限界に接近することを実証

手法の詳細

タスク定義

入力: 圧縮されたかぐやTC ステレオ画像ペア
出力: ノイズ除去後の高品質視差図
目標: JPEG圧縮に起因する視差ノイズを低減し、3D再構成精度を向上

中核的知見と分析

JPEG圧縮影響分析

圧縮テーブル: JAXAは32種類のJPEG圧縮テーブルを使用。SF008S_Aが最も頻繁(約56%の画像)
ノイズ特性:
- 非圧縮画像の視差誤差標準偏差は約0.01画素
- 圧縮画像は暗い領域(DN値<388)で性能が大幅に低下
- 視差残差はガウス分布特性を示す(ゼロ平均、単位標準偏差)

手法アーキテクチャ

圧縮ステレオ画像ペア → 初期視差推定 → 残差予測モデル → ノイズ除去視差図
                                    ↑
                            (Palette/IGEV++)

技術方案

1. Palette条件付き拡散モデル

アーキテクチャ: U-Net構造。段階的なノイズ除去プロセスを通じて画像から画像への変換を学習
条件メカニズム: 各時間ステップのノイズ画像と入力画像を連結して条件として使用
訓練戦略: 視差値を直接予測するのではなく視差残差を予測。大範囲の歪んだ分布の訓練困難を回避

2. IGEV++ステレオマッチングモデル

特徴: マルチスケール特徴抽出と多範囲幾何符号化ボリューム(MGEVs)を結合
最適化: ConvGRU演算子を使用して視差を反復的に最適化。文脈特徴アップサンプリングを活用

3. 残差学習戦略

問題の再構成: 視差の直接予測から圧縮画像と非圧縮画像の視差残差の予測へ転換
数学的基礎: 残差のガウス分布特性を活用して学習タスクを簡素化
画像補正: 関連する視差図を使用して入力ステレオ画像ペアを補正

実験設定

データセット

出典: 約5000枚の非圧縮かぐやTC画像から70ペアのステレオ画像を選択
地理的カバレッジ: 緯度-70°から70°、異なる太陽照明条件
データ分割:
- 元の分解能: 3208×4656画素
- ブロック処理: 256×256画素ブロック
- 合計4745ブロック、90%訓練、10%テスト

評価指標

主要指標:
- 平均誤差(Mean Error)
- 標準偏差(Standard Deviation)
- 相関係数(r)
- 決定係数(R²)
高度精度: 画素誤差を地形高度誤差に変換

比較手法

ノイズなし推定: 圧縮画像から直接生成した視差図
Palette: 条件付き拡散モデル
IGEV++: 先進的なステレオマッチングモデル
低域通過フィルタ(LPF): ガウスフィルタ(σ=3.0)

実装詳細

Palette: コサインスケジューラ、2000時間ステップ、1000最適化ステップ
IGEV++: 公式実装、デフォルト設定
訓練環境: PyTorchベースの実装

実験結果

主要結果

定量評価 (3つのテストサンプル: ID 166、615、918)

手法	平均誤差(画素)	標準偏差(画素)	相関係数(r)	決定係数(R²)
元の圧縮	~0.01	>0.06	N/A	N/A
Palette	0.002-0.007	0.033-0.056	0.728-0.929	0.500-0.844
IGEV++	-0.007-0.015	0.062-0.071	0.167-0.253	-0.009-0.063
LPF	0.006-0.014	0.064-0.068	0.440-0.493	0.130-0.186

全体的性能評価

手法	相関係数(r)	決定係数(R²)
Palette	0.778	0.487
IGEV++	0.166	0.017
LPF	0.463	0.193

重要な知見

Paletteが最適性能:
- 最良の場合、標準偏差は0.033画素に低減
- 高度誤差は1.26mから0.54mに低減
- 0.54mの理論的限界に接近
IGEV++の性能不良:
- 大きな視差値に対応するよう設計されたため、小さな残差予測で局所最適に陥る可能性
- 相関係数はわずか0.166
ノイズの複雑性:
- LPFの効果は限定的。ノイズが高周波成分だけでなく複雑なパターンを含むことを示唆
- データ駆動型手法が複雑なノイズパターンの処理に必要