2025-11-18T16:04:13.800952

FRIREN: Beyond Trajectories -- A Spectral Lens on Time

Wang

Long-term time-series forecasting (LTSF) models are often presented as general-purpose solutions that can be applied across domains, implicitly assuming that all data is pointwise predictable. Using chaotic systems such as Lorenz-63 as a case study, we argue that geometric structure - not pointwise prediction - is the right abstraction for a dynamic-agnostic foundational model. Minimizing the Wasserstein-2 distance (W2), which captures geometric changes, and providing a spectral view of dynamics are essential for long-horizon forecasting. Our model, FRIREN (Flow-inspired Representations via Interpretable Eigen-networks), implements an augmented normalizing-flow block that embeds data into a normally distributed latent representation. It then generates a W2-efficient optimal path that can be decomposed into rotation, scaling, inverse rotation, and translation. This architecture yields locally generated, geometry-preserving predictions that are independent of the underlying dynamics, and a global spectral representation that functions as a finite Koopman operator with a small modification. This enables practitioners to identify which modes grow, decay, or oscillate, both locally and system-wide. FRIREN achieves an MSE of 11.4, MAE of 1.6, and SWD of 0.96 on Lorenz-63 in a 336-in, 336-out, dt=0.01 setting, surpassing TimeMixer (MSE 27.3, MAE 2.8, SWD 2.1). The model maintains effective prediction for 274 out of 336 steps, approximately 2.5 Lyapunov times. On Rossler (96-in, 336-out), FRIREN achieves an MSE of 0.0349, MAE of 0.0953, and SWD of 0.0170, outperforming TimeMixer's MSE of 4.3988, MAE of 0.886, and SWD of 3.2065. FRIREN is also competitive on standard LTSF datasets such as ETT and Weather. By connecting modern generative flows with classical spectral analysis, FRIREN makes long-term forecasting both accurate and interpretable, setting a new benchmark for LTSF model design.

academic

FRIREN/FERN: 軌跡を超えて -- 時間への分光学的視点

基本情報

論文ID: 2505.17370
タイトル: Chaining Spectral Pearls: Ellipsoidal Forecasting Beyond Trajectories for Time Series
著者: Qilin Wang (独立研究者)
分類: cs.LG
発表日: 2025年10月14日 (arXiv preprint v2)
論文リンク: https://arxiv.org/abs/2505.17370

注記: PDFの内容によると、本論文の実際のタイトルは「FERN (Forecasting with Ellipsoidal RepresentatioN)」であり、要約内の「FRIREN」は初期バージョンの名称と思われます。

要約

現在の長期時間系列予測(LTSF)の実践は、主にランダムデータ上の点ごとの指標に焦点を当てており、決定論的カオス下での脆弱性を隠蔽しています。本論文は古典的カオス系統での圧力試験を提案し、正確な軌跡ではなく将来の幾何学的構造を予測します。FERNは幾何学的認識を備えた予測器であり、各パッチの局所線形伝達と明示的な分光因子(固有ベクトル/固有値)を採用し、構造保存予測と安定性、パターン、レジーム遷移の実行可能な診断を生成します。MSE/MAEに加えて、スライスワッサーシュタイン距離(形状忠実度)と有効予測時間(水平安定性)も報告します。Lorenz63、Rössler、Chua系統では、FERNは強力なLTSF基線と比較して有意に低いエラーと改善された安定性を提供し、一方ETTおよびWeatherでは競争力を維持しています。

研究背景と動機

問題定義

中核的問題: 既存のLTSFモデルは決定論的カオス系統下で脆弱な性能を示し、幾何学的構造の保存を無視して点ごとの予測精度に過度に焦点を当てています
評価の盲点: 標準的な評価プロトコルには2つの盲点があります:
- 周期的/ノイズデータ上のモデルに過度に報酬を与え、カオス下での脆弱性を無視する
- 点ごとのエラー(MSE/MAE)に過度に強調し、幾何学的忠実度を無視する

研究動機

実際的必要性: 長期予測は必然的に失敗しますが、ブラックボックスモデルは失敗パターンを診断するツールを欠いており、信頼と採用に影響します
理論的基礎: Takensの埋め込み定理に基づき、単一チャネルの時間遅延埋め込みは動力学系のトポロジー的に等価なアトラクタを再構成できます
幾何学的観点: 「動力学ではなく局所幾何学を条件付ける」という新しい予測哲学を提案します

中核的貢献

新しい評価プロトコル:
- 低次元カオス系統での圧力試験
- 幾何学的認識を備えた補足指標(ワッサーシュタイン/SWD)の導入
- 有効予測時間(EPT)を提案し、信頼できる予測境界を定量化
新しい予測哲学:
- 動力学ではなく局所幾何学を条件付ける
- 楕円体チェーン(「真珠の糸」)によるアトラクタ形状の保存
- 幾何学的不確実性表現の提供
FERNモデル:
- 正規化フロー、最適輸送、Koopman演算子技術の融合
- UΛU⊤ + tの形式でのBrenier型マッピングの実装
- 失敗パターン分析のための完全な分光透明性の提供

方法の詳細

タスク定義

長期時間系列予測は、入力系列x₁, ..., xₙから条件付けされた多段階系列y₁, ..., yₙを予測することを目的とし、通常y₁ = xₙ₊₁がチャネル間で成立します。

モデルアーキテクチャ

1. 楕円体伝達(ET)層

中核的な考え方は、複雑な非線形動力学の探索を既知で良好に振る舞う線形系統に変換することであり、3つの幾何学的作用を含みます:

数学的表現:

T(y) ≈ T(y₀) + J_T(y₀)(y - y₀) = UΛU⊤y + (T(y₀) - UΛU⊤y₀)

ここで:

U: 直交回転行列(固有ベクトル)
Λ: 対角非負スケーリング行列(固有値)
残差項: 平行移動

2. Koopman拡張

U(z)Λ(z)U(z)⊤ → U(z)KΛ(z)K⊤U(z)⊤

ここでKは固定学習可能な2×2ブロック対角行列a -b; b aであり、複素固有値をシミュレートします。

3. マクロ構造: ANF拡張

エンコーダ-伝達器アーキテクチャを採用します:

アルゴリズム1: エンコーダ(X ↔ Z)と楕円体伝達層

1. z ← N(0,I); y₀ ← N(0,I)
2. i=1からK_enc=5まで:
   - z ← s*(x) ⊙ z + t(x)  # x→z スケール-シフト
   - x ← s*(z) ⊙ x + t(z)  # z→x スケール-シフト
3. y_rot ← KU(z)y₀         # 回転と自己スピンスケーリング
4. y_scaled ← Λy_rot       # 非負異方性スケーリング
5. y_unrot ← U(z)⊤K⊤y_scaled # 回転を戻す
6. y* ← y_unrot + t(z)     # 平行移動