2025-11-14T07:52:11.150813

Hybrid Interval Type-2 Mamdani-TSK Fuzzy System for Regression Analysis

Bhatia, de Amorim, De Feo

Regression analysis is employed to examine and quantify the relationships between input variables and a dependent and continuous output variable. It is widely used for predictive modelling in fields such as finance, healthcare, and engineering. However, traditional methods often struggle with real-world data complexities, including uncertainty and ambiguity. While deep learning approaches excel at capturing complex non-linear relationships, they lack interpretability and risk over-fitting on small datasets. Fuzzy systems provide an alternative framework for handling uncertainty and imprecision, with Mamdani and Takagi-Sugeno-Kang (TSK) systems offering complementary strengths: interpretability versus accuracy. This paper presents a novel fuzzy regression method that combines the interpretability of Mamdani systems with the precision of TSK models. The proposed approach introduces a hybrid rule structure with fuzzy and crisp components and dual dominance types, enhancing both accuracy and explainability. Evaluations on benchmark datasets demonstrate state-of-the-art performance in several cases, with rules maintaining a component similar to traditional Mamdani systems while improving precision through improved rule outputs. This hybrid methodology offers a balanced and versatile tool for predictive modelling, addressing the trade-off between interpretability and accuracy inherent in fuzzy systems. In the 6 datasets tested, the proposed approach gave the best fuzzy methodology score in 4 datasets, out-performed the opaque models in 2 datasets and produced the best overall score in 1 dataset with the improvements in RMSE ranging from 0.4% to 19%.

academic

ハイブリッド区間型2型Mamdani-TSKファジィシステムの回帰分析への応用

基本情報

論文ID: 2510.13437
タイトル: Hybrid Interval Type-2 Mamdani-TSK Fuzzy System for Regression Analysis
著者: Ashish Bhatia, Renato Cordeiro de Amorim, Vito De Feo（エセックス大学、イギリス）
分類: cs.LG（機械学習）
発表日: 2025年10月15日
論文リンク: https://arxiv.org/abs/2510.13437v1

要約

回帰分析は金融、医療、工学などの分野における予測モデリングに広く応用されており、入力変数と連続出力変数の関係を検証および定量化するために使用されている。しかし、従来の手法は不確実性と曖昧性を含む現実世界データの複雑性への対応に困難を抱えている。深層学習手法は複雑な非線形関係の捕捉に優れているが、解釈可能性に欠け、小規模データセットでの過学習のリスクがある。ファジィシステムは不確実性と不正確性に対処するための代替フレームワークを提供し、Mamdaniシステムと高木-菅野-カン（TSK）システムは相補的な利点を提供する：解釈可能性と精度である。本論文は、Mamdaniシステムの解釈可能性とTSKモデルの精度を組み合わせた新規なファジィ回帰手法を提案する。本手法は、ファジィ成分と明確な成分を有し、二重支配型を備えたハイブリッド規則構造を導入し、精度と解釈可能性の両方を向上させる。

研究背景と動機

問題定義

従来の回帰手法が現実世界データの処理において直面する主要な課題：

不確実性と曖昧性：現実データに内在する不確実性と言語情報
解釈可能性と精度のトレードオフ：深層学習モデルは精度が高いが解釈可能性に欠ける
小規模データセット問題：複雑なモデルは小規模データセットでの学習時に過学習しやすい

既存手法の限界

従来の回帰手法：正確で明確な数値関係を仮定し、不確実性への対応が困難
深層学習手法：解釈可能性に欠け、パラメータが多く、小規模データセットの学習に不適切
Mamdaniファジィシステム：解釈可能性は高いが精度に限界があり、粗粒度の分割により性能が低下
TSKファジィシステム：精度は高いが解釈可能性に欠け、ファジィシステム使用の本来の目的に反する

研究動機

Mamdaniシステムの解釈可能性とTSKシステムの精度の両方を保持するハイブリッドフレームワークを開発し、予測モデリングのための均衡のとれた多機能なツールを提供する。

核心的貢献

ハイブリッド規則構造：Mamdaniシステムの言語的解釈可能性とTSKモデルの数値的精度を組み合わせた新規なファジィ回帰システムを提案
二重支配メカニズム：ファジィサポート度/信頼度に基づく支配度とエラーに基づく支配度の2つの規則重み付け計算方法を導入
制約付きTSK成分：TSK関数の出力を対応するファジィ集合の境界内に制限し、解釈可能性を維持
区間型2型ファジィ集合：区間型2型ファジィ集合を使用して不確実性をより適切に処理
ACO最適化：蟻群最適化アルゴリズムを採用して規則部分集合選択を実施し、モデルのコンパクト性と精度のバランスを取る

手法の詳細

タスク定義

入力変数 $x_1, x_2, ..., x_n$ と連続出力変数 $y$ が与えられたとき、目標は精度と解釈可能性の両方を備え、データ内の不確実性と曖昧性に対応できる回帰モデルを構築することである。

モデルアーキテクチャ

1. 区間型2型ファジィ集合のファジィ化

入力と出力は区間型2型ファジィ集合を使用してファジィ化される：

$\tilde{F} = \int_{x \in X} \left[ \int_{u \in [\underline{\mu}(x), \overline{\mu}(x)]} 1/u \right] /x$

ここで $\underline{\mu}(x)$ と $\overline{\mu}(x)$ はそれぞれ下界と上界の帰属度である。

2. ハイブリッド規則構造

各規則は2つの後件成分を含む：

規則形式：

IF x1 is F1 AND ... AND xn is Fn 
THEN (y is G, y = f(x1, x2, ..., xn))

ファジィ成分：従来のMamdani後件で、出力ファジィ集合を指定
TSK関数成分：n次多項式関数で、明確な出力値を提供

TSK関数制約： $y_{output} \in [LowerBound(F_{upper}), UpperBound(F_{upper})]$

TSK出力が常に対応するファジィ集合の境界内にあることを保証する。

3. 二重重み付けメカニズム

ファジィ規則重み付け：

サポート度： $Support(A_j \to \tilde{C}_j) = \frac{1}{|N|} \sum_{p=1}^N \mu_{A_j}(x_p) \cdot \mu_{C_j}(y_p)$
信頼度： $Confidence(A_j \to \tilde{C}_j) = \frac{\sum_{p=1}^N \mu_{A_j}(x_p) \cdot \mu_{C_j}(y_p)}{\sum_{p=1}^N \mu_{A_j}(x_p)}$
支配度： $D = [S_{Rule\_lower} \cdot C_{lower}, S_{Rule\_upper} \cdot C_{upper}]$