Hybrid Interval Type-2 Mamdani-TSK Fuzzy System for Regression Analysis
Bhatia, de Amorim, De Feo
Regression analysis is employed to examine and quantify the relationships between input variables and a dependent and continuous output variable. It is widely used for predictive modelling in fields such as finance, healthcare, and engineering. However, traditional methods often struggle with real-world data complexities, including uncertainty and ambiguity. While deep learning approaches excel at capturing complex non-linear relationships, they lack interpretability and risk over-fitting on small datasets. Fuzzy systems provide an alternative framework for handling uncertainty and imprecision, with Mamdani and Takagi-Sugeno-Kang (TSK) systems offering complementary strengths: interpretability versus accuracy. This paper presents a novel fuzzy regression method that combines the interpretability of Mamdani systems with the precision of TSK models. The proposed approach introduces a hybrid rule structure with fuzzy and crisp components and dual dominance types, enhancing both accuracy and explainability. Evaluations on benchmark datasets demonstrate state-of-the-art performance in several cases, with rules maintaining a component similar to traditional Mamdani systems while improving precision through improved rule outputs. This hybrid methodology offers a balanced and versatile tool for predictive modelling, addressing the trade-off between interpretability and accuracy inherent in fuzzy systems. In the 6 datasets tested, the proposed approach gave the best fuzzy methodology score in 4 datasets, out-performed the opaque models in 2 datasets and produced the best overall score in 1 dataset with the improvements in RMSE ranging from 0.4% to 19%.
academic
হাইব্রিড ইন্টারভাল টাইপ-২ ম্যামডানি-টিএসকে ফাজি সিস্টেম রিগ্রেশন বিশ্লেষণের জন্য
রিগ্রেশন বিশ্লেষণ আর্থিক, চিকিৎসা এবং প্রকৌশল ক্ষেত্রে পূর্বাভাস মডেলিংয়ে ব্যাপকভাবে প্রয়োগ করা হয়, যা ইনপুট ভেরিয়েবল এবং ক্রমাগত আউটপুট ভেরিয়েবলের মধ্যে সম্পর্ক পরীক্ষা এবং পরিমাপ করতে ব্যবহৃত হয়। তবে, প্রথাগত পদ্ধতিগুলি বাস্তব-বিশ্বের ডেটার জটিলতা পরিচালনায় সমস্যার সম্মুখীন হয়, যার মধ্যে অনিশ্চয়তা এবং অস্পষ্টতা রয়েছে। যদিও গভীর শিক্ষার পদ্ধতিগুলি জটিল অ-রৈখিক সম্পর্ক ক্যাপচার করতে দক্ষ, তবে তাদের ব্যাখ্যাযোগ্যতার অভাব রয়েছে এবং ছোট ডেটাসেটে ওভারফিটিংয়ের ঝুঁকি রয়েছে। ফাজি সিস্টেমগুলি অনিশ্চয়তা এবং অনির্ভুলতা পরিচালনার জন্য একটি বিকল্প কাঠামো প্রদান করে, যেখানে ম্যামডানি এবং তাকাগি-সুজেনো-কাং (টিএসকে) সিস্টেমগুলি পরিপূরক সুবিধা প্রদান করে: ব্যাখ্যাযোগ্যতা এবং নির্ভুলতা। এই পেপারটি একটি উপন্যাস ফাজি রিগ্রেশন পদ্ধতি প্রস্তাব করে যা ম্যামডানি সিস্টেমের ব্যাখ্যাযোগ্যতা এবং টিএসকে মডেলের নির্ভুলতা একত্রিত করে। এই পদ্ধতিটি ফাজি এবং স্পষ্ট উপাদান এবং দ্বৈত আধিপত্য ধরনের সাথে একটি হাইব্রিড নিয়ম কাঠামো প্রবর্তন করে, যখন নির্ভুলতা এবং ব্যাখ্যাযোগ্যতা উভয়ই বৃদ্ধি করে।
এমন একটি হাইব্রিড কাঠামো বিকাশ করা যা ম্যামডানি সিস্টেমের ব্যাখ্যাযোগ্যতা বজায় রাখতে পারে এবং একই সাথে টিএসকে সিস্টেমের নির্ভুলতা অর্জন করতে পারে, পূর্বাভাস মডেলিংয়ের জন্য একটি ভারসাম্যপূর্ণ এবং বহুমুখী সরঞ্জাম প্রদান করে।
হাইব্রিড নিয়ম কাঠামো: ম্যামডানি সিস্টেমের ভাষাগত ব্যাখ্যাযোগ্যতা এবং টিএসকে মডেলের সংখ্যাগত নির্ভুলতা একত্রিত করে একটি নতুন ফাজি রিগ্রেশন সিস্টেম প্রস্তাব করা
দ্বৈত আধিপত্য প্রক্রিয়া: দুটি নিয়ম ওজন গণনা পদ্ধতি প্রবর্তন করা—ফাজি সমর্থন/আত্মবিশ্বাস-ভিত্তিক এবং ত্রুটি-ভিত্তিক আধিপত্য
সীমাবদ্ধ টিএসকে উপাদান: টিএসকে ফাংশন আউটপুট সংশ্লিষ্ট ফাজি সেটের সীমানার মধ্যে সীমাবদ্ধ, ব্যাখ্যাযোগ্যতা বজায় রাখা
ইন্টারভাল টাইপ-२ ফাজি সেট: অনিশ্চয়তা আরও ভালভাবে পরিচালনা করতে ইন্টারভাল টাইপ-२ ফাজি সেট ব্যবহার করা
এসিও অপ্টিমাইজেশন: নিয়ম সাবসেট নির্বাচনের জন্য অ্যান্ট কলোনি অপ্টিমাইজেশন অ্যালগরিদম গ্রহণ করা, মডেল সংক্ষিপ্ততা এবং নির্ভুলতার ভারসাম্য রক্ষা করা
ইনপুট ভেরিয়েবল x1,x2,...,xn এবং ক্রমাগত আউটপুট ভেরিয়েবল y দেওয়া হলে, লক্ষ্য হল এমন একটি রিগ্রেশন মডেল প্রতিষ্ঠা করা যা নির্ভুল এবং ব্যাখ্যাযোগ্য উভয়ই, যা ডেটায় অনিশ্চয়তা এবং অস্পষ্টতা পরিচালনা করতে পারে।
বিদ্যমান কাজের তুলনায়, এই পদ্ধতি ব্যাখ্যাযোগ্যতা বজায় রেখে নির্ভুলতা উল্লেখযোগ্যভাবে বৃদ্ধি করে, প্রথাগত পদ্ধতিতে নির্ভুলতা এবং ব্যাখ্যাযোগ্যতার মধ্যে ভারসাম্য সমস্যা সমাধান করে।
१. কার্যকর ভারসাম্য: ফাজি সিস্টেমে ব্যাখ্যাযোগ্যতা এবং নির্ভুলতার মধ্যে সফলভাবে ভারসাম্য রক্ষা করেছে
२. উল্লেখযোগ্য উন্নতি: বেশিরভাগ বেঞ্চমার্ক ডেটাসেটে সর্বোত্তম বা কাছাকাছি সর্বোত্তম কর্মক্ষমতা অর্জন করেছে
३. ব্যাখ্যাযোগ্যতা বজায় রাখা: নিয়ম ফর্ম ঐতিহ্যবাহী ম্যামডানি সিস্টেমের অনুরূপ, বোঝা সহজ
४. শক্তিশালী শক্তিশালীতা: বিভিন্ন ক্ষেত্র এবং ডেটাসেটে স্থিতিশীল কর্মক্ষমতা
१. জটিলতা ভারসাম্য: উচ্চ-ক্রম টিএসকে ফাংশন ওভারফিটিং হতে পারে
२. অপ্টিমাইজেশন স্থান: কিছু ডেটাসেটে এখনও কর্মক্ষমতা উন্নতির জায়গা রয়েছে
३. গণনামূলক জটিলতা: এসিও অপ্টিমাইজেশন গণনা খরচ বৃদ্ধি করে
४. প্যারামিটার সংবেদনশীলতা: ফাজি সেট সংখ্যা এবং টিএসকে ফাংশন ক্রম যুক্তিসঙ্গতভাবে সেট করা প্রয়োজন
१. অপ্টিমাইজেশন বৃদ্ধি: অন্যান্য মেটাহিউরিস্টিক অপ্টিমাইজেশন কৌশল অন্বেষণ করা
२. ডোমেইন অভিযোজন: নির্দিষ্ট ডোমেইনের জন্য প্রাক-প্রক্রিয়াকরণ এবং বৈশিষ্ট্য নির্বাচন
३. সম্প্রসারিত মূল্যায়ন: আরও ডেটাসেট এবং মূল্যায়ন মেট্রিক্সের যাচাইকরণ
४. তাত্ত্বিক বিশ্লেষণ: সংমিশ্রণ এবং জটিলতার গভীর বিশ্লেষণ
१. শক্তিশালী উদ্ভাবনী: সীমাবদ্ধ টিএসকে উপাদান সহ হাইব্রিড ফাজি সিস্টেম প্রথম প্রস্তাব
२. উচ্চ ব্যবহারিক মূল্য: বাস্তব প্রয়োগে মূল সমস্যা সমাধান করে
३. পর্যাপ্ত পরীক্ষা: একাধিক বেঞ্চমার্ক ডেটাসেট যাচাইকরণ, বিস্তারিত ব্যাখ্যাযোগ্যতা বিশ্লেষণ অন্তর্ভুক্ত
४. যুক্তিসঙ্গত পদ্ধতি: প্রযুক্তি ডিজাইন যুক্তি স্পষ্ট, তাত্ত্বিক ভিত্তি দৃঢ়
१. অপর্যাপ্ত তাত্ত্বিক বিশ্লেষণ: সংমিশ্রণ এবং জটিলতার তাত্ত্বিক গ্যারান্টির অভাব
२. প্যারামিটার নির্বাচন নির্দেশনা: সিস্টেমেটিক প্যারামিটার নির্বাচন কৌশল প্রদান করা হয়নি
३. গণনামূলক দক্ষতা: এসিও অপ্টিমাইজেশনের গণনা জটিলতা বিশ্লেষণ অপর্যাপ্ত
४. প্রয়োগযোগ্যতা সীমানা: পদ্ধতি প্রয়োগযোগ্য শর্তের আলোচনা সীমিত
१. একাডেমিক অবদান: ফাজি সিস্টেম ক্ষেত্রে নতুন গবেষণা দিকনির্দেশনা প্রদান করে
२. ব্যবহারিক মূল্য: ব্যাখ্যাযোগ্য এআই প্রয়োজন এমন পরিস্থিতিতে গুরুত্বপূর্ণ প্রয়োগ মূল্য রয়েছে
३. পুনরুৎপাদনযোগ্যতা: পদ্ধতি বর্ণনা বিস্তারিত, পুনরুৎপাদন এবং সম্প্রসারণ সহজ
१. আর্থিক ঝুঁকি মূল্যায়ন: ব্যাখ্যাযোগ্য পূর্বাভাস মডেল প্রয়োজন
२. চিকিৎসা নির্ণয়: স্বচ্ছ সিদ্ধান্ত প্রক্রিয়া প্রয়োজন
३. প্রকৌশল নিয়ন্ত্রণ: সিস্টেম আচরণ বোঝা প্রয়োজন এমন নিয়ন্ত্রণ প্রয়োগ
४. ছোট ডেটাসেট রিগ্রেশন: ঐতিহ্যবাহী গভীর শিক্ষা পদ্ধতি অনুপযুক্ত পরিস্থিতি
পেপারটি ফাজি সিস্টেম, বিবর্তনীয় অ্যালগরিদম এবং মেশিন লার্নিং ক্ষেত্রের গুরুত্বপূর্ণ সাহিত্য উদ্ধৃত করে, যার মধ্যে রয়েছে জাদেহের ফাজি যুক্তি ভিত্তি কাজ, ম্যামডানি এবং টিএসকের ক্লাসিক ফাজি সিস্টেম, এবং সাম্প্রতিক জেনেটিক ফাজি সিস্টেম এবং ইন্টারভাল টাইপ-२ ফাজি সেট গবেষণা।
সামগ্রিক মূল্যায়ন: এটি একটি উচ্চ-মানের একাডেমিক পেপার যা উদ্ভাবনী হাইব্রিড ফাজি সিস্টেম পদ্ধতি প্রস্তাব করে, ব্যাখ্যাযোগ্যতা বজায় রেখে রিগ্রেশন নির্ভুলতা উল্লেখযোগ্যভাবে উন্নত করে। পদ্ধতি ডিজাইন যুক্তিসঙ্গত, পরীক্ষা যাচাইকরণ পর্যাপ্ত, ফাজি সিস্টেম এবং ব্যাখ্যাযোগ্য এআই ক্ষেত্রে গুরুত্বপূর্ণ অবদান মূল্য রয়েছে।