2025-11-17T19:04:13.454652

Continual Learning for Adaptive AI Systems

Amin, Alam

Continual learning the ability of a neural network to learn multiple sequential tasks without catastrophic forgetting remains a central challenge in developing adaptive artificial intelligence systems. While deep learning models achieve state-of-the-art performance across domains, they remain limited by overfitting and forgetting. This paper introduces Cluster-Aware Replay (CAR), a hybrid continual learning framework that integrates a small, class-balanced replay buffer with a regularization term based on Inter-Cluster Fitness (ICF) in the feature space. The ICF loss penalizes overlapping feature representations between new and previously learned tasks, encouraging geometric separation in the latent space and reducing interference. Using the standard five-task Split CIFAR-10 benchmark with a ResNet-18 backbone, initial experiments demonstrate that CAR better preserves earlier task performance compared to fine-tuning alone. These findings are preliminary but highlight feature-space regularization as a promising direction for mitigating catastrophic forgetting.

academic

ক্রমাগত শিক্ষা অভিযোজিত কৃত্রিম বুদ্ধিমত্তা সিস্টেমের জন্য

মৌলিক তথ্য

পেপার আইডি: 2510.07648
শিরোনাম: ক্রমাগত শিক্ষা অভিযোজিত কৃত্রিম বুদ্ধিমত্তা সিস্টেমের জন্য
লেখক: Md Hasibul Amin, Tamzid Tanvi Alam
শ্রেণীবিভাগ: cs.LG (মেশিন লার্নিং)
প্রকাশনার সময়: ২০২৫ সালের ১২ অক্টোবর (arXiv v2)
পেপার লিঙ্ক: https://arxiv.org/abs/2510.07648

সারসংক্ষেপ

ক্রমাগত শিক্ষা—নিউরাল নেটওয়ার্কের বিপর্যয়কর বিস্মৃতি ছাড়াই একাধিক ক্রমিক কাজ শিখার ক্ষমতা—অভিযোজিত কৃত্রিম বুদ্ধিমত্তা সিস্টেম উন্নয়নের একটি মূল চ্যালেঞ্জ হিসেবে রয়ে গেছে। যদিও গভীর শিক্ষা মডেলগুলি বিভিন্ন ক্ষেত্রে অত্যাধুনিক কর্মক্ষমতা অর্জন করেছে, তবুও তারা অতিমাত্রায় ফিটিং এবং বিস্মৃতির সীমাবদ্ধতায় ভুগছে। এই পেপারটি ক্লাস্টার-সচেতন পুনরুদ্ধার (CAR) উপস্থাপন করে, যা একটি হাইব্রিড ক্রমাগত শিক্ষা কাঠামো যা ছোট, শ্রেণী-ভারসাম্যপূর্ণ পুনরুদ্ধার বাফারকে বৈশিষ্ট্য স্থানে ক্লাস্টার-মধ্যবর্তী ফিটনেস (ICF) এর উপর ভিত্তি করে একটি নিয়মিতকরণ পদ সহ একত্রিত করে। ICF ক্ষতি নতুন কাজ এবং পূর্বে শিখা কাজের মধ্যে ওভারল্যাপিং বৈশিষ্ট্য প্রতিনিধিত্বকে শাস্তি দেয়, সুপ্ত স্থানে জ্যামিতিক বিচ্ছেদ উৎসাহিত করে এবং হস্তক্ষেপ হ্রাস করে।

গবেষণা পটভূমি এবং প্রেরণা

মূল সমস্যা

এই গবেষণা নিউরাল নেটওয়ার্কে বিপর্যয়কর বিস্মৃতি সমস্যা সমাধানের লক্ষ্য রাখে, অর্থাৎ যখন মডেল নতুন কাজ শেখে, তখন এটি পূর্বে শিখা জ্ঞান দ্রুত হারায়। এটি জৈবিক বুদ্ধিমত্তার সাথে তীব্র বৈসাদৃশ্য তৈরি করে, মানুষের মস্তিষ্ক ক্রমাগত শিখতে পারে এবং পূর্ববর্তী দক্ষতা হারায় না।

সমস্যার গুরুত্ব

ব্যবহারিক প্রয়োগের চাহিদা: বাস্তব-বিশ্বের কৃত্রিম বুদ্ধিমত্তা সিস্টেমগুলিকে বিভিন্ন সময়ে নতুন কাজ শিখতে হবে, যেমন সুপারিশ সিস্টেমগুলিকে ব্যবহারকারীর পছন্দ পরিবর্তনের সাথে খাপ খাইয়ে নিতে হবে
সম্পদ দক্ষতা: সম্পূর্ণ মডেল পুনরায় প্রশিক্ষণ ব্যয়বহুল, ক্রমাগত শিক্ষা বর্ধিত আপডেট সক্ষম করে
জৈবিক অনুপ্রেরণা: মানব মস্তিষ্কের শিক্ষা প্রক্রিয়া অনুকরণ করা কৃত্রিম বুদ্ধিমত্তা উন্নয়নের একটি গুরুত্বপূর্ণ দিক

বিদ্যমান পদ্ধতির সীমাবদ্ধতা

নিয়মিতকরণ পদ্ধতি: EWC-এর মতো পদ্ধতি যদিও মেমরি দক্ষ, কিন্তু কাজের পার্থক্য বেশি হলে প্লাস্টিসিটি সীমাবদ্ধ করে
পুনরুদ্ধার পদ্ধতি: কার্যকর হলেও মেমরি এবং গোপনীয়তা সমস্যা রয়েছে
প্যারামিটার বিচ্ছেদ: Progressive Networks-এর মতো পদ্ধতি বিস্মৃতি নিশ্চিত করে কিন্তু মডেল আকার দ্রুত বৃদ্ধি করে
বৈশিষ্ট্য স্থান পদ্ধতি: তুলনামূলকভাবে কম অন্বেষণ করা হয়েছে, উন্নয়নের সুযোগ রয়েছে

গবেষণা প্রেরণা

লেখকরা বিশ্বাস করেন যে বিদ্যমান পদ্ধতিগুলি প্রধানত প্যারামিটার বা আউটপুট স্তরে সীমাবদ্ধতার উপর দৃষ্টি নিবদ্ধ করে, যখন মডেলের অভ্যন্তরীণ বৈশিষ্ট্য স্থানের জ্যামিতিক কাঠামোতে কম মনোযোগ দেয়। কাজের মধ্যে বৈশিষ্ট্য স্থানের বিচ্ছেদ স্পষ্টভাবে নিয়ন্ত্রণ করে, বিপর্যয়কর বিস্মৃতি প্রশমনের একটি কার্যকর পথ হতে পারে।

মূল অবদান

CAR কাঠামো প্রস্তাব: ছোট পুনরুদ্ধার বাফার এবং বৈশিষ্ট্য স্থান নিয়মিতকরণের সমন্বয়কারী হাইব্রিড পদ্ধতি
ICF ক্ষতি ডিজাইন: ক্লাস্টার-মধ্যবর্তী ফিটনেসের উপর ভিত্তি করে একটি উপন্যাস নিয়মিতকরণ পদ, কাজের মধ্যে বৈশিষ্ট্য বিচ্ছেদ প্রচার করে
জ্যামিতিক সীমাবদ্ধতা উদ্ভাবন: বৈশিষ্ট্য স্থানের জ্যামিতিক কাঠামোর উপর জোর দেয় শুধুমাত্র প্যারামিটার নিয়মিতকরণের পরিবর্তে
পরীক্ষামূলক যাচাইকরণ: Split CIFAR-10 বেঞ্চমার্কে পদ্ধতির কার্যকারিতা যাচাই করে
নতুন দিক উন্মোচন: বৈশিষ্ট্য স্থান-সচেতন ক্রমাগত শিক্ষা গবেষণার জন্য নতুন চিন্তাভাবনা প্রদান করে

পদ্ধতির বিস্তারিত ব্যাখ্যা

কাজের সংজ্ঞা

কাজের ক্রম $T = (T_1, ..., T_N)$ দেওয়া হলে, লক্ষ্য হল মডেলটি কাজ $T_N$ শেখার পরেও, সমস্ত পূর্ববর্তী কাজ $T_i$ (যেখানে $i < N$ ) এ ভাল কর্মক্ষমতা বজায় রাখা।

মডেল আর্কিটেকচার

নেটওয়ার্ক কাঠামো:

ResNet-18 কে মেরুদণ্ড নেটওয়ার্ক হিসাবে ব্যবহার করে
বৈশিষ্ট্য নিষ্কাশক: $f_θ(·)$ (গ্লোবাল গড় পুলিং স্তর পর্যন্ত)
শ্রেণীবিভাজক: $c_φ(·)$ (চূড়ান্ত সম্পূর্ণ সংযুক্ত স্তর)
ইনপুট $x$ -এর জন্য, এম্বেডিং $z = f_θ(x)$ , লজিট $y = c_φ(z)$

ক্লাস্টার-মধ্যবর্তী ফিটনেস ফাংশন (ICF)

সেন্ট্রয়েড গণনা: কাজ $T_k$ প্রশিক্ষণ সম্পন্ন হওয়ার পরে, প্রতিটি শ্রেণী $c$ -এর জন্য সেন্ট্রয়েড গণনা করুন:

$\mu_c = \frac{1}{|D_c|} \sum_{x_i \in D_c} \frac{f_θ(x_i)}{\|f_θ(x_i)\|_2}$

ICF ক্ষতি: কাজ $T_{k+1}$ প্রশিক্ষণের সময়, প্রতিটি নমুনা $x_j$ -এর জন্য সমস্ত পূর্বে শিখা শ্রেণীর সেন্ট্রয়েড থেকে বিচ্ছেদ উৎসাহিত করুন:

$L_{ICF} = -\sum_{c \in C_{prev}} \left\|\frac{f_θ(x_j)}{\|f_θ(x_j)\|_2} - \mu_c\right\|_2$

যেখানে $C_{prev}$ পূর্ববর্তী কাজের শ্রেণী সেট প্রতিনিধিত্ব করে।

সামগ্রিক ক্ষতি: $L_{total} = L_{CE} + λ · L_{ICF}$

যেখানে $L_{CE}$ বর্তমান কাজের নমুনা এবং পুনরুদ্ধার নমুনার উপর গণনা করা ক্রস-এন্ট্রপি ক্ষতি, $λ$ প্লাস্টিসিটি এবং স্থিতিশীলতা ভারসাম্যকারী হাইপারপ্যারামিটার।

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

বৈশিষ্ট্য স্থান জ্যামিতিক সীমাবদ্ধতা: ঐতিহ্যবাহী পদ্ধতি প্যারামিটার বা লজিটে ফোকাস করার বিপরীতে, CAR সরাসরি বৈশিষ্ট্য স্থানে জ্যামিতিক সীমাবদ্ধতা প্রয়োগ করে
স্বাভাবিকীকৃত দূরত্ব মেট্রিক: L2 স্বাভাবিকীকৃত বৈশিষ্ট্য ভেক্টর ব্যবহার করে দূরত্ব গণনা করে, পরিমাপের সামঞ্জস্য নিশ্চিত করে
সেন্ট্রয়েড-চালিত বিচ্ছেদ: পূর্ববর্তী কাজের সেন্ট্রয়েড থেকে দূরত্ব সর্বাধিক করে কাজের মধ্যে বিচ্ছেদ অর্জন করে
হাইব্রিড কৌশল: পুনরুদ্ধার এবং নিয়মিতকরণের সুবিধা একত্রিত করে, পারস্পরিক শক্তিশালীকরণ

পরীক্ষামূলক সেটআপ

ডেটাসেট

Split CIFAR-10: মানক 5-কাজ সেটআপ, প্রতিটি কাজে 2টি শ্রেণী রয়েছে
বিভাজন পদ্ধতি: কাজ 1: শ্রেণী 0-1, কাজ 2: শ্রেণী 2-3, ..., কাজ 5: শ্রেণী 8-9

মডেল কনফিগারেশন

মেরুদণ্ড নেটওয়ার্ক: ResNet-18, শূন্য থেকে প্রশিক্ষিত
অপ্টিমাইজার: Adam, শিক্ষার হার 0.001
প্রশিক্ষণ সেটআপ: প্রতিটি কাজে 20 এপোক, ব্যাচ আকার 32
পুনরুদ্ধার বাফার: প্রতি শ্রেণীতে 20টি নমুনা

মূল্যায়ন মেট্রিক্স

গড় নির্ভুলতা: সমস্ত কাজ সম্পন্ন হওয়ার পরে বিভিন্ন কাজে গড় নির্ভুলতা
কাজ-নির্দিষ্ট নির্ভুলতা: প্রতিটি কাজের সংরক্ষণ বিশ্লেষণ করে
বিস্মৃতির মাত্রা: কাজের শিখর নির্ভুলতা এবং চূড়ান্ত নির্ভুলতার পার্থক্য

তুলনামূলক পদ্ধতি

সূক্ষ্ম-সুর: সাধারণ সূক্ষ্ম-সুর বেসলাইন
EWC: স্থিতিস্থাপক ওজন সংহতকরণ
iCaRL: বর্ধিত শ্রেণীবিভাজক এবং প্রতিনিধিত্ব শিক্ষা
SCR: বৈপরীত্যমূলক পুনরুদ্ধার পদ্ধতি

পরীক্ষামূলক ফলাফল

প্রধান ফলাফল

কর্মক্ষমতা তুলনা (Split CIFAR-10 গড় নির্ভুলতা):

সূক্ষ্ম-সুর: 20-25%
EWC: 35-45%
iCaRL: 65-75%
SCR: >80%
CAR: 39.8%

কাজ-নির্দিষ্ট কর্মক্ষমতা:

সম্পন্ন কাজ	T1	T2	T3	T4	T5	গড়
কাজ 1	57	-	-	-	-	57.0
কাজ 2	50	67	-	-	-	58.5
কাজ 3	28	10	72	-	-	36.7
কাজ 4	12	12	40	70	-	33.5
কাজ 5	12	12	40	65	70	39.8

মূল আবিষ্কার

প্রাথমিক সংরক্ষণ প্রভাব ভাল: কাজ 2 সম্পন্ন হওয়ার পরে, কাজ 1 নির্ভুলতা মাত্র 7 শতাংশ পয়েন্ট হ্রাস পায় (57%→50%)
জটিলতা বৃদ্ধির সাথে অবনতি: কাজ 3 এর পরে উল্লেখযোগ্য হ্রাস দেখা যায়, যা নির্দেশ করে যে বর্তমান নিয়মিতকরণ ওজন λ অপর্যাপ্ত হতে পারে
সাধারণ বেসলাইনের চেয়ে উন্নত: সূক্ষ্ম-সুরের চেয়ে স্পষ্টভাবে উন্নত, কিন্তু পরিপক্ক পুনরুদ্ধার পদ্ধতির সাথে এখনও ব্যবধান রয়েছে

বিলোপন পরীক্ষা

পদ্ধতি	গড় নির্ভুলতা
সূক্ষ্ম-সুর (পুনরুদ্ধার ছাড়া, λ=0)	22.0%
শুধুমাত্র পুনরুদ্ধার (λ=0)	28.5%
শুধুমাত্র ICF (পুনরুদ্ধার ছাড়া)	25.9%
CAR (পুনরুদ্ধার+ICF)	51.1%

বিশ্লেষণ: ICF ক্ষতি সত্যিই পুনরুদ্ধার পদ্ধতিতে অতিরিক্ত উন্নতি প্রদান করে, বৈশিষ্ট্য স্থান নিয়মিতকরণের কার্যকারিতা যাচাই করে।

বিস্মৃতি বিশ্লেষণ

প্রতিটি কাজের বিস্মৃতির মাত্রা (শিখর নির্ভুলতা - চূড়ান্ত নির্ভুলতা):

কাজ 1: 45 শতাংশ পয়েন্ট
কাজ 2: 55 শতাংশ পয়েন্ট
কাজ 3: 32 শতাংশ পয়েন্ট
কাজ 4: 5 শতাংশ পয়েন্ট

স্পষ্ট সময়গত গ্রেডিয়েন্ট প্রভাব দেখায়, যেখানে আগের কাজগুলি আরও গুরুতর বিস্মৃতি অনুভব করে।

উপসংহার এবং আলোচনা

প্রধান উপসংহার

বৈশিষ্ট্য স্থান নিয়মিতকরণ কার্যকর: ICF ক্ষতি প্রাথমিক কাজের বিস্মৃতি হ্রাস করতে পারে
হাইব্রিড পদ্ধতির সুবিধা: পুনরুদ্ধার এবং বৈশিষ্ট্য সীমাবদ্ধতা একত্রিত করা প্রতিটি পৃথকভাবে ব্যবহারের চেয়ে আরও কার্যকর
অভিযোজিত সমন্বয়ের প্রয়োজন: কাজের জটিলতা বৃদ্ধির সাথে সাথে, নিয়মিতকরণ শক্তি গতিশীলভাবে সামঞ্জস্য করতে হবে
জ্যামিতিক দৃষ্টিভঙ্গি প্রতিশ্রুতিশীল: বৈশিষ্ট্য স্থানের জ্যামিতি কোণ থেকে ক্রমাগত শিক্ষা সমস্যা সমাধান করা সম্ভাবনাময়

সীমাবদ্ধতা

কর্মক্ষমতা ব্যবধান: অত্যাধুনিক পদ্ধতির সাথে (যেমন SCR) এখনও উল্লেখযোগ্য ব্যবধান রয়েছে
হাইপারপ্যারামিটার সংবেদনশীলতা: λ-এর নির্বাচন কর্মক্ষমতায় উল্লেখযোগ্য প্রভাব ফেলে, আরও ভাল অভিযোজিত প্রক্রিয়া প্রয়োজন
স্কেলেবিলিটি সমস্যা: শুধুমাত্র তুলনামূলকভাবে সহজ Split CIFAR-10 এ যাচাই করা হয়েছে, বৃহত্তর স্কেল যাচাইকরণ প্রয়োজন
তাত্ত্বিক বিশ্লেষণ অপর্যাপ্ত: ICF ক্ষতির সংগতি এবং সর্বোত্তমতার জন্য তাত্ত্বিক গ্যারান্টির অভাব

ভবিষ্যত দিকনির্দেশনা

পদ্ধতিগত হাইপারপ্যারামিটার সুর: অভিযোজিত λ সমন্বয় প্রক্রিয়া উন্নয়ন করা
দূরত্ব-সচেতন উদ্দেশ্য: আরও জটিল দূরত্ব মেট্রিক্স এবং বিচ্ছেদ উদ্দেশ্য অন্বেষণ করা
বৃহত্তর ডেটাসেটে সম্প্রসারণ: CIFAR-100, ImageNet ইত্যাদি ডেটাসেটে যাচাই করা
তাত্ত্বিক ভিত্তি: বৈশিষ্ট্য স্থান বিচ্ছেদ এবং বিস্মৃতি প্রশমনের মধ্যে তাত্ত্বিক সংযোগ স্থাপন করা

গভীর মূল্যায়ন

সুবিধা

উদ্ভাবনী দৃষ্টিভঙ্গি: বৈশিষ্ট্য স্থানের জ্যামিতি কোণ থেকে ক্রমাগত শিক্ষা সমস্যায় প্রবেশ করে, নতুন চিন্তাভাবনা প্রদান করে
পদ্ধতি সরলতা: ICF ক্ষতি ডিজাইন সহজ এবং স্বজ্ঞাত, বোঝা এবং বাস্তবায়ন সহজ
যুক্তিসঙ্গত পরীক্ষামূলক ডিজাইন: উপযুক্ত বিলোপন পরীক্ষা এবং তুলনামূলক বিশ্লেষণ অন্তর্ভুক্ত করে
সৎ প্রতিবেদন: লেখকরা সৎভাবে স্বীকার করেন যে এটি প্রাথমিক ফলাফল, আরও উন্নতির প্রয়োজন

অসুবিধা

সীমিত কর্মক্ষমতা: মানক বেঞ্চমার্কে কর্মক্ষমতা যথেষ্ট উল্লেখযোগ্য নয়, SOTA পদ্ধতির সাথে বড় ব্যবধান
ছোট পরীক্ষার স্কেল: শুধুমাত্র Split CIFAR-10 এ যাচাই করা হয়েছে, ব্যাপক পরীক্ষার অভাব
অপর্যাপ্ত তাত্ত্বিক গভীরতা: পদ্ধতির কার্যকারিতার গভীর তাত্ত্বিক বিশ্লেষণের অভাব
হাইপারপ্যারামিটার নির্ভরতা: পদ্ধতি λ-এর নির্বাচনের প্রতি সংবেদনশীল, ব্যবহারিকতা সীমিত

প্রভাব

একাডেমিক অবদান: ক্রমাগত শিক্ষা ক্ষেত্রে নতুন গবেষণা দিকনির্দেশনা প্রদান করে
ব্যবহারিক মূল্য: বর্তমান পর্যায়ে ব্যবহারিক মূল্য সীমিত, আরও উন্নতি প্রয়োজন
পুনরুৎপাদনযোগ্যতা: পদ্ধতি বর্ণনা স্পষ্ট, বাস্তবায়ন তুলনামূলকভাবে সহজ
অনুপ্রেরণামূলক: পরবর্তী গবেষণার জন্য মূল্যবান চিন্তাভাবনা প্রদান করে

প্রযোজ্য পরিস্থিতি

সম্পদ-সীমিত পরিবেশ: পুনরুদ্ধার বাফার ছোট পরিস্থিতি
উচ্চ কাজ সাদৃশ্য: বৈশিষ্ট্য স্থান বিচ্ছেদ আরও স্পষ্ট কাজ
গবেষণা প্রোটোটাইপ: বৈশিষ্ট্য স্থান নিয়মিতকরণ গবেষণার সূচনা বিন্দু হিসাবে
শিক্ষামূলক উদ্দেশ্য: ধারণা স্পষ্ট, শিক্ষামূলক প্রদর্শনের জন্য উপযুক্ত

তথ্যসূত্র

পেপারটি ক্রমাগত শিক্ষা ক্ষেত্রের গুরুত্বপূর্ণ কাজ উদ্ধৃত করে, যার মধ্যে রয়েছে:

Kirkpatrick et al. (2017): EWC পদ্ধতি
Rebuffi et al. (2017): iCaRL পদ্ধতি
Lopez-Paz & Ranzato (2017): GEM পদ্ধতি
Liu et al. (2023): সেন্ট্রয়েড দূরত্ব পাতন
Gu et al. (2023): রৈখিক বিভাজনযোগ্যতা সংরক্ষণ

সামগ্রিক মূল্যায়ন: এটি একটি অন্বেষণমূলক গবেষণা কাজ, যা বৈশিষ্ট্য স্থানের জ্যামিতি কোণ থেকে ক্রমাগত শিক্ষা সমস্যা সমাধানের নতুন চিন্তাভাবনা প্রস্তাব করে। যদিও বর্তমান পরীক্ষামূলক ফলাফল যথেষ্ট উল্লেখযোগ্য নয়, তবে এটি এই ক্ষেত্রে মূল্যবান গবেষণা দিকনির্দেশনা প্রদান করে। লেখকরা সৎভাবে পদ্ধতির সীমাবদ্ধতা স্বীকার করেন এবং স্পষ্ট উন্নতি দিকনির্দেশনা প্রস্তাব করেন, যা ভাল একাডেমিক মনোভাব প্রতিফলিত করে।