2025-11-23T22:52:17.543262

FedGTEA: Federated Class-Incremental Learning with Gaussian Task Embedding and Alignment

Li, Bidkhori
We introduce a novel framework for Federated Class Incremental Learning, called Federated Gaussian Task Embedding and Alignment (FedGTEA). FedGTEA is designed to capture task-specific knowledge and model uncertainty in a scalable and communication-efficient manner. At the client side, the Cardinality-Agnostic Task Encoder (CATE) produces Gaussian-distributed task embeddings that encode task knowledge, address statistical heterogeneity, and quantify data uncertainty. Importantly, CATE maintains a fixed parameter size regardless of the number of tasks, which ensures scalability across long task sequences. On the server side, FedGTEA utilizes the 2-Wasserstein distance to measure inter-task gaps between Gaussian embeddings. We formulate the Wasserstein loss to enforce inter-task separation. This probabilistic formulation not only enhances representation learning but also preserves task-level privacy by avoiding the direct transmission of latent embeddings, aligning with the privacy constraints in federated learning. Extensive empirical evaluations on popular datasets demonstrate that FedGTEA achieves superior classification performance and significantly mitigates forgetting, consistently outperforming strong existing baselines.
academic

FedGTEA: গাউসিয়ান টাস্ক এম্বেডিং এবং সারিবদ্ধকরণ সহ ফেডারেটেড ক্লাস-ইনক্রিমেন্টাল লার্নিং

মৌলিক তথ্য

  • পেপার আইডি: 2510.12927
  • শিরোনাম: FedGTEA: Federated Class-Incremental Learning with Gaussian Task Embedding and Alignment
  • লেখক: Haolin Li, Hoda Bidkhori (জর্জ মেসন বিশ্ববিদ্যালয়)
  • শ্রেণীবিভাগ: cs.LG stat.ML
  • প্রকাশনা সম্মেলন: AISTATS 2026, তাঞ্জিয়ার, মরক্কো
  • পেপার লিঙ্ক: https://arxiv.org/abs/2510.12927

সারসংক্ষেপ

এই পেপারটি একটি নতুন ফেডারেটেড ক্লাস-ইনক্রিমেন্টাল লার্নিং ফ্রেমওয়ার্ক FedGTEA (ফেডারেটেড গাউসিয়ান টাস্ক এম্বেডিং এবং সারিবদ্ধকরণ) প্রস্তাব করে। এই ফ্রেমওয়ার্কটি স্কেলেবল এবং যোগাযোগ-দক্ষ পদ্ধতিতে টাস্ক-নির্দিষ্ট জ্ঞান এবং মডেল অনিশ্চয়তা ক্যাপচার করে। ক্লায়েন্ট পক্ষে, কার্ডিনালিটি-অজ্ঞেয় টাস্ক এনকোডার (CATE) গাউসিয়ান বিতরণের টাস্ক এম্বেডিং তৈরি করে, যা টাস্ক জ্ঞান এনকোড করে, পরিসংখ্যানগত বৈষম্য সমাধান করে এবং ডেটা অনিশ্চয়তা পরিমাপ করে। CATE-এর মূল বৈশিষ্ট্য হল টাস্ক সংখ্যা নির্বিশেষে স্থির প্যারামিটার স্কেল বজায় রাখা, যা দীর্ঘ টাস্ক সিকোয়েন্সের স্কেলেবিলিটি নিশ্চিত করে। সার্ভার পক্ষে, FedGTEA গাউসিয়ান এম্বেডিং-এর মধ্যে টাস্ক ফাঁক পরিমাপ করতে 2-Wasserstein দূরত্ব ব্যবহার করে, Wasserstein ক্ষতির মাধ্যমে টাস্ক-মধ্যস্থ বিচ্ছিন্নতা প্রয়োগ করে। এই সম্ভাব্যতামূলক প্রণয়ন শুধুমাত্র প্রতিনিধিত্ব শিক্ষা বৃদ্ধি করে না, বরং সরাসরি সুপ্ত এম্বেডিং স্থানান্তর এড়িয়ে টাস্ক-স্তরের গোপনীয়তা রক্ষা করে।

গবেষণা পটভূমি এবং প্রেরণা

সমস্যা সংজ্ঞা

ফেডারেটেড ক্লাস-ইনক্রিমেন্টাল লার্নিং (FCIL) হল ফেডারেটেড লার্নিং (FL) এবং ক্লাস-ইনক্রিমেন্টাল লার্নিং (CIL)-এর সংমিশ্রণ, যা একযোগে তিনটি মূল চ্যালেঞ্জ সমাধান করতে হয়:

  1. বিপর্যয়মূলক বিস্মৃতি: ক্লায়েন্ট স্থানীয় এবং বৈশ্বিক সমন্বয় প্রক্রিয়া উভয় ক্ষেত্রেই ঘটে
  2. পরিসংখ্যানগত বৈষম্য: ক্লায়েন্টদের মধ্যে ডেটা বিতরণ সাধারণত স্বাধীন এবং সমানভাবে বিতরণকৃত নয়
  3. টাস্ক প্রসঙ্গ অস্পষ্টতা: পরীক্ষার সময় টাস্ক পরিচয়ের অভাব শব্দার্থগত বিচ্যুতি এবং কর্মক্ষমতা হ্রাস ঘটায়

গবেষণা প্রেরণা

বিদ্যমান FCIL পদ্ধতিগুলি প্রধানত ডেটা-স্তরের বৈশিষ্ট্য ব্যবহারের উপর দৃষ্টি নিবদ্ধ করে, যখন টাস্ক-স্তরের প্রসঙ্গের গুরুত্ব উপেক্ষা করে। চিত্র 1-এ দেখা যায়, একই ইনপুট বিভিন্ন টাস্কে পরস্পরবিরোধী উত্তর তৈরি করতে পারে (উদাহরণস্বরূপ "এটি কী বস্তু?" বনাম "পটভূমির রঙ কী?"), যার জন্য বিভিন্ন টাস্ক-স্তরের প্রসঙ্গ তথ্য প্রয়োজন। অতএব, FCIL-এ কীভাবে কার্যকরভাবে টাস্ক প্রসঙ্গ ব্যবহার করতে হয় তা এখনও একটি অপেক্ষাকৃত অনাবিষ্কৃত গবেষণা ক্ষেত্র।

বিদ্যমান পদ্ধতির সীমাবদ্ধতা

  • অধিকাংশ পদ্ধতি স্মৃতি-ভিত্তিক ডেটা-স্তরের বৈশিষ্ট্য ব্যবহারের উপর দৃষ্টি নিবদ্ধ করে
  • প্রম্পট লার্নিং পদ্ধতি যদিও টাস্ক জ্ঞান অন্তর্ভুক্ত করে, তবে স্মৃতি ব্যবহার এবং গণনা ওভারহেড বৃদ্ধির সমস্যা রয়েছে
  • প্যারামিটার-দক্ষ টাস্ক এনকোডার ডিজাইনের অভাব

মূল অবদান

  1. FedGTEA অ্যালগরিদম প্রস্তাব: FCIL-এ স্কেলেবল এবং শক্তিশালী পদ্ধতিতে টাস্ক-স্তরের জ্ঞান কার্যকরভাবে ক্যাপচার করে, ক্লায়েন্ট-পক্ষে কার্ডিনালিটি-অজ্ঞেয় টাস্ক এনকোডার (CATE) প্রবর্তন করে যা টাস্ক এম্বেডিং তৈরি করে, এটিকে গাউসিয়ান র্যান্ডম ভেরিয়েবল হিসাবে মডেল করে এবং সার্ভার-পক্ষে 2-Wasserstein দূরত্ব ব্যবহার করে টাস্ক-মধ্যস্থ বিচ্ছিন্নতা প্রচার করে।
  2. CATE মডিউল ডিজাইন: যেকোনো আকারের ডেটা ব্যাচ থেকে টাস্ক এম্বেডিং অনুমান করতে সক্ষম, কার্ডিনালিটি-অজ্ঞেয় বৈশিষ্ট্য সহ। এম্বেডিং-কে গাউসিয়ান র্যান্ডম ভেরিয়েবল হিসাবে মডেল করে, সার্ভারকে 2-Wasserstein মেট্রিক ব্যবহার করে টাস্ক-মধ্যস্থ দূরত্ব পরিমাপ করতে সক্ষম করে।
  3. সার্ভার-পক্ষ অপ্টিমাইজেশন ফ্রেমওয়ার্ক: প্রথমে FedAvg নীতি ব্যবহার করে প্রাথমিক মডেল সমন্বয় করে, তারপর তিনটি ক্ষতি উপাদান সহ একটি অপ্টিমাইজেশন সমস্যা প্রণয়ন করে: জ্ঞান পাতন ক্ষতি, Wasserstein ক্ষতি এবং অ্যাঙ্কর ক্ষতি।
  4. পরীক্ষামূলক যাচাইকরণ: একাধিক বেঞ্চমার্ক ডেটাসেটে শক্তিশালী বেসলাইন (AC-GAN + FedAvg/FedProx, GLFC, FedCIL, FLwF-2T)-এর তুলনায় উন্নত নির্ভুলতা এবং বিস্মৃতি কর্মক্ষমতা অর্জন করে।

পদ্ধতি বিস্তারিত

টাস্ক সংজ্ঞা

FCIL সিস্টেমে N টি ক্লায়েন্ট এবং একটি কেন্দ্রীয় সার্ভার রয়েছে, যা বৈশ্বিক টাস্ক সিকোয়েন্স T = {T¹, T², ..., Tᵀ} প্রক্রিয়া করে। প্রতিটি ক্লায়েন্ট Cₖ টাস্ক Tᵗ-এ স্থানীয় ডেটাসেট Dᵗₖ ⊂ Tᵗ সংগ্রহ করে। লক্ষ্য হল বৈশ্বিক প্যারামিটার θᵗₘ খুঁজে পাওয়া, যা সমস্ত দেখা টাস্ক এবং সমস্ত ক্লায়েন্টে ক্ষতি কমায়।

মডেল আর্কিটেকচার

ক্লায়েন্ট-পক্ষ মডেল

ক্লায়েন্ট মডেলে দুটি মূল উপাদান রয়েছে:

1. কার্ডিনালিটি-অজ্ঞেয় টাস্ক এনকোডার (CATE)

  • সম্পূর্ণ সংযুক্ত নিউরাল নেটওয়ার্ক হিসাবে ডিজাইন করা, যেকোনো আকারের ব্যাচ B = (x₁, x₂, ..., xᵦ) দেওয়া হলে, d-মাত্রিক টাস্ক এম্বেডিং আউটপুট করে:
    Eᵦ = (1/b)∑ᵢ₌₁ᵇ CATE(xᵢ) ∈ ℝᵈ
    
  • প্যারামিটার সংখ্যা টাস্ক সংখ্যার সাথে বৃদ্ধি পায় না, দীর্ঘ টাস্ক সিকোয়েন্সের স্কেলেবিলিটি নিশ্চিত করে

2. AC-GAN মডিউল

  • বিচারক বাস্তব/নকল মাথা এবং শ্রেণীবিভাগ মাথা অন্তর্ভুক্ত করে
  • শ্রেণীবিভাগ মাথা ডেটা বৈশিষ্ট্য F এবং টাস্ক এম্বেডিং E একীভূত করে পূর্বাভাস দেয়
  • জেনারেটর G পুনরাবৃত্তির জন্য ছবি সংশ্লেষণ করে

গাউসিয়ান টাস্ক এম্বেডিং

টাস্ক এম্বেডিং-কে গাউসিয়ান র্যান্ডম ভেরিয়েবল হিসাবে মডেল করা:

  • বৈশ্বিক: Eᵗ ~ N(μᵗ, Σᵗ)
  • ক্লায়েন্ট-নির্দিষ্ট: Eᵗₖ ~ N(μᵗₖ, Σᵗₖ)

সার্ভার-পক্ষ সমন্বয় এবং নিয়মিতকরণ

প্রাথমিক মডেল সমন্বয়

FedAvg নীতি অনুসরণ করে:

θ̂ᵗₘ = ∑ₖ₌₁ᴺ wₖθᵗₖ

যেখানে ওজন wₖ স্থানীয় ডেটা পয়েন্ট সংখ্যা |Dᵗₖ|-এর সাথে সমানুপাতিক।

মডেল নিয়মিতকরণ এবং একীকরণ

সার্ভার ক্ষতিতে তিনটি উপাদান রয়েছে:

Lserver = αLKD + βLWasserstein + γLanchor

1. জ্ঞান পাতন ক্ষতি:

LKD = ∑(x,y)∈Aᵀ KL(θᵀ⁻¹ₘ(x)∥θ(x))

2. Wasserstein ক্ষতি: টাস্ক-মধ্যস্থ দূরত্ব পরিমাপ করতে 2-Wasserstein দূরত্ব ব্যবহার করে, দুটি গাউসিয়ান বিতরণের জন্য:

W²₂(m₁,m₂) = ∥μ₁ - μ₂∥²₂ + tr(Σ₁ + Σ₂ - 2(Σ₁^(1/2)Σ₂Σ₁^(1/2))^(1/2))

Wasserstein ক্ষতি হল:

LWasserstein = [∑₁≤ᵢ<ⱼ≤ᵀ W²₂(Nᵢ,Nⱼ)]⁻¹

3. অ্যাঙ্কর ক্ষতি:

Lanchor = ∥θ - θ̂ᵗₘ∥₂

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

  1. কার্ডিনালিটি-অজ্ঞেয় ডিজাইন: CATE যেকোনো আকারের ইনপুট ব্যাচ পরিচালনা করতে পারে, আরও ভাল শক্তিশালীতা এবং অভিযোজনযোগ্যতা প্রদান করে
  2. গাউসিয়ান মডেলিং: টাস্ক এম্বেডিং-কে গাউসিয়ান র্যান্ডম ভেরিয়েবল হিসাবে মডেল করে, Wasserstein দূরত্ব ব্যবহার করে টাস্ক-মধ্যস্থ দূরত্ব পরিমাপ সুবিধাজনক করে
  3. গোপনীয়তা সুরক্ষা: সরাসরি সুপ্ত এম্বেডিং স্থানান্তর এড়িয়ে টাস্ক-স্তরের গোপনীয়তা রক্ষা করে
  4. বহু-স্তরীয় নিয়মিতকরণ: জ্ঞান পাতন, টাস্ক বিচ্ছিন্নতা এবং মডেল স্থিতিশীলতা একত্রিত করে ব্যাপক ক্ষতি ফাংশন

পরীক্ষামূলক সেটআপ

ডেটাসেট

তিনটি মান FCIL ডেটাসেট ব্যবহার করে:

  • CIFAR-10: 10 ক্লাস, 60,000 উদাহরণ
  • CIFAR-100 iCaRL বিভাজন: iCaRL নীতি অনুযায়ী র্যান্ডমভাবে বিভক্ত
  • CIFAR-100 সুপারক্লাস বিভাজন: 20টি শব্দার্থগতভাবে সম্পর্কিত সুপারক্লাস, প্রতিটিতে 5টি ক্লাস

টাস্ক সিকোয়েন্স কনফিগারেশন

  • সিকোয়েন্স 1 (CIFAR-10): 5 ক্লায়েন্ট, 5 টাস্ক, প্রতিটি টাস্কে 2 ক্লাস
  • সিকোয়েন্স 2 (CIFAR-100): 10 ক্লায়েন্ট, 10 টাস্ক, প্রতিটি টাস্কে 10 ক্লাস
  • সিকোয়েন্স 3 (CIFAR-100 সুপারক্লাস): 10 ক্লায়েন্ট, 20 টাস্ক, প্রতিটি টাস্কে 5টি শব্দার্থগতভাবে সম্পর্কিত ক্লাস

মূল্যায়ন মেট্রিক্স

  • গড় নির্ভুলতা: সমস্ত দেখা টাস্কের চূড়ান্ত পরীক্ষা নির্ভুলতা
  • গড় বিস্মৃতি: প্রতিটি টাস্কের শিখর নির্ভুলতা এবং চূড়ান্ত নির্ভুলতার মধ্যে ফাঁক

তুলনা পদ্ধতি

  • FL বেসলাইন: FedAvg, FedProx
  • CIL পদ্ধতি: iCaRL, DER
  • FCIL পদ্ধতি: FLwF-2T, FedCIL, GLFC
  • উন্নত বেসলাইন: AC-GAN + FedAvg/FedProx

বাস্তবায়ন বিবরণ

  • অপ্টিমাইজার: Adam
  • ব্যাচ আকার: 64
  • CIFAR-10: শেখার হার 1×10⁻⁴, 60 রাউন্ড বৈশ্বিক যোগাযোগ, প্রতি রাউন্ডে 100 স্থানীয় পুনরাবৃত্তি
  • CIFAR-100: শেখার হার 1×10⁻³, 40 রাউন্ড বৈশ্বিক যোগাযোগ, প্রতি রাউন্ডে 400 স্থানীয় পুনরাবৃত্তি
  • হাইপারপ্যারামিটার: α=0.3, β=0.3, γ=0.4

পরীক্ষামূলক ফলাফল

প্রধান ফলাফল

মডেলসিকোয়েন্স 1: CIFAR-10সিকোয়েন্স 2: CIFAR-100সিকোয়েন্স 3: CIFAR-100 সুপারক্লাস
নির্ভুলতা↑ বিস্মৃতি↓নির্ভুলতা↑ বিস্মৃতি↓নির্ভুলতা↑ বিস্মৃতি↓
FedAvg26.2±2.6 8.5±1.723.4±2.9 9.2±1.923.7±2.5 13.2±1.6
FedProx26.1±1.8 8.6±1.324.1±1.9 8.4±2.023.1±1.9 14.5±2.3
GLFC35.7±1.1 6.3±0.933.1±0.6 10.7±1.833.6±1.7 11.2±2.2
FedCIL32.4±1.9 6.9±1.931.5±0.4 7.4±1.231.2±1.6 10.8±2.0
FedGTEA37.1±0.7 4.5±0.535.9±0.6 6.6±1.735.1±1.2 8.6±1.4

মূল অনুসন্ধান

  1. সিকোয়েন্স 1: FedGTEA সর্বোচ্চ নির্ভুলতা (37.1±0.7) এবং একমাত্র 5%-এর নিচে বিস্মৃতির হার (4.5±0.5) অর্জন করে
  2. সিকোয়েন্স 2: FedGTEA সর্বোত্তম নির্ভুলতা (35.9±0.6) অর্জন করে, একই সাথে একক-অঙ্কের বিস্মৃতির হার (6.6±1.7) বজায় রাখে
  3. সিকোয়েন্স 3: FedGTEA নির্ভুলতা (35.1±1.2) এবং বিস্মৃতির হার (8.6±1.4) উভয় ক্ষেত্রেই সর্বোত্তম কর্মক্ষমতা প্রদর্শন করে

অপসারণ পরীক্ষা

মডেল বৈকল্পসিকোয়েন্স 1: CIFAR-10সিকোয়েন্স 2: CIFAR-100সিকোয়েন্স 3: CIFAR-100 সুপারক্লাস
CATE এবং Wasserstein ছাড়া32.6±0.5 7.1±0.732.2±0.5 8.1±1.131.7±0.7 10.5±0.9
Wasserstein ছাড়া34.1±0.7 5.8±0.433.3±0.4 8.8±0.732.2±0.3 10.3±0.3
অ্যাঙ্কর ছাড়া30.2±1.3 6.9±1.432.5±0.4 8.1±0.331.0±0.4 10.8±0.2
পাতন ছাড়া32.3±1.5 8.7±1.131.9±0.6 10.9±1.631.4±1.1 12.2±2.4
সম্পূর্ণ FedGTEA37.1±0.7 4.5±0.535.9±0.6 6.6±1.735.1±1.2 8.6±1.4

অপসারণ পরীক্ষা বিশ্লেষণ

  • পাতন ক্ষতি: অপসারণের পর বিস্মৃতির হার উল্লেখযোগ্যভাবে বৃদ্ধি পায় (CIFAR-100 সুপারক্লাসে 8.6 থেকে 12.2-এ), পূর্ববর্তী জ্ঞান বজায় রাখার জন্য এর গুরুত্ব প্রমাণ করে
  • অ্যাঙ্কর ক্ষতি: অপসারণের পর নির্ভুলতা উল্লেখযোগ্যভাবে হ্রাস পায় (CIFAR-10-এ প্রায় 7%), বিচারক বৈশিষ্ট্য প্রতিনিধিত্ব স্থিতিশীল করার জন্য এর প্রয়োজনীয়তা নির্দেশ করে
  • CATE এবং Wasserstein ক্ষতি: অপসারণের পর কর্মক্ষমতা উল্লেখযোগ্যভাবে হ্রাস পায়, টাস্ক এনকোডার এবং টাস্ক বিচ্ছিন্নতা প্রক্রিয়ার কার্যকারিতা যাচাই করে

সম্পর্কিত কাজ

ক্লাস-ইনক্রিমেন্টাল লার্নিং

CIL পদ্ধতি প্রধানত তিনটি বিভাগে বিভক্ত:

  1. পুনরাবৃত্তি পদ্ধতি: iCaRL, GEM-এর মতো, নমুনা বাফার বজায় রাখে
  2. নিয়মিতকরণ পদ্ধতি: জ্ঞান পাতনের মাধ্যমে প্যারামিটার আপডেট সীমাবদ্ধ করে
  3. প্রম্পট পদ্ধতি: L2P, DualPrompt-এর মতো, প্রসঙ্গ ভেক্টর পুল শিখে

ফেডারেটেড লার্নিং

প্রধান সমন্বয় কৌশলে FedAvg এবং FedProx অন্তর্ভুক্ত রয়েছে, যা যথাক্রমে ওজনযুক্ত গড় এবং নিয়মিতকরণের মাধ্যমে পরিসংখ্যানগত বৈষম্য পরিচালনা করে।

ফেডারেটেড ক্লাস-ইনক্রিমেন্টাল লার্নিং

বিদ্যমান FCIL পদ্ধতি বিভক্ত:

  1. পুনরাবৃত্তি পদ্ধতি: স্থানীয় নমুনা বাফার বা উৎপাদিত পুনরাবৃত্তি ব্যবহার করে
  2. নিয়মিতকরণ এবং পাতন পদ্ধতি: জ্ঞান পাতনের মাধ্যমে জ্ঞান স্থানান্তর করে
  3. প্রম্পট পদ্ধতি: ক্লায়েন্টে প্রম্পট পুল সংরক্ষণ করে টাস্ক প্রসঙ্গ এনকোড করে

উপসংহার এবং আলোচনা

প্রধান উপসংহার

FedGTEA কার্ডিনালিটি-অজ্ঞেয় টাস্ক এনকোডার এবং Wasserstein দূরত্ব নিয়মিতকরণ প্রবর্তনের মাধ্যমে, FCIL-এ টাস্ক-স্তরের জ্ঞানের কার্যকর মডেলিং অর্জন করে, নির্ভুলতা এবং বিস্মৃতি কর্মক্ষমতা উভয় ক্ষেত্রেই বিদ্যমান পদ্ধতিকে ছাড়িয়ে যায়।

সীমাবদ্ধতা

  1. গণনা জটিলতা: 2-Wasserstein দূরত্ব গণনার O(n³) জটিলতা উচ্চ-মাত্রিক এম্বেডিং-এ বাধা হতে পারে
  2. হাইপারপ্যারামিটার সংবেদনশীলতা: তিনটি ক্ষতি উপাদানের ওজন সাবধানে সামঞ্জস্য করা প্রয়োজন
  3. মূল্যায়ন পরিসীমা: শুধুমাত্র ছবি শ্রেণীবিভাগ কাজে মূল্যায়ন করা হয়, অন্যান্য ডোমেইনে প্রযোজ্যতা অজানা

ভবিষ্যত দিকনির্দেশনা

  1. আরও দক্ষ Wasserstein দূরত্ব গণনা পদ্ধতি অন্বেষণ করা
  2. স্ব-অভিযোজিত হাইপারপ্যারামিটার সমন্বয় কৌশল গবেষণা করা
  3. অন্যান্য মোডালিটি এবং কাজের ধরনে সম্প্রসারণ করা

গভীর মূল্যায়ন

সুবিধা

  1. শক্তিশালী উদ্ভাবনী: FCIL-এ প্রথমবারের মতো সিস্টেমেটিকভাবে টাস্ক-স্তরের জ্ঞান মডেল করে, কার্ডিনালিটি-অজ্ঞেয় টাস্ক এনকোডার ডিজাইন প্রস্তাব করে
  2. শক্তিশালী তাত্ত্বিক ভিত্তি: 2-Wasserstein দূরত্বের গাণিতিক বৈশিষ্ট্য ব্যবহার করে টাস্ক বিচ্ছিন্নতার জন্য কঠোর তাত্ত্বিক সমর্থন প্রদান করে
  3. ব্যাপক পরীক্ষা: একাধিক ডেটাসেট এবং সেটিংসে ব্যাপক মূল্যায়ন, অপসারণ পরীক্ষা প্রতিটি উপাদানের কার্যকারিতা প্রমাণ করে
  4. গোপনীয়তা সুরক্ষা: সরাসরি এম্বেডিং স্থানান্তর এড়িয়ে টাস্ক-স্তরের গোপনীয়তা রক্ষা করে

অপূর্ণতা

  1. গণনা ওভারহেড: Wasserstein দূরত্ব গণনা এবং ম্যাট্রিক্স অপারেশন অতিরিক্ত গণনা খরচ নিয়ে আসতে পারে
  2. প্যারামিটার সমন্বয়: একাধিক হাইপারপ্যারামিটারের ভারসাম্য প্রচুর সমন্বয় কাজ প্রয়োজন
  3. সাধারণীকরণ যাচাইকরণ অপর্যাপ্ত: শুধুমাত্র CIFAR ডেটাসেটে যাচাই করা হয়, বৃহত্তর স্কেল এবং বৈচিত্র্যময় পরীক্ষার অভাব

প্রভাব

এই কাজটি FCIL ক্ষেত্রে টাস্ক-স্তরের মডেলিংয়ের নতুন চিন্তাভাবনা প্রবর্তন করে, যা টাস্ক প্রসঙ্গে আরও বেশি মনোযোগ দেওয়া গবেষণাকে অনুপ্রাণিত করতে পারে। কার্ডিনালিটি-অজ্ঞেয় ডিজাইন এবং গোপনীয়তা সুরক্ষা বৈশিষ্ট্য এটিকে বাস্তব প্রয়োগে ভাল সম্ভাবনা প্রদান করে।

প্রযোজ্য পরিস্থিতি

  • নতুন ক্লাস দীর্ঘমেয়াদী শেখার প্রয়োজন এমন ফেডারেটেড সিস্টেম
  • গোপনীয়তার প্রতি উচ্চ প্রয়োজনীয়তা সহ বিতরণকৃত শিক্ষা পরিস্থিতি
  • ক্লায়েন্ট ডেটা বিতরণে বড় পার্থক্য সহ পরিবেশ

রেফারেন্স

পেপারটি FCIL, CIL এবং FL ক্ষেত্রের গুরুত্বপূর্ণ কাজ উদ্ধৃত করে, যার মধ্যে রয়েছে FedAvg, iCaRL, AC-GAN-এর মতো ক্লাসিক পদ্ধতি এবং FedCIL, GLFC-এর মতো সর্বশেষ FCIL গবেষণা, যা এই গবেষণার জন্য দৃঢ় তাত্ত্বিক ভিত্তি প্রদান করে।