D3MAS: বহু-এজেন্ট সিস্টেমে উন্নত জ্ঞান ভাগাভাগির জন্য বিয়োজন, অনুমান এবং বিতরণ

মৌলিক তথ্য

• পেপার আইডি: 2510.10585
• শিরোনাম: D3MAS: বহু-এজেন্ট সিস্টেমে উন্নত জ্ঞান ভাগাভাগির জন্য বিয়োজন, অনুমান এবং বিতরণ
• লেখক: Heng Zhang, Yuling Shi, Xiaodong Gu, Haochen You, Zijian Zhang, Lubin Gan, Yilei Yuan, Jin Huang
• শ্রেণীবিভাগ: cs.GR (গ্রাফিক্স)
• প্রকাশনার সময়: ২০২৫ সালের ১২ অক্টোবর
• পেপার লিংক: https://arxiv.org/abs/2510.10585v1

সারসংক্ষেপ

বৃহৎ ভাষা মডেল-ভিত্তিক বহু-এজেন্ট সিস্টেমগুলি সহযোগিতামূলক সমস্যা সমাধানে শক্তিশালী ক্ষমতা প্রদর্শন করে, তবে এই সিস্টেমগুলিতে গুরুতর জ্ঞান অপ্রয়োজনীয়তার সমস্যা রয়েছে। এজেন্টগুলি পুনরুদ্ধার এবং যুক্তিপ্রদর্শন প্রক্রিয়ায় পুনরাবৃত্তিমূলক কাজ করে, গড় জ্ঞান পুনরাবৃত্তির হার ৪৭.৩% এ পৌঁছায়। এই অদক্ষতা গভীর সমস্যা থেকে উদ্ভূত: বর্তমান স্থাপত্য এমন কোনো প্রক্রিয়া নিশ্চিত করার অভাব রাখে যা প্রতিটি অপারেশনাল পর্যায়ে এজেন্টগুলির মধ্যে ন্যূনতম প্রয়োজনীয় তথ্য ভাগাভাগি নিশ্চিত করে। এই পেপারটি D3MAS (বিয়োজন, অনুমান, বিতরণ) কাঠামো প্রস্তাব করে, যা স্পষ্ট অপ্টিমাইজেশনের পরিবর্তে কাঠামোগত ডিজাইনের মাধ্যমে অপ্রয়োজনীয়তার সমস্যা সমাধান করে। এই কাঠামোটি তিনটি সমন্বয় স্তরে সহযোগিতা সংগঠিত করে: কাজ বিয়োজন স্তর অপ্রাসঙ্গিক উপ-সমস্যাগুলি ফিল্টার করে, সহযোগিতামূলক যুক্তিপ্রদর্শন স্তর এজেন্টগুলির মধ্যে পরিপূরক যুক্তিপ্রদর্শন পথগুলি ক্যাপচার করে, বিতরণকৃত স্মৃতি স্তর অ-অপ্রয়োজনীয় জ্ঞান অ্যাক্সেস প্রদান করে। এই স্তরগুলি একীভূত বিষমজাতীয় গ্রাফে কাঠামোগত বার্তা প্রেরণের মাধ্যমে সমন্বিত হয়, তথ্য প্রকৃত কাজের চাহিদার সাথে সামঞ্জস্যপূর্ণ থাকে নিশ্চিত করে। চারটি চ্যালেঞ্জিং ডেটাসেটে পরীক্ষা-নিরীক্ষা দেখায় যে D3MAS যুক্তিপ্রদর্শন নির্ভুলতা ৮.৭% থেকে ১৫.৬% বৃদ্ধি করে, গড়ে জ্ঞান অপ্রয়োজনীয়তা ৪৬% হ্রাস করে।

গবেষণা পটভূমি এবং প্রেরণা

সমস্যা সংজ্ঞা

এই গবেষণার মূল সমস্যা হল বহু-এজেন্ট সিস্টেমে জ্ঞান অপ্রয়োজনীয়তা সমস্যা। এটি নির্দিষ্টভাবে নিম্নরূপ প্রকাশ পায়:

1. পুনরুদ্ধার অপ্রয়োজনীয়তা: একাধিক এজেন্ট স্বাধীনভাবে একই বা ওভারল্যাপিং জ্ঞান পুনরুদ্ধার করে
2. যুক্তিপ্রদর্শন অপ্রয়োজনীয়তা: এজেন্টগুলি অর্থগতভাবে অনুরূপ যুক্তিপ্রদর্শন পথ অনুসরণ করে
3. কাজ অপ্রয়োজনীয়তা: উপ-কাজ বরাদ্দে ওভারল্যাপিং সমস্যা

সমস্যার গুরুত্ব

জ্ঞান অপ্রয়োজনীয়তা সমস্যা বহু-এজেন্ট সিস্টেমের দক্ষতা এবং কর্মক্ষমতাকে গুরুতরভাবে প্রভাবিত করে:

• অভিজ্ঞতামূলক বিশ্লেষণ এজেন্ট যোগাযোগে গড় জ্ঞান পুনরাবৃত্তির হার ৪৭.৩% দেখায়
• গণনা সম্পদ অপচয় এবং সহযোগিতার প্রভাব হ্রাস ঘটায়
• জটিল কাজে বহু-এজেন্ট সিস্টেমের কার্যকর প্রয়োগে বাধা সৃষ্টি করে

বিদ্যমান পদ্ধতির সীমাবদ্ধতা

বিদ্যমান বহু-এজেন্ট সহযোগিতা পদ্ধতিতে নিম্নলিখিত সমস্যা রয়েছে:

1. স্থাপত্য খণ্ডিতকরণ: কাজ সমন্বয়, যুক্তিপ্রদর্শন সম্পাদন এবং স্মৃতি পুনরুদ্ধার স্বাধীন উপাদান হিসাবে বিবেচিত হয়
2. ক্রস-স্তর সিঙ্ক্রোনাইজেশনের অভাব: প্রতিটি স্তরের সিদ্ধান্ত অন্যান্য স্তরের প্রসঙ্গ তথ্য থেকে বঞ্চিত
3. অপর্যাপ্ত তথ্য প্রবাহ অপ্টিমাইজেশন: তথ্য পদ্ধতিগতভাবে ফিল্টার এবং সারিবদ্ধ করার ক্ষমতা নেই

গবেষণা প্রেরণা

তথ্য তত্ত্বের দৃষ্টিকোণ থেকে, কার্যকর সহযোগিতার জন্য এজেন্টগুলির মধ্যে বিনিময়কৃত তথ্য প্রতিটি অপারেশনাল পর্যায়ে ন্যূনতম পর্যাপ্ত হওয়া প্রয়োজন। এই পেপারটি স্পষ্ট তথ্য-তাত্ত্বিক লক্ষ্য গণনার পরিবর্তে কাঠামোগত ডিজাইনের মাধ্যমে তথ্য অপ্টিমাইজেশন অর্জন করার প্রস্তাব দেয়।

মূল অবদান

1. মূল সমস্যা চিহ্নিতকরণ: বহু-এজেন্ট সিস্টেমে স্তর সমন্বয় ঘাটতির সমস্যা প্রথমবারের মতো পদ্ধতিগতভাবে বিশ্লেষণ করে, ৪৭.৩% জ্ঞান পুনরাবৃত্তির হার আবিষ্কার করে
2. D3MAS কাঠামো প্রস্তাব: বিষমজাতীয় গ্রাফ স্থাপত্যের উপর ভিত্তি করে একীভূত বহু-এজেন্ট সহযোগিতা কাঠামো, স্পষ্ট নির্ভরতা মডেলিংয়ের মাধ্যমে উল্লেখযোগ্যভাবে অপ্রয়োজনীয়তা হ্রাস করে
3. কর্মক্ষমতা উন্নতি বাস্তবায়ন: একাধিক চ্যালেঞ্জিং বেঞ্চমার্ক পরীক্ষায় ৮.৭%-১৫.৬% নির্ভুলতা বৃদ্ধি অর্জন করে, একই সাথে গড়ে ৪৬% জ্ঞান অপ্রয়োজনীয়তা হ্রাস করে

পদ্ধতি বিস্তারিত

কাজ সংজ্ঞা

বহু-এজেন্ট যুক্তিপ্রদর্শন সিস্টেম S = {A₁, A₂, ..., Aₙ} হিসাবে সংজ্ঞায়িত, যেখানে প্রতিটি এজেন্ট Aᵢ স্বাধীন যুক্তিপ্রদর্শন প্রক্রিয়া এবং জ্ঞান ভাণ্ডার Kᵢ রাখে। জটিল প্রশ্ন q দেওয়া হলে, সিস্টেম সহযোগিতামূলক যুক্তিপ্রদর্শনের মাধ্যমে সমন্বিত উত্তর a উৎপন্ন করে।

মডেল স্থাপত্য

সামগ্রিক কাঠামো ডিজাইন

D3MAS বহু-এজেন্ট সহযোগিতা সংগঠিত করার জন্য একীভূত বিষমজাতীয় গ্রাফ G_D3MAS নির্মাণ করে, যাতে তিন ধরনের নোড রয়েছে:

নোড প্রকার সেট:

• T_v = {T_task, T_reason, T_memory}

প্রান্ত প্রকার সেট:

• T_e = {e_decompose, e_trigger, e_depend, e_retrieve, e_ground, e_relate}

১. বিয়োজন স্তর: কাজ বিয়োজন

কাজ গ্রাফ G⁽⁰⁾ = (V⁽⁰⁾, E⁽⁰⁾) নির্মাণ করে, নোডগুলি মূল প্রশ্ন q থেকে উদ্ভূত উপ-সমস্যা প্রতিনিধিত্ব করে।

বিয়োজন প্রক্রিয়া:

V⁽⁰⁾ = {v_root} ∪ ⋃ⱼ₌₁ᵐ {vⱼ⁽⁰⁾ | vⱼ⁽⁰⁾ = Create(tⱼ), tⱼ ∈ LLM_decomp(v_parent)}

কাজ বরাদ্দ:

Assign(vⱼ⁽⁰⁾) = arg max_{Aᵢ∈S} Capability(Aᵢ, vⱼ⁽⁰⁾)

২. অনুমান স্তর: সহযোগিতামূলক যুক্তিপ্রদর্শন

যুক্তিপ্রদর্শন গ্রাফ G⁽¹⁾ = (V⁽¹⁾, E⁽¹⁾) বজায় রাখে, নোডগুলি বিভিন্ন এজেন্টের যুক্তিপ্রদর্শন পদক্ষেপ প্রতিনিধিত্ব করে।

যুক্তিপ্রদর্শন নোড উৎপাদন:

vᵢ,ₖ⁽¹⁾ = LLM_Aᵢ(Concat(c_{vₖ⁽⁰⁾}, C_Aᵢ))

নির্ভরতা প্রান্ত নির্মাণ:

E_depend = {(vᵢ,ₖ⁽¹⁾, vⱼ,ₗ⁽¹⁾) | Premise(vᵢ,ₖ⁽¹⁾) ∩ Conclusion(vⱼ,ₗ⁽¹⁾) ≠ ∅}

৩. বিতরণ স্তর: বিতরণকৃত স্মৃতি

জ্ঞান গ্রাফ G⁽²⁾ = (V⁽²⁾, E⁽²⁾) সংগঠিত করে, নোডগুলি সত্তা এবং ধারণা প্রতিনিধিত্ব করে।

প্রাসঙ্গিকতা স্কোরিং:

Score(vₗ⁽²⁾, q_mem) = (h_{vₗ} · f_embed(q_mem)) / (‖h_{vₗ}‖ · ‖f_embed(q_mem)‖)

বিতরণকৃত পুনরুদ্ধার:

M_retrieve = Top-k(⋃ᵢ₌₁ⁿ {v ∈ Gᵢ⁽²⁾ | Score(v, q_mem) > θ})

স্তরীয় বার্তা প্রেরণ

ক্রস-স্তর তথ্য প্রবাহ প্রকার-সচেতন বার্তা প্রেরণের মাধ্যমে বাস্তবায়িত হয়:

h_v⁽ᵗ⁺¹⁾ = UPDATE(φ(v))(h_v⁽ᵗ⁾, ⊕_{u∈N(v)} MSG(ψ(u,v))(h_u⁽ᵗ⁾))

বার্তা প্রেরণ স্ব-নিম্নমুখী এবং স্ব-ঊর্ধ্বমুখী পর্যায়ে বিকল্প হয়, ক্রমাগত সারিবদ্ধকরণ অর্জন করে।

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

1. কাঠামোগত অপ্রয়োজনীয়তা হ্রাস: বিষমজাতীয় গ্রাফের মাধ্যমে নির্ভরতা সম্পর্ক স্পষ্টভাবে মডেল করে, পুনরাবৃত্তিমূলক কাজ এড়ায়
2. ক্রস-স্তর সমন্বয় প্রক্রিয়া: তিন স্তরের মধ্যে দ্বিমুখী তথ্য প্রবাহ নিশ্চিত করে যে সিদ্ধান্ত বৈশ্বিক প্রসঙ্গের উপর ভিত্তি করে
3. ন্যূনতম পর্যাপ্ত তথ্য ভাগাভাগি: কাঠামোগত ডিজাইনের মাধ্যমে তথ্য-তাত্ত্বিক অপ্টিমাইজেশন অন্তর্নিহিতভাবে বাস্তবায়ন করে

পরীক্ষা-নিরীক্ষা সেটআপ

ডেটাসেট

চারটি বৈচিত্র্যময় জনসাধারণ বেঞ্চমার্ক পরীক্ষা ব্যবহার করে:

1. MMLU: ৫৭টি বিষয়ের বহুনির্বাচনী প্রশ্ন, যুক্তিপ্রদর্শন এবং বিশ্ব জ্ঞান পরীক্ষা করে
2. HumanEval: ১৬৪টি হাতে লেখা প্রোগ্রামিং সমস্যা, কোড উৎপাদন ক্ষমতা পরীক্ষা করে
3. CommonGen: সীমাবদ্ধ পাঠ্য উৎপাদন, সাধারণ জ্ঞান যুক্তিপ্রদর্শন বিবেচনা করে
4. ARC-Challenge: প্রাথমিক বিজ্ঞান প্রশ্ন, উন্নত যুক্তিপ্রদর্শন প্রয়োজন

মূল্যায়ন সূচক

• নির্ভুলতা: সমস্ত বেঞ্চমার্ক পরীক্ষার প্রধান সূচক
• MAgIC মাত্রা: বিচারক, যুক্তিপ্রদর্শন, প্রতারণা, স্ব-সচেতনতা, বোধগম্যতা, সমন্বয়, যুক্তিসঙ্গততা সাতটি মাত্রা
• অপ্রয়োজনীয়তা হার: স্মৃতি অপ্রয়োজনীয়তা, যুক্তিপ্রদর্শন অপ্রয়োজনীয়তা, কাজ অপ্রয়োজনীয়তার সমন্বিত পরিমাপ

তুলনামূলক পদ্ধতি

একক-এজেন্ট পদ্ধতি (CoT, CoT-SC, Reflexion ইত্যাদি) এবং বহু-এজেন্ট পদ্ধতি (AutoGen, MetaGPT, MACNET ইত্যাদি) অন্তর্ভুক্ত।

বাস্তবায়ন বিবরণ

• ভাষা উৎপাদনের জন্য GPT-4 ব্যবহার করে
• পাঠ্য এম্বেডিং গণনার জন্য BGE-M3
• এম্বেডিং মাত্রা d=512, বার্তা প্রেরণ স্তর সংখ্যা L=3
• পুনরুদ্ধার থ্রেশহোল্ড θ=0.65, শীর্ষ-k=5

পরীক্ষা-নিরীক্ষা ফলাফল

প্রধান ফলাফল

D3MAS সমস্ত বেঞ্চমার্ক পরীক্ষায় ভিত্তি পদ্ধতিকে উল্লেখযোগ্যভাবে অতিক্রম করে:

বিলোপন পরীক্ষা

প্রতিটি উপাদানের অবদান বিশ্লেষণ:

অপ্রয়োজনীয়তা হ্রাস প্রভাব

• গড় অপ্রয়োজনীয়তা ৪৬% হ্রাস
• স্মৃতি অপ্রয়োজনীয়তা সবচেয়ে উল্লেখযোগ্য হ্রাস
• গণনা দক্ষতা ৫-৮ গুণ উন্নতি

হাইপার-প্যারামিটার সংবেদনশীলতা

• সর্বোত্তম শীর্ষ-k মান: 5
• সর্বোত্তম সাদৃশ্য থ্রেশহোল্ড: 0.65
• সর্বোত্তম এজেন্ট সংখ্যা: 6
• সর্বোত্তম এম্বেডিং মাত্রা: 512

সম্পর্কিত কাজ

LLM এজেন্ট সহযোগিতা

বিদ্যমান গবেষণা মিথস্ক্রিয়া-চালিত পদ্ধতি, সংলাপ কাঠামো, ভূমিকা বরাদ্দ কৌশল ইত্যাদি অন্তর্ভুক্ত করে, কিন্তু সাধারণত দক্ষতা সমস্যা রয়েছে।

গ্রাফ কাঠামো বহু-এজেন্ট সিস্টেম

প্রাথমিক কাজ অন্তর্নিহিতভাবে গ্রাফ ব্যবহার করে, সাম্প্রতিক গবেষণা স্পষ্টভাবে গ্রাফ কাঠামো সংজ্ঞায়িত করে, কিন্তু কাজ-সচেতন টপোলজি ডিজাইনের অভাব রাখে।

এই পেপারের সুবিধা

সম্পর্কিত কাজের তুলনায়, D3MAS স্তরীয় সংগঠন এবং কাজ-সচেতন গতিশীল টপোলজি সমন্বয় ক্ষমতা প্রদান করে।

উপসংহার এবং আলোচনা

প্রধান উপসংহার

1. D3MAS স্তরীয় সমন্বয়ের মাধ্যমে বহু-এজেন্ট সিস্টেমে জ্ঞান অপ্রয়োজনীয়তা সমস্যা কার্যকরভাবে সমাধান করে
2. কাঠামোগত ডিজাইন স্পষ্ট অপ্টিমাইজেশনের চেয়ে ন্যূনতম পর্যাপ্ত তথ্য ভাগাভাগি বাস্তবায়নের জন্য আরও উপযুক্ত
3. ক্রস-স্তর সারিবদ্ধকরণ সিস্টেম সামগ্রিক অপ্রয়োজনীয়তা হ্রাসের চাবিকাঠি

সীমাবদ্ধতা

1. বর্তমান পরীক্ষা-নিরীক্ষা প্রধানত GPT-4 এর উপর ভিত্তি করে, অন্যান্য মডেলে সাধারণীকরণ যাচাই প্রয়োজন
2. অতি-বৃহৎ স্কেল এজেন্ট দলের সম্প্রসারণ কৌশল আরও গবেষণা প্রয়োজন
3. রিয়েল-টাইম গতিশীল কাজের অভিযোজনযোগ্যতা উন্নতির অপেক্ষায় রয়েছে

ভবিষ্যত দিকনির্দেশনা

পেপারটি বৃহৎ-স্কেল এজেন্ট দলের সম্প্রসারণ কৌশল অন্বেষণ করার প্রস্তাব দেয়, যা একটি গুরুত্বপূর্ণ গবেষণা দিক।

গভীর মূল্যায়ন

সুবিধা

1. সমস্যা সংজ্ঞা স্পষ্ট: বহু-এজেন্ট সিস্টেমে জ্ঞান অপ্রয়োজনীয়তা সমস্যা প্রথমবারের মতো পদ্ধতিগতভাবে পরিমাণ করে
2. পদ্ধতি উদ্ভাবন শক্তিশালী: বিষমজাতীয় গ্রাফ স্থাপত্য এবং স্তরীয় সমন্বয় প্রক্রিয়া মূল উদ্ভাবনী
3. পরীক্ষা-নিরীক্ষা ব্যাপক: একাধিক ডেটাসেট, একাধিক ভিত্তি পদ্ধতির সম্পূর্ণ তুলনা, ফলাফল প্রভাবশালী
4. তাত্ত্বিক ভিত্তি দৃঢ়: তথ্য তত্ত্বের উপর ভিত্তি করে তাত্ত্বিক বিশ্লেষণ পদ্ধতি ডিজাইনের জন্য দৃঢ় ভিত্তি প্রদান করে

অপূর্ণতা

1. গণনা জটিলতা বিশ্লেষণ অনুপস্থিত: কাঠামোর সময় এবং স্থান জটিলতা বিস্তারিত বিশ্লেষণ করা হয়নি
2. বাস্তব স্থাপনা বিবেচনা অপর্যাপ্ত: প্রকৃত পরিবেশে স্থাপনার সম্ভাব্যতা বিশ্লেষণের অভাব
3. ত্রুটি প্রসারণ প্রক্রিয়া: স্তরের মধ্যে ত্রুটি প্রসারণের প্রভাব এবং প্রশমন কৌশল সম্পূর্ণভাবে আলোচনা করা হয়নি

প্রভাব

1. একাডেমিক অবদান: বহু-এজেন্ট সহযোগিতা ক্ষেত্রে নতুন গবেষণা প্যারাডাইম প্রদান করে
2. ব্যবহারিক মূল্য: কোড উৎপাদন, বৈজ্ঞানিক যুক্তিপ্রদর্শন ইত্যাদি ক্ষেত্রে ব্যাপক প্রয়োগ সম্ভাবনা
3. পুনরুৎপাদনযোগ্যতা: বিস্তারিত বাস্তবায়ন বিবরণ প্রদান করে, পুনরুৎপাদন এবং সম্প্রসারণ সহজতর করে

প্রযোজ্য পরিস্থিতি

D3MAS বিশেষভাবে নিম্নলিখিত ক্ষেত্রে প্রযোজ্য:

1. জটিল যুক্তিপ্রদর্শন প্রয়োজনীয় বহু-পদক্ষেপ কাজ
2. জ্ঞান-নিবিড় সমস্যা সমাধান
3. সহযোগিতামূলক কোড উন্নয়ন এবং ডিবাগিং
4. বৈজ্ঞানিক গবেষণা এবং বিশ্লেষণ কাজ

সংদর্ভ

পেপারটি ৬৯টি সম্পর্কিত সংদর্ভ উদ্ধৃত করে, যা বহু-এজেন্ট সিস্টেম, গ্রাফ নিউরাল নেটওয়ার্ক, বৃহৎ ভাষা মডেল ইত্যাদি একাধিক ক্ষেত্রের গুরুত্বপূর্ণ কাজ অন্তর্ভুক্ত করে, গবেষণার জন্য দৃঢ় তাত্ত্বিক ভিত্তি প্রদান করে।

সামগ্রিক মূল্যায়ন: এটি বহু-এজেন্ট সিস্টেম ক্ষেত্রে একটি উচ্চ-মানের গবেষণা পেপার যা উদ্ভাবনী সমাধান প্রস্তাব করে। পেপারটি সমস্যা সংজ্ঞা স্পষ্ট, পদ্ধতি ডিজাইন যুক্তিসঙ্গত, পরীক্ষা-নিরীক্ষা যাচাইকরণ ব্যাপক, উল্লেখযোগ্য একাডেমিক মূল্য এবং ব্যবহারিক তাৎপর্য রয়েছে।