BabyBabelLM: উন্নয়নমূলকভাবে সম্ভাব্য প্রশিক্ষণ ডেটার একটি বহুভাষিক বেঞ্চমার্ক

মৌলিক তথ্য

• পেপার আইডি: 2510.10159
• শিরোনাম: BabyBabelLM: উন্নয়নমূলকভাবে সম্ভাব্য প্রশিক্ষণ ডেটার একটি বহুভাষিক বেঞ্চমার্ক
• লেখক: জাপ জুমেলেট, আবদেল্লাহ ফোর্তাসি, আকারি হাগা, বাস্টিয়ান বুনজেক এবং অন্যান্য ২৭ জন লেখক
• শ্রেণীবিভাগ: cs.CL (কম্পিউটেশনাল ভাষাবিজ্ঞান)
• প্রকাশনার সময়: ২০২৫ সালের ১১ অক্টোবর arXiv-এ জমা দেওয়া
• পেপার লিংক: https://arxiv.org/abs/2510.10159

সারসংক্ষেপ

এই পেপারটি BabyBabelLM উপস্থাপন করে, যা একটি বহুভাষিক ডেটাসেট সংগ্রহ যা জন্ম থেকে মাতৃভাষা অর্জনের সময়কাল পর্যন্ত মানুষের সংস্পর্শে আসা ভাষাগত পরিবেশের অনুকরণ করার জন্য ডিজাইন করা হয়েছে। গবেষকরা সাবধানে উন্নয়নমূলকভাবে সম্ভাব্য প্রাক-প্রশিক্ষণ ডেটা পরিকল্পনা করেছেন, যার লক্ষ্য ৪৫টি ভাষার প্রতিটির জন্য ১০০ মিলিয়ন ইংরেজি শব্দের সমতুল্য সামগ্রী প্রদান করা। একই সাথে একটি মূল্যায়ন স্যুট সংকলন করা হয়েছে এবং প্রতিটি ভাষার জন্য ভিত্তিরেখা মডেল প্রশিক্ষণ দেওয়া হয়েছে। BabyBabelLM বহুভাষিক প্রাক-প্রশিক্ষণ এবং জ্ঞানীয় মডেলিং গবেষণা প্রচার করার লক্ষ্য রাখে।

গবেষণা পটভূমি এবং প্রেরণা

সমস্যার সংজ্ঞা

বর্তমান ভাষা মডেল গবেষণা প্রধানত স্কেল সম্প্রসারণের উপর দৃষ্টি নিবদ্ধ করে, বৃহত্তর মডেল এবং আরও বেশি প্রশিক্ষণ ডেটার সন্ধান করে, কিন্তু এই প্রবণতা ভাষা শেখার মৌলিক প্রশ্নগুলিকে উপেক্ষা করে। মানুষ শৈশবকাল থেকে প্রাপ্তবয়স্ক পর্যন্ত ১০০ মিলিয়নেরও কম ইংরেজি শব্দের সংস্পর্শে এসে ভাষাগত দক্ষতা অর্জন করে, যা ১০০ ট্রিলিয়নেরও বেশি শব্দের প্রয়োজন হয় এমন আধুনিক ভাষা মডেলের সাথে বেশ কয়েকটি মাত্রার পার্থক্য তৈরি করে।

গবেষণা প্রেরণা

১. ডেটা দক্ষতা সমস্যা: সীমিত ডেটা বাজেটের অধীনে কীভাবে দক্ষ ভাষা মডেলিং অর্জন করা যায় তা অন্বেষণ করা ২. উন্নয়নমূলক সম্ভাব্যতা: মানুষের ভাষা অধিগ্রহণ প্রক্রিয়ার সাথে সামঞ্জস্যপূর্ণ প্রশিক্ষণ ডেটা রচনা অধ্যয়ন করা ३. বহুভাষিক কভারেজ: BabyLM চ্যালেঞ্জের পরিধি প্রসারিত করা, ইংরেজি থেকে বহুভাষিক পরিবেশে ४. জ্ঞানীয় মডেলিং: মানুষের ভাষা অধিগ্রহণ এবং ভাষা মডেল শেখার মধ্যে সম্পর্ক বোঝার জন্য সংস্থান প্রদান করা

বিদ্যমান পদ্ধতির সীমাবদ্ধতা

• BabyLM চ্যালেঞ্জ শুধুমাত্র ইংরেজিতে সীমাবদ্ধ, ক্রস-ভাষাগত যাচাইকরণের অভাব
• সিস্টেমেটিক বহুভাষিক উন্নয়নমূলক সম্ভাব্য ডেটাসেটের অভাব
• বিদ্যমান গবেষণা বেশিরভাগ পৃথক প্রচেষ্টা, সমন্বিত ডেটা সংগ্রহ মান অভাব
• মূল্যায়ন সংস্থান বিভিন্ন ভাষায় অসমভাবে বিতরণ করা হয়

মূল অবদান

१. ४५টি ভাষা জুড়ে উন্নয়নমূলকভাবে সম্ভাব্য প্রাক-প্রশিক্ষণ ডেটাসেট নির্মাণ করা, তিনটি স্তরে ডেটা পরিমাণ দ্বারা বিভক্ত (১০০M, १०M, १M ইংরেজি সমতুল্য শব্দ) २. ওপেন-সোর্স ডেটা সম্প্রসারণ পাইপলাইন প্রদান করা, সম্প্রদায়কে নতুন ভাষা যোগ করতে এবং বিদ্যমান ডেটাসেট প্রসারিত করতে সমর্থন করে ३. ব্যাপক বহুভাষিক মূল্যায়ন স্যুট সংকলন করা, আনুষ্ঠানিক এবং কার্যকরী ভাষাগত দক্ষতা জুড়ে বিস্তৃত ४. ४५টি একক-ভাষিক মডেল, ७টি দ্বিভাষিক মডেল এবং १টি বহুভাষিক মডেল প্রশিক্ষণ দেওয়া ভিত্তিরেখা হিসাবে ५. সম্প্রদায়-চালিত সহযোগিতা কাঠামো প্রতিষ্ঠা করা, ক্রমাগত ডেটাসেট সম্প্রসারণ এবং উন্নতি প্রচার করে

পদ্ধতি বিস্তারিত

ডেটা সংগ্রহ নীতি

উন্নয়নমূলক সম্ভাব্যতা মান

• শিশু-নির্দেশিত বক্তৃতা (CDS): প্রাপ্তবয়স্কদের শিশুদের সাথে কথা বলার প্রতিলিপি
• শিক্ষামূলক উপকরণ: শিশু-মুখী পাঠ্যপুস্তক এবং পরীক্ষার সামগ্রী
• শিশু মিডিয়া: শিশু বই, শিশু উইকি, শিশু সংবাদ
• সাবটাইটেল সামগ্রী: শিশু-উপযুক্ত চলচ্চিত্র/টেলিভিশন প্রোগ্রামের সাবটাইটেল
• সিন্থেটিক ডেটা বর্জন: TinyStories এর মতো কৃত্রিমভাবে উত্পন্ন সামগ্রী ব্যবহার এড়ানো

সম্প্রদায়-চালিত ডেটা নেতৃত্ব

প্রতিটি ভাষার ডেটা সংগ্রহ সেই ভাষার সাথে পরিচিত গবেষকদের দ্বারা পরিচালিত হয়, ডেটা গুণমান এবং সাংস্কৃতিক অভিযোজন নিশ্চিত করে।

ডেটাসেট রচনা

ডেটা বিভাগ

१. প্রতিলিপি ডেটা (Transcription)

• শিশু-নির্দেশিত বক্তৃতা: CHILDES ডাটাবেসে যত্নশীল-শিশু মিথস্ক্রিয়া
• শিশু-অ্যাক্সেসযোগ্য বক্তৃতা: প্রাপ্তবয়স্ক কথোপকথন, যা শিশুরা অনিচ্ছাকৃতভাবে শুনতে পারে

२. শিক্ষামূলক সামগ্রী (Education)

• শিশু-মুখী পাঠ্যপুস্তক, পরীক্ষার উপকরণ
• সরাসরি নির্দেশনা প্রদান করে, CDS এর আনুষ্ঠানিক ভাষা প্যাটার্ন পরিপূরক

३. বই, উইকি, সংবাদ (Books, Wiki, News)

• শিশু বই, শিশু উইকি নিবন্ধ, শিশু সংবাদ
• আরও জটিল বাক্য কাঠামো এবং বৈচিত্র্যময় শব্দভাণ্ডার রয়েছে

४. সাবটাইটেল (Subtitles)

• শিশু-উপযুক্ত চলচ্চিত্র/টেলিভিশন প্রোগ্রামের সাবটাইটেল
• QED কর্পাসে শিক্ষামূলক সামগ্রীর সাবটাইটেল

५. প্যাডিং ডেটা (Padding)

• OpenSubtitles কর্পাস (অনুপযুক্ত সামগ্রী ফিল্টার করা)
• FineWeb-C এবং উইকিপিডিয়া ডেটা ব্যাকআপ হিসাবে

ভাষা স্তরবিন্যাস

• স্তর ১ (Tier 1): ९টি ভাষা, প্রায় १०০ মিলিয়ন ইংরেজি সমতুল্য শব্দ
• স্তর २ (Tier 2): १५টি ভাষা, প্রায় १०,००० মিলিয়ন ইংরেজি সমতুল্য শব্দ
• স্তর ३ (Tier 3): २१টি ভাষা, প্রায় १ মিলিয়ন ইংরেজি সমতুল্য শব্দ

ডেটা পূর্ব-প্রক্রিয়াকরণ

ভাষা-নির্দিষ্ট পূর্ব-প্রক্রিয়াকরণ

ভাষা দায়িত্বশীল দ্বারা নির্দিষ্ট ভাষা এবং ডেটা প্রয়োজন অনুযায়ী প্রাথমিক প্রক্রিয়াকরণ।

একীভূত প্রক্রিয়াকরণ পাইপলাইন

१. স্ট্যান্ডার্ডাইজেশন: ইউনিকোড, হোয়াইটস্পেস, বিরাম চিহ্ন স্ট্যান্ডার্ডাইজেশন २. বিভাগ-নির্দিষ্ট প্রক্রিয়াকরণ:

• সংলাপ প্রতিলিপি: ভাষাগত টীকা সরানো
• সাবটাইটেল ডেটা: বক্তা লেবেল, সঙ্গীত প্রতীক, মঞ্চ নির্দেশনা সরানো
• বই ফর্ম্যাট: XML ট্যাগ এবং URL সরানো ३. ভাষা যাচাইকরণ: GlotLID v3 ব্যবহার করে ভাষা সনাক্তকরণ এবং যাচাইকরণ

পরীক্ষামূলক সেটআপ

মডেল কনফিগারেশন

• একক-ভাষিক মডেল: GPT-२ আর্কিটেকচার, ४টি ট্রান্সফর্মার স্তর, ८টি মনোযোগ মাথা, লুকানো মাত্রা ५१२
• দ্বিভাষিক মডেল: লক্ষ্য ভাষা এবং ইংরেজি ডেটা সংমিশ্রণ (মোট २००M শব্দ)
• বহুভাষিক মডেল: १२টি স্তর, লুকানো মাত্রা ७६८, শব্দভাণ্ডার ३२,७६८, १११M প্যারামিটার
• শব্দভাণ্ডার আকার: ८,१९२ (একক-ভাষিক), ३२,७६८ (বহুভাষিক)
• প্রশিক্ষণ কৌশল: BPE টোকেনাইজেশন, १०টি epoch (একক-ভাষিক), ५টি epoch (দ্বিভাষিক), १টি epoch (বহুভাষিক)

মূল্যায়ন কাঠামো

আনুষ্ঠানিক ভাষাগত দক্ষতা

• MonoBLiMP: ভাষা-নির্দিষ্ট ন্যূনতম বৈপরীত্য বেঞ্চমার্ক
• MultiBLiMP: সর্বজনীন নির্ভরতার উপর ভিত্তি করে বৃহৎ-স্কেল ন্যূনতম বৈপরীত্য ডেটাসেট
• CLAMS: ক্রস-ভাষাগত বিষয়-ক্রিয়া চুক্তি বেঞ্চমার্ক

কার্যকরী ভাষাগত দক্ষতা

• জ্ঞান-ভিত্তিক কাজ: Global-MMLU, INCLUDE, BM-LAMA
• যুক্তি-ভিত্তিক কাজ: XNLI, HellaSwag, Belebele, ARC, XCOPA ইত্যাদি

মূল্যায়ন পদ্ধতি

• শূন্য-শট মূল্যায়ন: মডেল আউটপুট সম্ভাবনার উপর ভিত্তি করে ন্যূনতম বৈপরীত্য
• সূক্ষ্ম-সুর মূল্যায়ন: শ্রেণীবিভাগ এবং প্রশ্ন-উত্তর কাজ, সর্বাধিক ८,००० প্রশিক্ষণ নমুনা, १०টি epoch

তুলনামূলক পদ্ধতি

• ভিত্তিরেখা মডেল: র্যান্ডম কর্মক্ষমতা
• তুলনামূলক মডেল: Qwen३-०.६B (আকার-উপযুক্ত বহুভাষিক মডেল)
• আর্কিটেকচার তুলনা: GPT-BERT বনাম GPT-२

পরীক্ষামূলক ফলাফল

প্রধান ফলাফল

একক-ভাষিক মডেল কর্মক্ষমতা

• MultiBLiMP কাজ: প্রথম স্তরের ভাষা সাধারণত ८०% এর উপরে নির্ভুলতা অতিক্রম করে, ভাল ব্যাকরণগত শেখার ক্ষমতা প্রদর্শন করে
• অন্যান্য বেঞ্চমার্ক: বেশিরভাগ কাজের কর্মক্ষমতা র্যান্ডম স্তরের কাছাকাছি, ডেটা আকার সীমাবদ্ধতা প্রতিফলিত করে
• ডেটা আকার প্রভাব: স্তর १ > স্তর २ > স্তর ३, ডেটা পরিমাণের কর্মক্ষমতায় গুরুত্বপূর্ণ প্রভাব প্রদর্শন করে

বহুভাষিক বনাম একক-ভাষিক তুলনা

• MultiBLiMP: একক-ভাষিক মডেল সাধারণত বহুভাষিক মডেলের চেয়ে উন্নত, স্তর ३ এর ४টি ভাষা ছাড়া
• Belebele: উভয় মডেল র্যান্ডম স্তরের কাছাকাছি, যখন Qwen উল্লেখযোগ্যভাবে ভাল পারফর্ম করে
• সামগ্রিক প্রবণতা: Qwen বেশিরভাগ কাজে এই পেপারের মডেলকে অতিক্রম করে, কিন্তু ८টি ভাষায় এই পেপারের বহুভাষিক মডেল আরও শক্তিশালী

দ্বিভাষিক মডেল প্রভাব

• জ্ঞান-নিবিড় কাজ: SIB-२००, BM-LAMA, XCOMPS, INCLUDE সামঞ্জস্যপূর্ণ কর্মক্ষমতা উন্নতি প্রদর্শন করে
• ব্যাকরণগত কাজ: MultiBLiMP কর্মক্ষমতা মূলত অপরিবর্তিত, দ্বিভাষিক ইনপুটের প্রতি বাক্যতাত্ত্বিক ক্ষমতা কম সংবেদনশীল নির্দেশ করে
• বিশেষ ক্ষেত্রে: ডাচ INCLUDE কাজে সামান্য হ্রাস, সম্ভবত ডোমেইন অমিল কারণে

অ্যাবলেশন পরীক্ষা

আর্কিটেকচার তুলনা (GPT-२ বনাম GPT-BERT)

• GPT-२ মডেল SIB-२०० এবং MultiBLiMP কাজে GPT-BERT এর চেয়ে ধারাবাহিকভাবে উন্নত
• ফলাফল বর্তমান কনফিগারেশনে ছোট-স্কেল ডেটা প্রশিক্ষণের জন্য GPT-२ আর্কিটেকচার আরও উপযুক্ত নির্দেশ করে

ভাষা কভারেজ বিশ্লেষণ

• স্তর १ ভাষা: চীনা, ফরাসি, বুলগেরিয়ান ইত্যাদি, উন্নয়নমূলকভাবে সম্ভাব্য ডেটার তুলনামূলক সমৃদ্ধ
• স্তর २ ভাষা: জাপানি, সার্বিয়ান, ক্যান্টোনিজ ইত্যাদি, মধ্যম ডেটা পরিমাণ
• স্তর ३ ভাষা: বেশিরভাগ সম্পদ-সীমিত ভাষা, প্রধানত বহুভাষিক সম্পদ পূরণ উপর নির্ভর করে

সম্পর্কিত কাজ

BabyLM চ্যালেঞ্জ

• প্রথম সংস্করণ: १०M এবং १००M শব্দের ইংরেজি কর্পাস, ३९% উন্নয়নমূলক সম্ভাব্য ডেটা
• দ্বিতীয় সংস্করণ: ७०% শিশু-নির্দেশিত ডেটায় বৃদ্ধি
• মূল্যায়ন পদ্ধতি: শূন্য-শট ন্যূনতম বৈপরীত্য এবং সূক্ষ্ম-সুর মূল্যায়ন

বহুভাষিক সম্প্রসারণ প্রচেষ্টা

• Salhan ইত্যাদি (२०२४): ফরাসি, জার্মান, জাপানি, চীনা অধিগ্রহণ-অনুপ্রাণিত পাঠ্যক্রম শেখার
• Prévot ইত্যাদি (२०२४): ইংরেজি এবং ফরাসি স্বতঃস্ফূর্ত বক্তৃতা কর্পাস গবেষণা
• Matzopoulos ইত্যাদি (२०२५): isiXhosa এর BabyLM গবেষণা, কম-সম্পদ ভাষা চ্যালেঞ্জ হাইলাইট করে

বিদ্যমান বহুভাষিক সংস্থান

• CHILDES: ४०+ ভাষায় শিশু-প্রাপ্তবয়স্ক মিথস্ক্রিয়া ডাটাবেস
• MAO-CHILDES: ५টি ভাষায় বয়স-সাজানো ডেটাসেট
• IPA-CHILDES: ३१টি ভাষায় ফোনেমিকৃত কর্পাস

উপসংহার এবং আলোচনা

প্রধান উপসংহার

१. সম্ভাব্যতা যাচাইকরণ: ४५টি ভাষার উন্নয়নমূলকভাবে সম্ভাব্য ডেটাসেট সফলভাবে নির্মাণ করা, বহুভাষিক BabyLM গবেষণার সম্ভাব্যতা প্রমাণ করে २. ডেটা পরিমাণ প্রভাব: আরও উন্নয়নমূলক সম্ভাব্য ডেটা প্রকৃতপক্ষে ব্যাকরণগত শেখার ক্ষমতা উন্নত করে, বিশেষত MultiBLiMP কাজে ३. দ্বিভাষিক সুবিধা: জ্ঞান-নিবিড় কাজে, দ্বিভাষিক প্রশিক্ষণ সামঞ্জস্যপূর্ণ কর্মক্ষমতা উন্নতি নিয়ে আসে ४. আর্কিটেকচার পছন্দ: ছোট-স্কেল ডেটা সেটিংসে, GPT-२ আর্কিটেকচার GPT-BERT এর চেয়ে উন্নত

সীমাবদ্ধতা

१. ভাষা কভারেজ অসমতা: ४५টি ভাষা জুড়ে বিস্তৃত হওয়া সত্ত্বেও, আফ্রিকান ভাষা এবং ছোট ভাষা এখনও প্রতিনিধিত্ব অপর্যাপ্ত २. ডেটা রচনা পার্থক্য: বিভিন্ন ভাষার উন্নয়নমূলক সম্ভাব্য ডেটার অনুপাত উল্লেখযোগ্যভাবে পরিবর্তিত হয়, ক্রস-ভাষাগত তুলনা প্রভাবিত করতে পারে ३. মূল্যায়ন সম্পদ সীমাবদ্ধতা: সমস্ত ভাষা জুড়ে মান-ভিত্তিক মূল্যায়ন বেঞ্চমার্কের অভাব ४. ডেটা সাদৃশ্য: ডেটাসেট শুধুমাত্র প্রকৃত শিশু ভাষা ইনপুটের একটি মোটামুটি অনুমান

ভবিষ্যত দিকনির্দেশনা

१. ভাষা কভারেজ সম্প্রসারণ: বিশেষত আফ্রিকান ভাষা এবং অন্যান্য কম-সম্পদ ভাষা २. ডেটা গুণমান উন্নতি: আরও উচ্চ-মানের শিশু-নির্দেশিত ভাষা ডেটা সংগ্রহ ३. মান-ভিত্তিক মূল্যায়ন: ক্রস-ভাষাগত সামঞ্জস্যপূর্ণ মূল্যায়ন কাঠামো উন্নয়ন ४. বহুভাষিক ক্ষমতা গবেষণা: দ্বিভাষিক এবং বহুভাষিক অধিগ্রহণ প্রক্রিয়া গভীরভাবে অধ্যয়ন

গভীর মূল্যায়ন

শক্তি

१. সিস্টেমেটিক অবদান: প্রথমবারের মতো বৃহৎ-স্কেল বহুভাষিক উন্নয়নমূলক সম্ভাব্য ডেটাসেট সিস্টেমেটিকভাবে নির্মাণ २. সম্প্রদায় ভিত্তিক: টেকসই সম্প্রদায়-চালিত ডেটা সংগ্রহ কাঠামো প্রতিষ্ঠা ३. পদ্ধতিগত কঠোরতা: ক্রস-ভাষাগত ডেটা পরিমাণ তুলনীয়তা নিশ্চিত করতে বাইট-মূল্য পদ্ধতি ব্যবহার ४. উচ্চ খোলামেলাতা: সম্পূর্ণ ডেটা, কোড এবং মডেল প্রদান করে, পুনরুৎপাদনযোগ্য গবেষণা প্রচার করে ५. উচ্চ ব্যবহারিক মূল্য: বহুভাষিক জ্ঞানীয় মডেলিং এবং ডেটা দক্ষতা গবেষণার জন্য গুরুত্বপূর্ণ সংস্থান প্রদান করে

অপর্যাপ্ততা

१. ডেটা গুণমান অসমতা: বিভিন্ন ভাষার উন্নয়নমূলক সম্ভাব্য ডেটার অনুপাত উল্লেখযোগ্যভাবে পরিবর্তিত হয় २. মডেল কর্মক্ষমতা সীমিত: ভিত্তিরেখা মডেল বেশিরভাগ কাজে র্যান্ডম স্তরের কাছাকাছি কর্মক্ষমতা ३. মূল্যায়ন কভারেজ অসম্পূর্ণ: কিছু ভাষা পর্যাপ্ত মূল্যায়ন বেঞ্চমার্ক অভাব ४. তাত্ত্বিক বিশ্লেষণ অপর্যাপ্ত: কেন নির্দিষ্ট ভাষা বা কাজ আরও ভাল পারফর্ম করে তার গভীর বিশ্লেষণ অভাব

প্রভাব

१. ক্ষেত্র অবদান: বহুভাষিক উন্নয়নমূলক সম্ভাব্য ডেটাসেটের শূন্যতা পূরণ করে, সম্পর্কিত গবেষণা উন্নয়ন চালিত করে २. ব্যবহারিক মূল্য: কম-সম্পদ ভাষার ভাষা মডেল গবেষণার জন্য গুরুত্বপূর্ণ শুরু প্রদান করে ३. পুনরুৎপাদনযোগ্যতা: সম্পূর্ণ ওপেন-সোর্স সংস্থান গবেষণার পুনরুৎপাদনযোগ্যতা এবং স্কেলেবিলিটি নিশ্চিত করে ४. সম্প্রদায় নির্মাণ: টেকসই সহযোগিতা কাঠামো প্রতিষ্ঠা করে, দীর্ঘমেয়াদী উন্নয়ন প্রচার করে

প্রযোজ্য পরিস্থিতি

१. জ্ঞানীয় ভাষাবিজ্ঞান গবেষণা: মানুষের ভাষা অধিগ্রহণ এবং মেশিন শেখার সম্পর্ক অন্বেষণ २. কম-সম্পদ ভাষা মডেলিং: সম্পদ-সীমিত ভাষার জন্য প্রশিক্ষণ শুরু প্রদান করে ३. বহুভাষিক শিক্ষা: দ্বিভাষিক এবং বহুভাষিক শেখার গবেষণা সমর্থন করে ४. ডেটা দক্ষতা গবেষণা: সীমিত ডেটা বাজেটের অধীনে মডেল প্রশিক্ষণ কৌশল গবেষণা

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

ডেটা সংগ্রহ উদ্ভাবন

१. বাইট-মূল্য ক্যালিব্রেশন: বিভিন্ন ভাষার ডেটা পরিমাণ সামঞ্জস্য করতে UTF-८ এনকোডিং আকার ব্যবহার করে, ন্যায্য তুলনা নিশ্চিত করে २. স্তরবিন্যাসিত ডেটা সংগঠন: উপলব্ধ ডেটা পরিমাণ অনুযায়ী ভাষা তিনটি স্তরে বিভক্ত করে, কভারেজ এবং ডেটা গুণমান ভারসাম্য রাখে ३. সম্প্রদায়-চালিত গুণমান নিয়ন্ত্রণ: প্রতিটি ভাষা মাতৃভাষী বা দক্ষ ব্যবহারকারী দ্বারা পরিচালিত হয়, সাংস্কৃতিক এবং ভাষাগত অভিযোজন নিশ্চিত করে

মূল্যায়ন কাঠামো উদ্ভাবন

१. দ্বৈত-মোড মূল্যায়ন: শূন্য-শট এবং সূক্ষ্ম-সুর মূল্যায়ন সংমিশ্রণ করে, মডেল ক্ষমতা ব্যাপকভাবে পরীক্ষা করে २. ক্রস-ভাষাগত সামঞ্জস্য: MultiBLiMP এর মতো সরঞ্জাম ব্যবহার করে মূল্যায়নের ক্রস-ভাষাগত তুলনীয়তা নিশ্চিত করে ३. ক্ষমতা শ্রেণীবিভাগ মূল্যায়ন: আনুষ্ঠানিক ভাষাগত ক্ষমতা এবং কার্যকরী ভাষাগত ক্ষমতার মূল্যায়ন আলাদা করে

খোলা বিজ্ঞান অনুশীলন

१. সম্পূর্ণ সম্পদ প্রকাশনা: ডেটা, কোড, মডেল সম্পূর্ণ ওপেন-সোর্স २. স্কেলেবল ডিজাইন: সম্প্রদায় অবদান সমর্থন করতে মান-ভিত্তিক পাইপলাইন প্রদান করে ३. স্বচ্ছ ডকুমেন্টেশন: ডেটা উৎস, লাইসেন্স এবং পূর্ব-প্রক্রিয়াকরণ তথ্যের বিস্তারিত

এই কাজ বহুভাষিক ভাষা মডেল গবেষণা এবং জ্ঞানীয় ভাষাবিজ্ঞান ক্রস-ডিসিপ্লিনারি ক্ষেত্রে গুরুত্বপূর্ণ অবদান রাখে, একটি টেকসই গবেষণা প্ল্যাটফর্ম প্রতিষ্ঠা করে, মানুষের ভাষা অধিগ্রহণ প্রক্রিয়ার গভীর বোঝাপড়া চালিত করার প্রত্যাশা করে।