2025-11-17T06:22:13.355563

Survey in Characterization of Semantic Change

de Sá, Da Silveira, Pruski
Live languages continuously evolve to integrate the cultural change of human societies. This evolution manifests through neologisms (new words) or \textbf{semantic changes} of words (new meaning to existing words). Understanding the meaning of words is vital for interpreting texts coming from different cultures (regionalism or slang), domains (e.g., technical terms), or periods. In computer science, these words are relevant to computational linguistics algorithms such as translation, information retrieval, question answering, etc. Semantic changes can potentially impact the quality of the outcomes of these algorithms. Therefore, it is important to understand and characterize these changes formally. The study of this impact is a recent problem that has attracted the attention of the computational linguistics community. Several approaches propose methods to detect semantic changes with good precision, but more effort is needed to characterize how the meaning of words changes and to reason about how to reduce the impact of semantic change. This survey provides an understandable overview of existing approaches to the \textit{characterization of semantic changes} and also formally defines three classes of characterizations: if the meaning of a word becomes more general or narrow (change in dimension) if the word is used in a more pejorative or positive/ameliorated sense (change in orientation), and if there is a trend to use the word in a, for instance, metaphoric or metonymic context (change in relation). We summarized the main aspects of the selected publications in a table and discussed the needs and trends in the research activities on semantic change characterization.
academic

শব্দার্থগত পরিবর্তনের বৈশিষ্ট্যায়ন সম্পর্কিত সমীক্ষা

মৌলিক তথ্য

  • পেপার আইডি: 2402.19088
  • শিরোনাম: Survey in Characterization of Semantic Change
  • লেখক: Jader Martins Camboim de Sá, Marcos Da Silveira, Cédric Pruski (Luxembourg Institute of Science and Technology & University of Luxembourg)
  • শ্রেণীবিভাগ: cs.CL (Computational Linguistics), cs.AI
  • প্রকাশনার সময়: Preprint, নভেম্বর ১৭, ২০২৫ (arXiv v4)
  • পেপার লিংক: https://arxiv.org/abs/2402.19088

সারসংক্ষেপ

ভাষা গতিশীলভাবে বিকশিত হয়, নতুন শব্দ (neologisms) বা বিদ্যমান শব্দের শব্দার্থগত পরিবর্তনের মাধ্যমে সামাজিক-সাংস্কৃতিক পরিবর্তন প্রতিফলিত করে। শব্দের অর্থ বোঝা বিভিন্ন সংস্কৃতি, ক্ষেত্র বা সময়কালের পাঠ্য ব্যাখ্যার জন্য অপরিহার্য এবং যন্ত্র অনুবাদ, তথ্য পুনরুদ্ধার, প্রশ্নোত্তর ব্যবস্থা ইত্যাদি NLP প্রয়োগের কর্মক্ষমতাকে সরাসরি প্রভাবিত করে। যদিও বিদ্যমান পদ্ধতিগুলি শব্দার্থগত পরিবর্তন সনাক্তকরণে ভাল নির্ভুলতা অর্জন করেছে, তবে শব্দার্থগত পরিবর্তনের ধরন বৈশিষ্ট্যায়ন (characterize) কীভাবে করতে হয় তা এখনও সুসংগত গবেষণার অভাব রয়েছে। এই সমীক্ষা প্রথমবারের মতো শব্দার্থগত পরিবর্তন বৈশিষ্ট্যায়নের বিদ্যমান পদ্ধতিগুলি সম্পূর্ণভাবে পর্যালোচনা করেছে, তিনটি পরিবর্তনের আনুষ্ঠানিক সংজ্ঞা প্রদান করেছে: মাত্রা পরিবর্তন (শব্দের অর্থ প্রসারিত বা সংকুচিত হওয়া), অভিমুখ পরিবর্তন (শব্দের অর্থ আরও নেতিবাচক বা ইতিবাচক হওয়া), সম্পর্ক পরিবর্তন (শব্দের অর্থ রূপক বা মেটোনিমি ইত্যাদি অলংকারিক উপায়ে রূপান্তরিত হওয়া)। পেপারটি প্রধান গবেষণা ফলাফল সংক্ষিপ্ত করেছে, বর্তমান সীমাবদ্ধতা বিশ্লেষণ করেছে এবং ভবিষ্যত গবেষণার দিকনির্দেশনা নির্দেশ করেছে।

গবেষণার পটভূমি এবং প্রেরণা

১. মূল সমস্যা

শব্দার্থগত পরিবর্তন (Lexical Semantic Change, LSC) প্রাকৃতিক ভাষা বিবর্তনের একটি মূল ঘটনা। বিদ্যমান গবেষণা প্রধানত শব্দার্থগত পরিবর্তন সনাক্তকরণ (detection) এর উপর দৃষ্টি নিবদ্ধ করে, কিন্তু কীভাবে পরিবর্তন হয়েছে (how it changed) তার বৈশিষ্ট্যায়ন গবেষণা গুরুতরভাবে অপর্যাপ্ত। উদাহরণস্বরূপ:

  • "gay" থেকে "আনন্দময়" থেকে "সমকামী" (মাত্রা সংকোচন + অভিমুখ নিরপেক্ষতা)
  • "heart" থেকে "হৃদয় অঙ্গ" থেকে "সাহস" "কেন্দ্র" ইত্যাদি রূপক অর্থে সম্প্রসারণ (সম্পর্ক পরিবর্তন)
  • "awful" থেকে "বিস্ময়কর" থেকে "ভয়ানক" (অভিমুখ নেতিবাচকীকরণ)

২. গুরুত্ব

  • ভাষাগত মূল্য: ভাষা বিবর্তনের নিয়ম বোঝা, সংস্কৃতি, সমাজ, প্রযুক্তির ভাষার উপর প্রভাব উন্মোচন করা
  • NLP প্রয়োগ:
    • ঐতিহাসিক পাঠ্য বোঝা (যেমন ডিজিটাল মানবিকী গবেষণা)
    • জ্ঞান গ্রাফ রক্ষণাবেক্ষণ (যেমন Wikidata এর সময়গত সামঞ্জস্য)
    • ক্রস-যুগীয় তথ্য পুনরুদ্ধার (যেমন প্রযুক্তিগত সাহিত্যে "cloud" এর শব্দার্থগত স্থানান্তর)
    • অনুভূতি বিশ্লেষণ (যেমন স্ল্যাঙ্গে "sick" এর ইতিবাচকীকরণ)

৩. বিদ্যমান পদ্ধতির সীমাবদ্ধতা

  • একীভূত আনুষ্ঠানিক কাঠামোর অভাব: বিভিন্ন গবেষণা বিভিন্ন পরিভাষা এবং সংজ্ঞা ব্যবহার করে, তুলনা করা কঠিন
  • মূল্যায়ন মান অসামঞ্জস্যপূর্ণ: মান ডেটাসেট এবং মূল্যায়ন মেট্রিক্সের অভাব
  • সনাক্তকরণে ভারী, বৈশিষ্ট্যায়নে হালকা: ৯০% গবেষণা "পরিবর্তন হয়েছে কিনা" এ মনোনিবেশ করে, মাত্র ১০% "কীভাবে পরিবর্তন হয়েছে" তা নিয়ে
  • ডেটা স্বল্পতা: ঐতিহাসিক কর্পাস আধুনিক NLP এর প্রয়োজনের চেয়ে অনেক ছোট (মিলিয়ন স্তর বনাম ট্রিলিয়ন স্তরের টোকেন)

৪. গবেষণার প্রেরণা

এই পেপারটি শব্দার্থগত পরিবর্তন বৈশিষ্ট্যায়নের প্রথম সুসংগত সমীক্ষা, যার লক্ষ্য: ১. বিদ্যমান প্রতিনিধিত্ব পদ্ধতি এবং শ্রেণীবিভাগ পদ্ধতির সীমাবদ্ধতা চিহ্নিত করা ২. বিভিন্ন পদ্ধতির সুবিধা মূল্যায়ন করা ৩. প্রথম-ক্রম যুক্তির উপর ভিত্তি করে আনুষ্ঠানিক সংজ্ঞা প্রদান করা ৪. LSC বৈশিষ্ট্যায়ন কাজের ধারণাগত প্রদর্শন

মূল অবদান

১. প্রথম বৈশিষ্ট্যায়ন-কেন্দ্রিক LSC সমীক্ষা: বিদ্যমান সমীক্ষা (Tahmasebi et al. 2018, Kutuzov et al. 2018) সনাক্তকরণে মনোনিবেশ করে, এই পেপার বৈশিষ্ট্যায়নে মনোনিবেশ করে ২. ত্রি-মেরু শ্রেণীবিভাগ (Three-Pole Taxonomy):

  • মাত্রা (Dimension): broadening/narrowing (শব্দ অর্থের সংখ্যা পরিবর্তন)
  • অভিমুখ (Orientation): amelioration/pejoration (অনুভূতি প্রবণতা পরিবর্তন)
  • সম্পর্ক (Relation): metaphorization/metonymization (অলংকারিক সম্পর্ক পরিবর্তন) ३. আনুষ্ঠানিক কাঠামো: সেট তত্ত্বের উপর ভিত্তি করে গাণিতিক সংজ্ঞা প্রদান (Section 5), identification এবং characterization পার্থক্য করা ४. সুসংগত পদ্ধতি শ্রেণীবিভাগ: প্রতিনিধিত্ব পদ্ধতি (ফ্রিকোয়েন্সি/বিষয়/গ্রাফ/এমবেডিং) × পরিবর্তন মেরু (D/R/O) দ্বারা দ্বি-মাত্রিক শ্রেণীবিভাগ ম্যাট্রিক্স নির্মাণ (Table 3) ५. অভিজ্ঞতামূলক প্রদর্শন: SEMCOR এবং MASC ডেটাসেট ব্যবহার করে কাঠামো সম্ভাব্যতা যাচাই করা ६. গবেষণা শূন্যতা চিহ্নিতকরণ: সম্পর্ক মেরু (R) এবং বহু-মেরু যৌথ বৈশিষ্ট্যায়নের গবেষণা স্বল্পতা নির্দেশ করা

পদ্ধতি বিস্তারিত

কাজের সংজ্ঞা

শব্দার্থগত পরিবর্তন সনাক্তকরণ (Identification)

দুটি কর্পাস t1,t2t_1, t_2 এ শব্দ ww এর প্রতিনিধিত্ব R(w,t1),R(w,t2)R(w, t_1), R(w, t_2) দেওয়া হলে, পরিবর্তন হয়েছে কিনা তা নির্ধারণ করুন: fC(R(w,t1),R(w,t2))→yf_C(R(w, t_1), R(w, t_2)) \rightarrow y যেখানে y∈{0,1}y \in \{0,1\} (দ্বি-শ্রেণী) বা y∈Ry \in \mathbb{R} (ক্রমাগত দূরত্ব)

শব্দার্থগত পরিবর্তন বৈশিষ্ট্যায়ন (Characterization) ★মূল উদ্ভাবন

সনাক্তকরণের ভিত্তিতে, আরও পরিবর্তনের ধরন শ্রেণীবদ্ধ করুন: fx(R(w,t1),R(w,t2))→y,x∈{D,R,O}f_x(R(w, t_1), R(w, t_2)) \rightarrow y, \quad x \in \{D, R, O\}

আনুষ্ঠানিক কাঠামো (Section 5 মূল)

মৌলিক সংজ্ঞা

  • শব্দার্থগত মহাবিশ্ব: STS_T সমস্ত সম্ভাব্য শব্দ অর্থের সেট
  • শব্দ অর্থ ফাংশন: S:V×T→℘(St)S: V \times T \rightarrow \wp(S_t), শব্দ ww কে কর্পাস tt তে শব্দ অর্থের সেটে ম্যাপ করে S(w,t)={s1,s2,...,sk}S(w, t) = \{s_1, s_2, ..., s_k\}

শব্দার্থগত পরিবর্তন নির্ধারণ

শব্দ ww t1,t2t_1, t_2 এর মধ্যে পরিবর্তিত হয় যখন এবং শুধুমাত্র যখন:

\text{সত্য} & S(w, t_1) \neq S(w, t_2) \\ \text{মিথ্যা} & \text{অন্যথায়} \end{cases}$$ #### ত্রি-মেরু সংজ্ঞা **১. মাত্রা পরিবর্তন (Dimension)** $$|S(w, t_1)| \neq |S(w, t_2)|$$ - Broadening: $|S(w, t_1)| < |S(w, t_2)|$ (শব্দ অর্থ বৃদ্ধি) - Narrowing: $|S(w, t_1)| > |S(w, t_2)|$ (শব্দ অর্থ হ্রাস) **উদাহরণ**: - "plane" SEMCOR এ ৫টি শব্দ অর্থ রয়েছে (সমতল, বিমান, কাঠি ইত্যাদি), MASC এ মাত্র ২টি রয়েছে → সংকোচন **२. অভিমুখ পরিবর্তন (Orientation)** অনুভূতি ফাংশন $f: V \times T \rightarrow \{-1, 0, +1\}$ সংজ্ঞায়িত করুন, তাহলে: $$f(w, t_1) \neq f(w, t_2)$$ - Amelioration: $f(w, t_1) < f(w, t_2)$ (ইতিবাচকীকরণ) - Pejoration: $f(w, t_1) > f(w, t_2)$ (নেতিবাচকীকরণ) **বাস্তবায়ন**: ওজনযুক্ত যোগফল SentiWordNet স্কোর $$f(w, t) = \frac{1}{N}\sum_{i=1}^{N} p(s_i) \cdot \text{positive}(s_i)$$ **উদাহরণ**: - "heart" SEMCOR এ $f=0.15$, MASC এ $f=0.97$ → ইতিবাচকীকরণ **३. সম্পর্ক পরিবর্তন (Relation)** সম্পর্ক সাদৃশ্য $l: S \times S \rightarrow \mathbb{R}$ সংজ্ঞায়িত করুন, মোট সম্পর্ক শক্তি: $$R(w, t) = \sum_{i=1}^{N-1}\sum_{j=i+1}^{N} l(s_i, s_j), \quad s_i, s_j \in S(w, t)$$ - বৃদ্ধি: $R(w, t_1) < R(w, t_2)$ (আরও রূপক/মেটোনিমি ব্যবহার) **উদাহরণ**: - "heart" শাব্দিক অর্থ "হৃদয়" থেকে রূপক অর্থ "কেন্দ্র" "সাহস" এ সম্প্রসারণ → সম্পর্ক শক্তিশালী ### প্রযুক্তিগত উদ্ভাবন পয়েন্ট १. **সেট তত্ত্ব আনুষ্ঠানিকীকরণ**: প্রথমবারের মতো কঠোর গাণিতিক ভাষায় LSC বৈশিষ্ট্যায়ন সংজ্ঞায়িত করা, অস্পষ্টতা দূর করা २. **মেরু প্রতিসাম্য**: তিনটি মেরু স্বাভাবিকভাবে যুক্ত (broadening/narrowing একই মাত্রা পরিমাপ ভাগ করে), গণনা কাঠামো সরল করা ३. **কার্যকারিতা**: সংজ্ঞা সরাসরি অ্যালগরিদমে রূপান্তরিত হতে পারে (যেমন শব্দ অর্থ গণনা, অনুভূতি স্কোরিং, সম্পর্ক গ্রাফ বিশ্লেষণ) ४. **Cambridge দৃষ্টিভঙ্গি**: স্থির তুলনা গ্রহণ করা (দুটি কর্পাস তুলনা) McTaggart গতিশীল ট্র্যাকিং এর পরিবর্তে, গণনা পদ্ধতির জন্য উপযুক্ত ## পরীক্ষামূলক সেটআপ ### ডেটাসেট শ্রেণীবিভাগ #### ঐতিহাসিক কর্পাস (Table 2) | কর্পাস | ভাষা | সময় বিস্তার | আকার | বৈশিষ্ট্য | |--------|------|----------|------|------| | **COHA** | ইংরেজি | 1810s-2000s | 4 বিলিয়ন শব্দ | সবচেয়ে সাধারণ, ভারসাম্যপূর্ণ বহু-ধরন | | **Google N-Gram** | বহুভাষিক | 1600-2009 | 3 ট্রিলিয়ন শব্দ | বৃহত্তম স্কেল, কিন্তু বেশি শব্দ | | **DTA** | জার্মান | 1741-1900 | 1022 পাঠ্য | উচ্চ মানের মানব নির্বাচিত | | **CLMET** | ইংরেজি | 1710-1920 | 34 মিলিয়ন শব্দ | সাহিত্যকর্ম প্রধান | #### প্রদর্শন ডেটাসেট - **SEMCOR** (1993): 200,000 শব্দ, WordNet শব্দ অর্থ টীকা - **MASC** (2013): 500,000 শব্দ, আধুনিক আমেরিকান ইংরেজি - **টীকা উৎস**: - শব্দ অর্থ: WordNet - সম্পর্ক: ChainNet (রূপক/মেটোনিমি লিংক) - অভিমুখ: SentiWordNet (ইতিবাচক/নেতিবাচক স্কোর) ### মূল্যায়ন মাত্রা পেপারটি নিজেই একটি সমীক্ষা হিসাবে একীভূত মূল্যায়ন মেট্রিক্স প্রদান করে না, কিন্তু বিদ্যমান পদ্ধতির মূল্যায়ন উপায় বিশ্লেষণ করেছে: #### মাত্রা মেরু (D) - **মেট্রিক্স**: শব্দ অর্থ সংখ্যা পরিবর্তন, ক্লাস্টারিং ঘনত্ব, বিষয় সংখ্যা - **ডেটা উৎস**: অভিধান, শব্দ অর্থ প্ররোচিত ক্লাস্টারিং, বিষয় মডেল #### অভিমুখ মেরু (O) - **মেট্রিক্স**: বীজ শব্দের সাথে দূরত্ব, VAD কাঠামো স্কোর (Valence-Arousal-Dominance) - **চ্যালেঞ্জ**: বীজ শব্দ স্থিতিশীলতা অনুমান, বিদ্রূপ/নেতিবাচন পরিচালনা #### সম্পর্ক মেরু (R) - **মেট্রিক্স**: এন্ট্রপি বৃদ্ধি (Schlechtweg 2017), সম্পর্ক গ্রাফ প্রান্ত সংখ্যা - **সমস্যা**: রূপক বনাম নতুন সমরূপ শব্দ পার্থক্য করা কঠিন ### পদ্ধতি শ্রেণীবিভাগ (Table 3 মূল) | পদ্ধতি | D | R | O | প্রতিনিধিত্ব পদ্ধতি | |--------|---|---|---|----------| | Biemann 2006 | ✓ | - | - | Graph | | Tang et al. 2013 | ✓ | ✓ | - | Frequency | | Hamilton et al. 2016a | - | - | ✓ | Graph (SentiProp) | | Inoue et al. 2022 | ✓ | - | - | Topics (InfiniteSCAN) | | Giulianelli et al. 2020 | ✓ | - | - | Embeddings (BERT) | | Fonteyn & Manjavacas 2021 | - | ✓ | ✓ | Embeddings | **মূল আবিষ্কার**: - **কোন পদ্ধতি তিনটি মেরু কভার করে না**: বৈশিষ্ট্যায়ন জটিলতা উচ্চ - **মাত্রা মেরু গবেষণা সবচেয়ে বেশি**: 18/23 পদ্ধতি - **সম্পর্ক মেরু সবচেয়ে দুর্বল**: মাত্র 3 পদ্ধতি - **এমবেডিং পদ্ধতি প্রভাবশালী**: সাম্প্রতিক প্রবণতা ## পরীক্ষামূলক ফলাফল ### কাঠামো যাচাইকরণ (Section 5.7) #### কেস ১: "heart" এর বহু-মেরু পরিবর্তন **ডেটা** (SEMCOR → MASC): ``` শব্দ অর্থ বিতরণ পরিবর্তন: - heart.n.02 (অঙ্গ, শাব্দিক): 34.8% → 0% - heart.n.03 (সাহস, রূপক+): 12.1% → 90.1% - heart.n.10 (পোকার স্যুট, নতুন): 0% → 2.8% ``` **গণনা ফলাফল**: १. **মাত্রা**: $|S|: 5 \rightarrow 3$, সংকোচন २. **অভিমুখ**: $f: 0.15 \rightarrow 0.97$, শক্তিশালী ইতিবাচকীকরণ ३. **সম্পর্ক**: রূপক ব্যবহার প্রভাবশালী (90.1%), সম্পর্ক শক্তিশালী **ব্যাখ্যা**: শাব্দিক অর্থ "হৃদয়" অদৃশ্য, রূপক অর্থ "সাহস/কেন্দ্র" প্রোটোটাইপ অর্থ হয়ে ওঠে #### কেস २: "plane" এর সংকোচন **ডেটা**: ``` SEMCOR: 5 শব্দ অর্থ (বিমান 48.8%, সমতল 37.2%, কাঠি 4.7% ইত্যাদি) MASC: 2 শব্দ অর্থ (বিমান 90.9%, সমতল 9.1%) ``` **গণনা ফলাফল**: १. **মাত্রা**: $5 \rightarrow 2$, উল্লেখযোগ্য সংকোচন २. **অভিমুখ**: ইতিবাচক শব্দ অর্থ (flat.s.01, +0.375) হারিয়ে যায় → হালকা নেতিবাচকীকরণ ३. **সম্পর্ক**: $R: 1 \rightarrow 0$ (plane.n.03 এবং plane.n.02 এর মেটোনিমি সম্পর্ক অদৃশ্য) ### পদ্ধতি তুলনা বিশ্লেষণ (Table 4) #### ফ্রিকোয়েন্সি পদ্ধতি **সুবিধা**: - সহজ এবং ব্যাখ্যাযোগ্য - নতুন শব্দ সনাক্তকরণের জন্য উপযুক্ত (neologisms) - ডেটা প্রয়োজনীয়তা ছোট **অসুবিধা**: - শব্দ অর্থ পার্থক্য করতে পারে না (polysemy সমস্যা) - ভাষাগত সাদৃশ্য ক্যাপচার করা কঠিন - বিদ্রূপ/নেতিবাচনের প্রতি সংবেদনশীল **প্রয়োগ দৃশ্য**: অভিমুখ মেরুর বীজ শব্দ সহ-উপস্থিতি পরিসংখ্যান #### বিষয় মডেল **সুবিধা**: - তত্ত্বাবধানহীন নতুন শব্দ অর্থ আবিষ্কার - বিষয় বিবর্তন ভিজ্যুয়ালাইজ করা - InfiniteSCAN গতিশীল বিষয় সংখ্যা সমন্বয় **অসুবিধা**: - মানব ব্যাখ্যা প্রয়োজন - বিষয় দানাদারতা নিয়ন্ত্রণ কঠিন - সম্পর্ক মেরু এবং অভিমুখ মেরু গবেষণা শূন্য **প্রতিনিধি কাজ**: - SCAN (Frermann & Lapata 2016) - InfiniteSCAN (Inoue et al. 2022): স্বয়ংক্রিয় শব্দ অর্থ সংখ্যা সনাক্তকরণ #### গ্রাফ পদ্ধতি **সুবিধা**: - শব্দ সম্পর্ক প্রাকৃতিক প্রতিনিধিত্ব - শব্দ অর্থ বিবর্তন গাছ ভিজ্যুয়ালাইজ করা (Ehmüller et al. 2020) - অনুভূতি প্রচার জন্য উপযুক্ত (SentiProp) **অসুবিধা**: - গ্রাফ নির্মাণ গুণমানের উপর নির্ভরশীল - গণনা জটিলতা উচ্চ - সম্পর্ক মেরু গুরুতরভাবে অনুসন্ধান করা হয়নি **প্রতিনিধি কাজ**: - Chinese Whispers ক্লাস্টারিং (Biemann 2006) - Ego-network + PMI ফিল্টারিং (Ehmüller et al. 2020) #### এমবেডিং পদ্ধতি **সুবিধা**: - সূক্ষ্ম শব্দার্থগত পরিবর্তন ক্যাপচার করা - BERT ইত্যাদি প্রসঙ্গ এমবেডিং কর্মক্ষমতা উন্নত করে - ঘনত্ব এমবেডিং (word2gauss) বহু-অর্থতা মডেলিং **অসুবিধা**: - **অর্থ সংমিশ্রণ ঘাটতি**: একক ভেক্টর সূক্ষ্ম-দানাদার শব্দ অর্থ পার্থক্য করতে পারে না - কম ফ্রিকোয়েন্সি শব্দ অস্থির - প্রসঙ্গ এমবেডিং অত্যধিক প্রসঙ্গ-নির্ভর → মিথ্যা ইতিবাচক **প্রতিনিধি কাজ**: - Diachronic embeddings (Hamilton et al. 2016b) - Gaussian embeddings (Moss 2020, Yüksel et al. 2021) - XL-LEXEME (Cassotti et al. 2023): ক্রস-ভাষা WSD প্রশিক্ষণ ### গুরুত্বপূর্ণ আবিষ্কার १. **বৈশিষ্ট্যায়ন সনাক্তকরণের চেয়ে কঠিন**: SemEval-2020 দেখায় প্রসঙ্গ এমবেডিং LSC সনাক্তকরণে স্থির এমবেডিং অতিক্রম করেনি, বৈশিষ্ট্যায়নের জন্য বিশেষ ডিজাইন প্রয়োজন २. **ডেটা বাধা**: ঐতিহাসিক কর্পাস মিলিয়ন স্তর বনাম আধুনিক LLM ট্রিলিয়ন স্তর প্রয়োজন → কম নমুনা শেখার প্রয়োজন ३. **বহুভাষিক অভাব**: ৯০% গবেষণা শুধুমাত্র ইংরেজি ४. **সম্পর্ক মেরু শূন্যতা**: মাত্র 3 পেপার, কোন মান ডেটাসেট নেই ५. **মূল্যায়ন কঠিনতা**: সোনার মান অভাব, বেশিরভাগ গুণগত বিশ্লেষণ ## সম্পর্কিত কাজ ### বিদ্যমান সমীক্ষা তুলনা | সমীক্ষা | বছর | ফোকাস | এই পেপার পার্থক্য | |--------|------|------|----------| | **Tang 2018** | 2018 | চার-ধাপ কাঠামো (কর্পাস → শব্দ অর্থ → মডেলিং → যাচাইকরণ) | সনাক্তকরণে ফোকাস, বৈশিষ্ট্যায়ন সংক্ষিপ্ত | | **Tahmasebi et al. 2018** | 2018 | শব্দ স্তর/অর্থ স্তর পার্থক্য, শব্দ প্রতিস্থাপন | গভীর বৈশিষ্ট্যায়ন গবেষণা সুপারিশ | | **Kutuzov et al. 2018** | 2018 | শব্দ প্রতিনিধিত্ব মডেল এবং ডেটা | শ্রেণীবিভাগ স্কিম যাচাইকরণ অপর্যাপ্ত নির্দেশ করে | | **Montanelli & Periti 2023** | 2023 | প্রসঙ্গ এমবেডিং পদ্ধতি | "শব্দার্থগত স্থানান্তরের নিয়ম" গবেষণা আহ্বান | | **এই পেপার** | 2025 | **বৈশিষ্ট্যায়ন ত্রি-মেরু + আনুষ্ঠানিকীকরণ** | প্রথম সুসংগত বৈশিষ্ট্যায়ন সমীক্ষা | ### তাত্ত্বিক ভিত্তি #### ভাষাগত শ্রেণীবিভাগ (Traugott 2017) - **Broadening/Narrowing**: শব্দ অর্থ পরিসীমা পরিবর্তন - **Amelioration/Pejoration**: অনুভূতি মূল্য পরিবর্তন - **Metaphorization/Metonymization**: অলংকারিক প্রক্রিয়া পরিবর্তন #### গণনা দৃষ্টিভঙ্গি শ্রেণীবিভাগ - **Cambridge দৃষ্টিভঙ্গি**: স্থির তুলনা দুটি কর্পাস (এই পেপার গ্রহণ করে) - **McTaggart দৃষ্টিভঙ্গি**: গতিশীল ট্র্যাকিং বিবর্তন প্রক্রিয়া (ঐতিহাসিক জ্ঞান প্রয়োজন) ### শব্দ অর্থ প্রতিনিধিত্ব বিবর্তন १. **প্রাথমিক**: ফ্রিকোয়েন্সি + সহ-উপস্থিতি ম্যাট্রিক্স (Sagi et al. 2009) २. **2010s**: বিষয় মডেল (Lau et al. 2012), গ্রাফ ক্লাস্টারিং (Biemann 2006) ३. **2016+**: স্থির এমবেডিং (Hamilton et al. 2016b) ४. **2019+**: BERT ইত্যাদি প্রসঙ্গ এমবেডিং (Giulianelli et al. 2020) ५. **ভবিষ্যত**: LLM উৎপাদনশীল পদ্ধতি (Cassotti et al. 2024) ## উপসংহার এবং আলোচনা ### প্রধান সিদ্ধান্ত १. **বৈশিষ্ট্যায়ন গবেষণা গুরুতরভাবে অপর্যাপ্ত**: সনাক্তকরণ বনাম বৈশিষ্ট্যায়ন পেপার অনুপাত প্রায় 9:1 २. **ত্রি-মেরু অসামঞ্জস্যপূর্ণ**: মাত্রা মেরু (D) গবেষণা পর্যাপ্ত, সম্পর্ক মেরু (R) প্রায় শূন্য ३. **পদ্ধতি বিভাজিত**: একীভূত কাঠামো এবং মূল্যায়ন মান অভাব ४. **আনুষ্ঠানিকীকরণ প্রয়োজনীয়তা**: সেট তত্ত্ব সংজ্ঞা অস্পষ্টতা দূর করতে পারে, পদ্ধতি তুলনা প্রচার করতে পারে ५. **ডেটা চ্যালেঞ্জ**: ঐতিহাসিক কর্পাস আকার গভীর শেখার প্রয়োগ সীমাবদ্ধ করে ### সীমাবদ্ধতা #### পদ্ধতিগত সীমাবদ্ধতা १. **সরলীকরণ অনুমান**: শব্দ অর্থ উদ্দেশ্যবাদ (sense objectivism) প্রসঙ্গ নির্ভরতা উপেক্ষা করে २. **দ্বি-বিভাজন সীমাবদ্ধতা**: broadening/narrowing শব্দ অর্থ intension (অভ্যন্তরীণ অর্থ) পরিবর্তন বর্ণনা করতে পারে না ३. **সম্পর্ক মেরু সংজ্ঞা অস্পষ্টতা**: রূপক বনাম মেটোনিমি বনাম নতুন সমরূপ শব্দ পার্থক্য করা কঠিন #### ডেটা সীমাবদ্ধতা १. **কর্পাস পক্ষপাত**: - COHA ইত্যাদি ভারসাম্যপূর্ণ কর্পাস এখনও ধরন পক্ষপাত রয়েছে - Google N-Gram শব্দ বেশি (OCR ত্রুটি) २. **টীকা বিলম্ব**: অভিধান নতুন অর্থ সংগ্রহ 5-10 বছর বিলম্ব ३. **বহুভাষিক অভাব**: অ-ইংরেজি গবেষণা <10% #### মূল্যায়ন সীমাবদ্ধতা १. **সোনার মান অভাব**: বেশিরভাগ কাজ গুণগত বিশ্লেষণ २. **বীজ শব্দ স্থিতিশীলতা**: অভিমুখ মেরু অনুমান করে বীজ শব্দ অপরিবর্তিত (বাস্তবে পরিবর্তিত হয়) ३. **থ্রেশহোল্ড বিষয়গত**: দ্বি-শ্রেণী পরিবর্তন থ্রেশহোল্ড ভাগ করা সম্মতি অভাব ### ভবিষ্যত দিকনির্দেশনা #### স্বল্পমেয়াদী (1-2 বছর) १. **সম্পর্ক মেরু অগ্রগতি**: - রূপক/মেটোনিমি টীকা ডেটাসেট নির্মাণ - জ্ঞান গ্রাফ (Wikidata) ব্যবহার করে ধারণা সম্পর্ক মডেলিং २. **বহু-মেরু যৌথ মডেলিং**: একক মডেল একযোগে D+R+O বৈশিষ্ট্যায়ন ३. **মান মূল্যায়ন**: LSC বৈশিষ্ট্যায়নের benchmark প্রতিষ্ঠা #### মধ্যমেয়াদী (3-5 বছর) १. **LLM প্রয়োগ**: - কম-নমুনা শেখা ডেটা স্বল্পতা প্রশমিত করে - উৎপাদনশীল পদ্ধতি ঐতিহাসিক কর্পাস সংশ্লেষণ (Cassotti et al. 2024) २. **ক্রস-ভাষা গবেষণা**: - শব্দার্থগত পরিবর্তনের সর্বজনীন নিয়ম যাচাই করা - বহুভাষিক প্রশিক্ষণ মডেল ব্যবহার করা ३. **কারণ বিশ্লেষণ**: "কীভাবে পরিবর্তন" থেকে "কেন পরিবর্তন" (সামাজিক সাংস্কৃতিক কারণ) #### দীর্ঘমেয়াদী (5+ বছর) १. **শব্দার্থগত পরিবর্তন নিয়ম**: - কোন শব্দ ধরন সহজে broadening সহ্য করে? - ফ্রিকোয়েন্সি এবং পরিবর্তন গতির সম্পর্ক २. **প্রয়োগ চালিত**: - ঐতিহাসিক পাঠ্য যন্ত্র অনুবাদ - গতিশীল জ্ঞান গ্রাফ রক্ষণাবেক্ষণ - সাংস্কৃতিক বিবর্তন মডেলিং ## গভীর মূল্যায়ন ### সুবিধা #### একাডেমিক অবদান १. **শূন্যতা পূরণ**: প্রথম সুসংগত বৈশিষ্ট্যায়ন সমীক্ষা, identification এবং characterization পার্থক্য স্পষ্ট করে २. **তাত্ত্বিক উদ্ভাবন**: - ত্রি-মেরু শ্রেণীবিভাগ ভাষাগত এবং গণনা দৃষ্টিভঙ্গি একীভূত করে - আনুষ্ঠানিক কাঠামো (Section 5) সরাসরি অ্যালগরিদম ডিজাইন নির্দেশনা দিতে পারে ३. **সম্পূর্ণতা**: - সময় বিস্তার: 2006-2024 - পদ্ধতি কভারেজ: 4 প্রতিনিধিত্ব × 3 পরিবর্তন = 12 মাত্রা বিশ্লেষণ - 23 মূল পেপার গভীর পাঠ #### পদ্ধতিগত সুবিধা १. **ভাষাগত অনুসন্ধান**: Research Rabbit সরঞ্জাম ব্যবহার করে পুনরাবৃত্তিমূলক সাহিত্য সম্প্রসারণ (11 → 151 পেপার) २. **অভিজ্ঞতামূলক যাচাইকরণ**: SEMCOR/MASC কেস কাঠামো কার্যকারিতা প্রদর্শন করে ३. **ভিজ্যুয়ালাইজেশন**: Figure 1 শ্রেণীবিভাগ গাছ, Figure 11 ত্রি-মাত্রিক স্থান স্বজ্ঞাত উপস্থাপন #### লেখার গুণমান १. **কাঠামো স্পষ্টতা**: পটভূমি → পদ্ধতি → আনুষ্ঠানিকীকরণ → আলোচনা যুক্তি কঠোর २. **পরিভাষা একীকরণ**: LSC, D/R/O ইত্যাদি মূল ধারণা স্পষ্টভাবে সংজ্ঞায়িত ३. **টেবিল তথ্য ঘনত্ব**: Table 2-4 বিশাল তথ্য সংক্ষিপ্ত করে ### অসুবিধা #### তাত্ত্বিক স্তর १. **শব্দ অর্থ উদ্দেশ্যবাদ বিতর্ক**: - অনুমান করে শব্দ অর্থ বিচ্ছিন্ন গণনা করা যায় ($S(w,t)=\{s_1,...,s_k\}$) - Wittgenstein এর "পারিবারিক সাদৃশ্য" এবং ব্যবহার তত্ত্ব উপেক্ষা করে - প্রতিক্রিয়া: লেখক "pragmatic stance" স্বীকার করেন, কিন্তু prototype theory যথেষ্ট আলোচনা করেননি २. **সম্পর্ক মেরু সংজ্ঞা অপর্যাপ্ত**: - সূত্র (6) এর $l(s_i, s_j)$ গণনা স্পষ্ট নয় - রূপক বনাম মেটোনিমি পার্থক্য ChainNet ইত্যাদি বাহ্যিক সম্পদ উপর নির্ভর করে ३. **অভিমুখ মেরু সরলীকরণ**: - শুধুমাত্র ইতিবাচক/নেতিবাচক মেরু বিবেচনা করে, অনুভূতির বহু-মাত্রিকতা উপেক্ষা করে (VAD ছাড়া) - বীজ শব্দ নির্বাচনের চক্রীয় যুক্তি সমস্যা #### পরীক্ষামূলক স্তর १. **যাচাইকরণ অপর্যাপ্ত**: - Section 5.7 মাত্র 2 শব্দের কেস, পরিসংখ্যান তাৎপর্য অপর্যাপ্ত - SEMCOR/MASC সময় বিস্তার মাত্র 20 বছর, ঐতিহাসিক পরিবর্তন প্রদর্শনের জন্য অপর্যাপ্ত - মানব টীকা সাথে তুলনা যাচাইকরণ অনুপস্থিত २. **পদ্ধতি তুলনা অনুপস্থিত**: - Table 3 শুধুমাত্র শ্রেণীবিভাগ, নির্ভুলতা পরিমাণগত তুলনা নেই - একই কাজে বিভিন্ন প্রতিনিধিত্ব পদ্ধতির তুলনা পরীক্ষা অনুপস্থিত ३. **ডেটাসেট সীমাবদ্ধতা**: - WordNet টীকা উপর নির্ভর করে, কিন্তু WordNet কভারেজ সম্পূর্ণ নয় (যেমন স্ল্যাঙ্গ, নতুন শব্দ) - ChainNet/SentiWordNet শব্দ আলোচনা অনুপস্থিত #### কভারেজ পরিসীমা १. **LLM যুগ পদ্ধতি অপর্যাপ্ত**: - GPT/BERT LSC প্রয়োগ সহজ উল্লেখ মাত্র - prompt engineering, in-context learning ইত্যাদি নতুন প্যারাডাইম আলোচনা অনুপস্থিত २. **বহু-মোডাল অভাব**: ছবি-পাঠ্য যৌথ মডেলিং শব্দ অর্থ বোঝা সহায়তা করতে পারে ३. **জ্ঞানীয় ভাষাবিজ্ঞান দৃষ্টিভঙ্গি দুর্বল**: Lakoff & Johnson এর ধারণা রূপক তত্ত্বের গণনা মডেল অন্তর্ভুক্ত করেনি ### প্রভাব মূল্যায়ন #### ক্ষেত্রের অবদান (প্রত্যাশিত) १. **প্যারাডাইম রূপান্তর**: LSC গবেষণা সনাক্তকরণ থেকে বৈশিষ্ট্যায়নে গভীরতা প্রচার করে २. **পদ্ধতি নির্দেশনা**: আনুষ্ঠানিক কাঠামো সরাসরি অ্যালগরিদমে রূপান্তরিত হতে পারে (যেমন Algorithm 1 সিউডোকোড) ३. **ডেটাসেট প্রয়োজন**: ত্রি-মেরু টীকা ডেটাসেট নির্মাণ আহ্বান, নতুন benchmark সৃষ্টি করতে পারে #### ব্যবহারিক মূল্য १. **ঐতিহাসিক NLP**: ঐতিহাসিক পাঠ্য বোঝা উন্নত করে (যেমন শেক্সপিয়ার কর্মের শব্দ অর্থ বিভ্রান্তি নিরসন) २. **জ্ঞান প্রকৌশল**: Wikidata ইত্যাদি সময়গত জ্ঞান গ্রাফ রক্ষণাবেক্ষণ নির্দেশনা দেয় ३. **সামাজিক গণনা**: সোশ্যাল মিডিয়ায় শব্দ অর্থ বিবর্তন ট্র্যাক করে (যেমন "woke" এর রাজনীতিকীকরণ) #### পুনরুৎপাদনযোগ্যতা - **উচ্চ**: আনুষ্ঠানিক সংজ্ঞা স্পষ্ট, SEMCOR/MASC জনসাধারণের জন্য উপলব্ধ - **মধ্যম**: কিছু পদ্ধতি (যেমন ChainNet) সম্পদ অ্যাক্সেস কঠিন - **নিম্ন**: কোড সংগ্রহস্থল অনুপস্থিত, পাঠক নিজে বাস্তবায়ন প্রয়োজন ### প্রয়োগ দৃশ্য #### প্রয়োগের জন্য উপযুক্ত १. **ডিজিটাল মানবিকী**: সাহিত্যকর্মে মূল শব্দের শব্দার্থগত বিবর্তন বিশ্লেষণ २. **অভিধান সম্পাদনা**: স্বয়ংক্রিয়ভাবে আপডেট প্রয়োজন শব্দ আবিষ্কার করে ३. **সামাজিক ভাষাবিজ্ঞান**: সামাজিক আন্দোলনে কথোপকথন পরিবর্তন গবেষণা (যেমন "feminism") ४. **কম-সম্পদ ভাষা**: আনুষ্ঠানিক কাঠামো অ-ইংরেজি ভাষায় স্থানান্তরযোগ্য #### অনুপযুক্ত দৃশ্য १. **রিয়েল-টাইম সিস্টেম**: ঐতিহাসিক বিশ্লেষণ বিশাল ঐতিহাসিক ডেটা প্রয়োজন, অনলাইন প্রয়োগের জন্য অনুপযুক্ত २. **সূক্ষ্ম-দানাদার WSD**: ত্রি-মেরু শ্রেণীবিভাগ দানাদারতা মোটা, সূক্ষ্ম শব্দার্থগত পার্থক্য পরিচালনা করতে পারে না ३. **কারণ অনুমান**: শুধুমাত্র "কীভাবে পরিবর্তন" বর্ণনা করে, "কেন পরিবর্তন" ব্যাখ্যা করতে পারে না ## সংক্ষিপ্ত সারসংক্ষেপ এই পেপারটি শব্দার্থগত পরিবর্তন গবেষণা ক্ষেত্রের একটি **মাইলফলক সমীক্ষা**, প্রথমবারের মতো সুসংগতভাবে বৈশিষ্ট্যায়ন সমস্যা উপস্থাপন করে, প্রস্তাবিত ত্রি-মেরু কাঠামো (D/R/O) এবং আনুষ্ঠানিক সংজ্ঞা পরবর্তী গবেষণার জন্য তাত্ত্বিক ভিত্তি স্থাপন করে। এর সর্বোচ্চ মূল্য: १. **গবেষণা দিকনির্দেশনা স্পষ্ট করা**: সম্পর্ক মেরু এবং বহু-মেরু যৌথ মডেলিং শূন্যতা নির্দেশ করে २. **পরিভাষা একীকরণ**: সনাক্তকরণ বনাম বৈশিষ্ট্যায়ন, broadening বনাম generalization ইত্যাদি বিভ্রান্তি দূর করে ३. **কার্যকারিতা**: সেট তত্ত্ব সংজ্ঞা সরাসরি অ্যালগরিদমে রূপান্তরিত হতে পারে তবে, পেপারটি পরীক্ষামূলক যাচাইকরণ, LLM যুগ পদ্ধতি একীকরণ, জ্ঞানীয় ভাষাবিজ্ঞান গভীরতা দিকে এখনও উন্নতির অবকাশ রয়েছে। ভবিষ্যত কাজের সুপারিশ: - ত্রি-মেরু টীকা বৃহৎ-স্কেল ডেটাসেট নির্মাণ (যেমন COHA তে 1000 শব্দের D/R/O পরিবর্তন টীকা) - প্রান্ত-থেকে-প্রান্ত বৈশিষ্ট্যায়ন মডেল উন্নয়ন (যেমন বহু-কাজ শেখা একযোগে তিনটি মেরু পূর্বাভাস) - LLM শূন্য-নমুনা বৈশিষ্ট্যায়ন ক্ষমতা অন্বেষণ (যেমন GPT-4 ব্যবহার করে শব্দ অর্থ রূপকীকরণ নির্ধারণ) NLP গবেষকদের জন্য, এই পেপারটি LSC ক্ষেত্রে প্রবেশের **অবশ্য পাঠ্য**; প্রয়োগ উন্নয়নকারীদের জন্য, এর আনুষ্ঠানিক কাঠামো ঐতিহাসিক পাঠ্য বোঝা সিস্টেম নির্মাণের **তাত্ত্বিক নির্দেশিকা** প্রদান করে।