2025-11-25T20:16:18.201421

The Initial Screening Order Problem

Alvarez, Mastropietro, Ruggieri
We investigate the role of the initial screening order (ISO) in candidate screening. The ISO refers to the order in which the screener searches the candidate pool when selecting $k$ candidates. Today, it is common for the ISO to be the product of an information access system, such as an online platform or a database query. The ISO has been largely overlooked in the literature, despite its impact on the optimality and fairness of the selected $k$ candidates, especially under a human screener. We define two problem formulations describing the search behavior of the screener given an ISO: the best-$k$, where it selects the top $k$ candidates; and the good-$k$, where it selects the first good-enough $k$ candidates. To study the impact of the ISO, we introduce a human-like screener and compare it to its algorithmic counterpart, where the human-like screener is conceived to be inconsistent over time. Our analysis, in particular, shows that the ISO, under a human-like screener solving for the good-$k$ problem, hinders individual fairness despite meeting group fairness, and hampers the optimality of the selected $k$ candidates. This is due to position bias, where a candidate's evaluation is affected by its position within the ISO. We report extensive simulated experiments exploring the parameters of the best-$k$ and good-$k$ problems for both screeners. Our simulation framework is flexible enough to account for multiple candidate screening tasks, being an alternative to running real-world procedures.
academic

প্রাথমিক স্ক্রীনিং অর্ডার সমস্যা

মৌলিক তথ্য

  • পেপার আইডি: 2307.15398
  • শিরোনাম: The Initial Screening Order Problem
  • লেখক: Jose M. Alvarez (KU Leuven), Antonio Mastropietro (University of Pisa), Salvatore Ruggieri (University of Pisa)
  • শ্রেণীবিভাগ: cs.LG cs.CY
  • প্রকাশনার সময়: ২০২৩ সালের জুলাই (arXiv প্রি-প্রিন্ট, ২০২৫ সালের জানুয়ারিতে আপডেট)
  • পেপার লিঙ্ক: https://arxiv.org/abs/2307.15398

সারসংক্ষেপ

এই পেপারটি প্রাথমিক স্ক্রীনিং অর্ডার (Initial Screening Order, ISO) এর ভূমিকা অধ্যয়ন করে যা প্রার্থী নির্বাচনে ব্যবহৃত হয়। ISO হল স্ক্রীনিংকারীর দ্বারা k সংখ্যক প্রার্থী নির্বাচনের সময় প্রার্থী পুলে অনুসন্ধানের ক্রম। বর্তমানে, ISO সাধারণত তথ্য অ্যাক্সেস সিস্টেম (যেমন অনলাইন প্ল্যাটফর্ম বা ডাটাবেস অনুসন্ধান) দ্বারা উৎপন্ন হয়। যদিও ISO নির্বাচিত k প্রার্থীদের সর্বোত্তমতা এবং ন্যায্যতার উপর গুরুত্বপূর্ণ প্রভাব ফেলে (বিশেষত মানব স্ক্রীনিংকারীর ক্ষেত্রে), সাহিত্যে এটি বৃহৎ পরিমাণে উপেক্ষা করা হয়েছে। লেখকরা দুটি সমস্যা প্রণয়ন সংজ্ঞায়িত করেছেন যা প্রদত্ত ISO এর অধীনে স্ক্রীনিংকারীর অনুসন্ধান আচরণ বর্ণনা করে: best-k সমস্যা (শীর্ষ k সেরা প্রার্থী নির্বাচন) এবং good-k সমস্যা (শীর্ষ k যথেষ্ট ভাল প্রার্থী নির্বাচন)। ISO এর প্রভাব অধ্যয়নের জন্য, লেখকরা মানব-ধরনের স্ক্রীনিংকারী প্রবর্তন করেছেন এবং অ্যালগরিদমিক স্ক্রীনিংকারীর সাথে তুলনা করেছেন, যেখানে মানব-ধরনের স্ক্রীনিংকারীরা সময়ের সাথে সাথে অসামঞ্জস্যপূর্ণ হতে ডিজাইন করা হয়েছে। বিশ্লেষণ দেখায় যে মানব-ধরনের স্ক্রীনিংকারী good-k সমস্যা সমাধান করার সময়, ISO ব্যক্তিগত ন্যায্যতা বাধাগ্রস্ত করে (যদিও গোষ্ঠী ন্যায্যতা সন্তুষ্ট করে) এবং নির্বাচিত k প্রার্থীদের সর্বোত্তমতা ক্ষতিগ্রস্ত করে। এটি অবস্থান পক্ষপাত দ্বারা সৃষ্ট হয়, অর্থাৎ প্রার্থীর মূল্যায়ন ISO তে তাদের অবস্থান দ্বারা প্রভাবিত হয়।

গবেষণা পটভূমি এবং প্রেরণা

সমস্যার পটভূমি

প্রার্থী স্ক্রীনিং একটি জটিল, মানব-নির্ভর কাজ যা সারসংক্ষেপ স্ক্রীনিং, বিশ্ববিদ্যালয় ভর্তি ইত্যাদি পরিস্থিতিতে ব্যাপকভাবে বিদ্যমান। মেশিন লার্নিং এর উন্নয়নের সাথে, তথ্য অ্যাক্সেস সিস্টেম (IAS) যেমন LinkedIn, Taleo ইত্যাদি প্ল্যাটফর্ম প্রার্থী স্ক্রীনিংয়ে মূল ভূমিকা পালন করে, যা সাধারণত অনুমানিত প্রাসঙ্গিকতা বা নির্দিষ্ট বৈশিষ্ট্য অনুযায়ী প্রার্থীদের উপস্থাপন করে।

গবেষণা প্রেরণা

  1. ব্যবহারিক চাহিদা: ইউরোপীয় ফরচুন গ্লোবাল ৫০০ কোম্পানি G এর সাথে সহযোগিতার অভিজ্ঞতার উপর ভিত্তি করে, লেখকরা পাঁচটি মূল ব্যবহারিক প্যাটার্ন আবিষ্কার করেছেন:
    • G1: স্ক্রীনিংকারীরা বিভিন্ন ISO নির্বাচন করে
    • G2: সম্পূর্ণ অনুসন্ধান এবং আংশিক অনুসন্ধান উভয় পদ্ধতি বিদ্যমান
    • G3: সর্বনিম্ন মৌলিক প্রয়োজনীয়তা পূরণকারী প্রার্থীদের উপর ফোকাস
    • G4: বৈচিত্র্যময় প্রতিনিধিত্ব কোটার ন্যায্যতা লক্ষ্য বিদ্যমান
    • G5: প্রতিটি প্রার্থী মূল্যায়নের সময় প্রায় এক মিনিট
  2. তাত্ত্বিক ফাঁক: বিদ্যমান সাহিত্য প্রধানত ISO সৃষ্টির উপর ফোকাস করে (ন্যায্য সেট নির্বাচন বা র‍্যাঙ্কিং সমস্যা হিসাবে), কিন্তু স্ক্রীনিংকারীরা কীভাবে ISO ব্যবহার করে তা খুব কম অধ্যয়ন করা হয়েছে, বিশেষত মানব স্ক্রীনিংকারীর আচরণ।
  3. ন্যায্যতা সংক্রান্ত উদ্বেগ: অবস্থান পক্ষপাত অনুরূপ প্রার্থীদের ISO তে তাদের অবস্থানের কারণে ভিন্নভাবে আচরণ করতে পারে, যা ব্যক্তিগত ন্যায্যতা নীতি লঙ্ঘন করে।

মূল অবদান

  1. প্রথম বার ISO সমস্যা আনুষ্ঠানিকীকরণ: ISO কে সেট নির্বাচন সমস্যায় একটি মূল পরামিতি হিসাবে স্থাপন করা, best-k এবং good-k দুটি অনুসন্ধান আচরণের সমস্যা প্রণয়ন সংজ্ঞায়িত করা।
  2. মানব-ধরনের স্ক্রীনিংকারী মডেল প্রবর্তন: ক্লান্তি প্রভাব বিবেচনা করে মানব-ধরনের স্ক্রীনিংকারী প্রস্তাব করা এবং অ্যালগরিদমিক স্ক্রীনিংকারীর সাথে তাত্ত্বিক এবং পরীক্ষামূলক তুলনা করা।
  3. নমনীয় সিমুলেশন সরঞ্জাম প্রদান: ISO সমস্যা অধ্যয়নের জন্য সক্ষম একটি সিমুলেশন ফ্রেমওয়ার্ক বিকাশ করা, যা প্রকৃত স্ক্রীনিং পরিস্থিতি চালানোর প্রয়োজন ছাড়াই অনুশীলনকারীদের নির্দেশনা প্রদান করতে পারে।
  4. অবস্থান পক্ষপাতের ন্যায্যতা প্রভাব প্রকাশ: প্রমাণ করা যে ISO মানব-ধরনের স্ক্রীনিংকারীর অধীনে ব্যক্তিগত ন্যায্যতা লঙ্ঘন করে, একই সাথে গোষ্ঠী ন্যায্যতা সীমাবদ্ধতা সন্তুষ্ট করে।

পদ্ধতি বিস্তারিত

কাজের সংজ্ঞা

প্রদত্ত প্রার্থী পুল C যা n সংখ্যক প্রার্থী ধারণ করে, প্রতিটি প্রার্থী c বৈশিষ্ট্য ভেক্টর X_c ∈ R^d এবং সুরক্ষিত বৈশিষ্ট্য w_c দ্বারা বর্ণিত। স্ক্রীনিংকারী h ISO θ এর ভিত্তিতে k প্রার্থীর সেট S^k নির্বাচন করতে হবে, একই সাথে প্রতিনিধিত্ব কোটা q (সুরক্ষিত গোষ্ঠীর S^k তে ন্যূনতম অনুপাত) সন্তুষ্ট করতে হবে।

দুটি সমস্যা প্রণয়ন

Best-k সমস্যা

স্ক্রীনিংকারীকে সম্পূর্ণ প্রার্থী পুল C মূল্যায়ন করতে হবে এবং সর্বোচ্চ স্কোরের k প্রার্থী নির্বাচন করতে হবে:

argmax_{S^k ∈ [C]^k} U^k_add(S^k, θ) s.t. f(S^k) ≥ q

যেখানে উপযোগিতা ফাংশন সংজ্ঞায়িত করা হয়েছে:

U^k_add(S^k, θ) = Σ_{c∈S^k} s(X_c)

Good-k সমস্যা

স্ক্রীনিংকারী সর্বনিম্ন প্রয়োজনীয়তা ψ পূরণকারী প্রথম k প্রার্থী খোঁজে, আংশিক অনুসন্ধান অনুমতি দেয়:

argmax_{S^k ∈ [C]^k} U^k_ψ(S^k, θ) s.t. f(S^k) ≥ q

যেখানে উপযোগিতা ফাংশন সংজ্ঞায়িত করা হয়েছে:

U^k_ψ(S^k, θ) = {
  k - Σ_{c∈S^k} p(c, S^k, θ)  if ∀c ∈ S^k, s(X_c) ≥ ψ
  0                            otherwise
}

শাস্তি ফাংশন p(c, S^k, θ) প্রার্থী c নির্বাচনের "অপচয়িত প্রচেষ্টা" পরিমাপ করে।

স্ক্রীনিংকারী মডেল

অ্যালগরিদমিক স্ক্রীনিংকারী h_a

সামঞ্জস্যপূর্ণভাবে প্রার্থীদের মূল্যায়ন করে, কোন ক্লান্তি প্রভাব ছাড়াই, নির্ধারণীয় অ্যালগরিদম অনুসরণ করে।

মানব-ধরনের স্ক্রীনিংকারী h_h

ক্লান্তি উপাদান Φ(t) = λ·t প্রবর্তন করে, যা প্রার্থী মূল্যায়নকে প্রভাবিত করে:

s_h_h(X_c) + ε

যেখানে ε সঞ্চিত ক্লান্তির উপর নির্ভরশীল একটি র‍্যান্ডম ভেরিয়েবল, দুটি মডেলিং পছন্দ বিবেচনা করে:

  • ε₁ ~ N(0, v(Φ(t-1))): ভেরিয়েন্স ক্লান্তির সাথে বৃদ্ধি পায়
  • ε₂ ~ N(μ(Φ(t-1)), v(Φ(t-1))): গড় ক্লান্তির সাথে হ্রাস পায়

অনুসন্ধান অ্যালগরিদম

  • ExaminationSearch (অ্যালগরিদম 1): best-k সমস্যা সমাধান করে, স্কোর অনুযায়ী অনুসন্ধান করে
  • CascadeSearch (অ্যালগরিদম 2): good-k সমস্যা সমাধান করে, ISO অর্ডার অনুযায়ী অনুসন্ধান করে
  • সংশ্লিষ্ট মানব-ধরনের সংস্করণ (অ্যালগরিদম 3-4): ক্লান্তি প্রভাব যোগ করে

পরীক্ষামূলক সেটআপ

সিমুলেশন ফ্রেমওয়ার্ক

R ভাষায় বিকশিত মন্টে কার্লো সিমুলেশন ফ্রেমওয়ার্ক ব্যবহার করা হয়েছে, প্রতিটি পরামিতি সেটের জন্য ১০,০০০ বার পরীক্ষা চালানো হয়েছে।

প্রার্থী স্কোর বিতরণ

তিনটি ট্রাঙ্কেটেড স্বাভাবিক বিতরণ t_N(μ, σ) বিবেচনা করা হয়েছে:

  • সমান্তরাল বিতরণ: μ=0.5, σ=0.02 (শীর্ষ প্রার্থীর সম্ভাবনা খুবই কম)
  • অসমান বিতরণ: μ=0.8, σ=0.05 (শীর্ষ প্রার্থীর সম্ভাবনা মধ্যম)
  • ক্রমবর্ধমান বিতরণ: μ=1, σ=0.05 (শীর্ষ প্রার্থীর সম্ভাবনা সর্বোচ্চ)

ISO সেটআপ

  • θ ⊥⊥ s: ISO ব্যক্তিগত স্কোর থেকে স্বাধীন (র‍্যান্ডম বা বর্ণানুক্রমিক অর্ডার)
  • θ ⊥̸⊥ s: ISO স্কোরের সাথে সম্পর্কিত, সম্পর্ক সহগ ρ ∈ {-1, -0.8, -0.5}

পরীক্ষামূলক পরামিতি

  • প্রার্থী পুল আকার: n = 120, 400, 30
  • নির্বাচন সংখ্যা: k = 6, 20
  • কোটা: q = 0.5
  • সুরক্ষিত গোষ্ঠীর অনুপাত: pr = 0.2
  • সর্বনিম্ন প্রয়োজনীয়তা: ψ ∈ 0.3, 0.8

মূল্যায়ন সূচক

  • বেসলাইন অনুপাত (RtB): বেসলাইন সমাধানের তুলনায় উপযোগিতা অনুপাত
  • Jaccard সাদৃশ্য (JdS): প্রার্থী ওভারল্যাপ অনুপাত

পরীক্ষামূলক ফলাফল

ক্লান্তি ছাড়া পরিস্থিতি (অ্যালগরিদমিক স্ক্রীনিংকারী)

Good-k বনাম Best-k কর্মক্ষমতা

  1. স্কোর বিতরণ প্রভাব:
    • সমান্তরাল বিতরণে, ψ বৃদ্ধির সাথে, good-k ধীরে ধীরে best-k এর কাছাকাছি আসে
    • অসমান এবং ক্রমবর্ধমান বিতরণে, এমনকি বড় ψ এ, good-k best-k এর কর্মক্ষমতা অর্জন করতে কঠিন
  2. ISO সম্পর্ক প্রভাব:
    • ρ = -1 এ (সম্পূর্ণ নেতিবাচক সম্পর্ক), good-k এবং best-k কর্মক্ষমতা একই
    • ρ = -0.5 এ, good-k ইতিমধ্যে best-k কে ভালভাবে অনুমান করতে পারে
  3. স্কেল প্রভাব:
    • বৃহত্তর k/n অনুপাত good-k কে best-k এর আরও ভাল অনুমান করতে সক্ষম করে
    • ISO প্রভাব k/n বৃদ্ধির সাথে দুর্বল হয়

ক্লান্তি সহ পরিস্থিতি (মানব-ধরনের স্ক্রীনিংকারী)

ক্লান্তি Good-k এর উপর প্রভাব

  1. ভেরিয়েন্স-ধরনের ক্লান্তি (ε₁):
    • উচ্চ ψ মানে সমান্তরাল বিতরণ উল্লেখযোগ্যভাবে কর্মক্ষমতা হ্রাস পায়
    • অসমান এবং ক্রমবর্ধমান বিতরণ অপেক্ষাকৃত স্থিতিশীল
  2. পক্ষপাত-ধরনের ক্লান্তি (ε₂):
    • ছোট মান বিচ্যুতির কারণে, সমান্তরাল বিতরণ প্রভাব ছোট
    • প্রার্থীর গুণমান কম হলে, পক্ষপাতের প্রভাব উল্লেখযোগ্য নয়

Best-k বনাম Good-k ক্লান্তি সহ

  • ক্লান্তি পরিস্থিতিতে, good-k সমাধান কখনও কখনও best-k সমাধানের চেয়ে ভাল
  • দীর্ঘ অনুসন্ধান মানব-ধরনের স্ক্রীনিংকারীদের জন্য ক্ষতিকর তা নির্দেশ করে
  • নির্দিষ্ট সেটিংসে good-k কৌশল পছন্দ করা উচিত

ISO সম্পর্কের সুরক্ষা প্রভাব

  • প্রার্থী গুণমান তথ্য ধারণকারী ISO প্রদান করা ক্লান্তি প্রভাব হ্রাস করতে পারে
  • IAS এর ISO সমস্যায় গুরুত্ব তুলে ধরে

সম্পর্কিত কাজ

ন্যায্য সেট নির্বাচন

এই পেপারটি ন্যায্য সেট নির্বাচন সাহিত্যের অন্তর্গত, সেক্রেটারি সমস্যার সাথে সম্পর্কিত, কিন্তু সাক্ষাৎকার পর্যায়ের পরিবর্তে স্ক্রীনিং প্রক্রিয়ায় ফোকাস করে, অফলাইন সেট নির্বাচন সেটিং গ্রহণ করে।

অবস্থান পক্ষপাত গবেষণা

  • ক্লিক মডেল: ব্যবহারকারীরা কীভাবে ISO অনুসন্ধান করে তা আনুষ্ঠানিকীকরণ এবং পরীক্ষা করার প্রাথমিক ফর্ম
  • অভিজ্ঞতামূলক গবেষণা: Echterhoff ইত্যাদি এবং Wang ইত্যাদি প্রার্থী স্ক্রীনিংয়ে অবস্থান পক্ষপাতের অভিজ্ঞতামূলক প্রমাণ প্রদান করেছেন
  • এই পেপারের অবদান: ISO কে সমস্যা প্রণয়নে একটি পরামিতি হিসাবে সংজ্ঞায়িত করা, সিমুলেশন ব্যবহার করে একাধিক স্ক্রীনিং পরিস্থিতি ক্যাপচার করা

তথ্য অ্যাক্সেস সিস্টেম

বিদ্যমান কাজ প্রধানত ISO সৃষ্টিতে ফোকাস করে (ন্যায্য র‍্যাঙ্কিং), এই পেপার স্ক্রীনিংকারীরা কীভাবে ISO ব্যবহার করে তা নিয়ে ফোকাস করে, বিশেষত মানব ব্যবহারকারীর আচরণ।

উপসংহার এবং আলোচনা

প্রধান উপসংহার

  1. অবস্থান পক্ষপাতের ন্যায্যতা প্রভাব: ISO মানব-ধরনের স্ক্রীনিংকারীর অধীনে ব্যক্তিগত ন্যায্যতা লঙ্ঘন করে, এমনকি গোষ্ঠী ন্যায্যতা সীমাবদ্ধতা সন্তুষ্ট করলেও।
  2. সমস্যা প্রণয়নের গুরুত্ব: প্রার্থী নির্বাচনে ISO এর প্রভাব বোঝার জন্য সঠিক সমস্যা প্রণয়ন সংজ্ঞায়িত করা অত্যন্ত গুরুত্বপূর্ণ।
  3. স্ক্রীনিংকারী আচরণের জটিলতা: Best-k এবং good-k সমস্যার মধ্যে জটিল সম্পর্ক বিদ্যমান, যা প্রার্থী গুণমান বিতরণ, ISO সম্পর্ক এবং ক্লান্তি প্রভাবের উপর নির্ভর করে।

সীমাবদ্ধতা

  1. ফাংশন অনুমান সীমাবদ্ধতা: উপযোগিতা মডেল এবং ক্লান্তি পদের ফাংশন অনুমান অত্যধিক সরলীকৃত হতে পারে
  2. ক্লান্তি মডেলিং: রৈখিক ক্লান্তি সঞ্চয় বাস্তবসম্মত নাও হতে পারে
  3. সিমুলেশন বনাম বাস্তবতা: সিমুলেশন ফলাফল প্রকৃত পরিস্থিতিতে যাচাইকরণ প্রয়োজন

ভবিষ্যত দিকনির্দেশনা

  1. বিকল্প উপযোগিতা মডেল: exposure discounting ইত্যাদি অন্যান্য উপযোগিতা মডেল অন্বেষণ করা
  2. উন্নত ক্লান্তি মডেল: স্ক্রীনিংকারীর বিশ্রামের চক্রীয় জীবন মডেল বিবেচনা করা
  3. মানব সিদ্ধান্ত তত্ত্ব: আরও মানব সিদ্ধান্ত তত্ত্ব একীভূত করা
  4. পরামিতি অপ্টিমাইজেশন: সর্বোত্তম পরামিতি পরীক্ষা করতে সিমুলেশন ফ্রেমওয়ার্ক ব্যবহার করা

গভীর মূল্যায়ন

শক্তি

  1. সমস্যার গুরুত্ব: প্রথমবারের মতো সিস্টেমেটিকভাবে ISO এর এই উপেক্ষিত কিন্তু গুরুত্বপূর্ণ সমস্যা অধ্যয়ন করা
  2. তাত্ত্বিক অবদান: কঠোর গাণিতিক ফ্রেমওয়ার্ক এবং অ্যালগরিদম বাস্তবায়ন প্রদান করা
  3. ব্যবহারিক প্রাসঙ্গিকতা: প্রকৃত এন্টারপ্রাইজ সহযোগিতার অন্তর্দৃষ্টির উপর ভিত্তি করে, বাস্তব প্রয়োগ মূল্য রয়েছে
  4. পদ্ধতি উদ্ভাবন: মানব-ধরনের স্ক্রীনিংকারী মডেল প্রবর্তন করা, ক্লান্তি প্রভাব বিবেচনা করা
  5. পরীক্ষামূলক ব্যাপকতা: বৃহৎ-স্কেল সিমুলেশনের মাধ্যমে একাধিক পরামিতি সমন্বয় অন্বেষণ করা
  6. সরঞ্জাম অবদান: ওপেন-সোর্স সিমুলেশন ফ্রেমওয়ার্ক প্রদান করা

অপূর্ণতা

  1. মডেল সরলীকরণ: ক্লান্তি মডেল অপেক্ষাকৃত সহজ, জটিল মানব আচরণ ক্যাপচার করতে পারে না
  2. যাচাইকরণ অপর্যাপ্ত: প্রধানত সিমুলেশনের উপর ভিত্তি করে, বৃহৎ-স্কেল প্রকৃত ডেটা যাচাইকরণের অভাব
  3. অনুমান সীমাবদ্ধতা: স্বাধীনতা অনুমান (A1, A2) বাস্তবে প্রতিষ্ঠিত নাও হতে পারে
  4. মূল্যায়ন সূচক একক: প্রধানত উপযোগিতা এবং ওভারল্যাপ ডিগ্রিতে ফোকাস করে, অন্যান্য ন্যায্যতা সূচকের অভাব

প্রভাব

  1. একাডেমিক মূল্য: ন্যায্য মেশিন লার্নিং এবং মানব-কম্পিউটার ইন্টারঅ্যাকশন ক্ষেত্রে নতুন দৃষ্টিভঙ্গি প্রদান করা
  2. ব্যবহারিক মূল্য: নিয়োগ প্ল্যাটফর্ম এবং HR সিস্টেম ডিজাইনে নির্দেশনা প্রদান করা
  3. পদ্ধতিগত অবদান: সিমুলেশন ফ্রেমওয়ার্ক অন্যান্য সিদ্ধান্ত পরিস্থিতিতে সম্প্রসারণযোগ্য
  4. নীতি তাৎপর্য: অ্যালগরিদম অডিট এবং ন্যায্যতা নিয়ন্ত্রণের জন্য সরঞ্জাম প্রদান করা

প্রযোজ্য পরিস্থিতি

  1. নিয়োগ স্ক্রীনিং: সারসংক্ষেপ স্ক্রীনিং, প্রার্থী মূল্যায়ন
  2. শিক্ষা মূল্যায়ন: আবেদন পর্যালোচনা, অ্যাসাইনমেন্ট গ্রেডিং
  3. সুপারিশ সিস্টেম: ব্যবহারকারী অনুসন্ধান আচরণ বিবেচনা করে ন্যায্য সুপারিশ
  4. সিদ্ধান্ত সহায়তা: যেকোনো ক্রমিক মূল্যায়ন জড়িত সিদ্ধান্ত পরিস্থিতি

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

মূল উদ্ভাবন

  1. ISO পরামিতিকরণ: প্রাথমিক স্ক্রীনিং অর্ডারকে সমস্যার স্পষ্ট পরামিতি হিসাবে স্থাপন করা
  2. দ্বৈত সমস্যা প্রণয়ন: best-k (বৈশ্বিক সর্বোত্তম) এবং good-k (শর্ত সন্তুষ্টি) দুটি উদ্দেশ্য পার্থক্য করা
  3. ক্লান্তি মডেলিং: সময়-নির্ভর মূল্যায়ন ত্রুটি মডেল প্রবর্তন করা
  4. ন্যায্যতা বিশ্লেষণ: গোষ্ঠী ন্যায্যতা এবং ব্যক্তিগত ন্যায্যতার বিভিন্ন প্রকাশ পার্থক্য করা

অ্যালগরিদম ডিজাইন

ExaminationSearch এবং CascadeSearch অ্যালগরিদম ডিজাইন সুচিন্তিত:

  • ক্রমিক প্রক্রিয়াকরণ ISO প্রভাব নিশ্চিত করে
  • কোটা ব্যবস্থাপনা ন্যায্যতা সীমাবদ্ধতা নিশ্চিত করে
  • মানব-ধরনের সংস্করণ স্বাভাবিকভাবে ক্লান্তি প্রভাব একীভূত করে

পরীক্ষামূলক ডিজাইন

সিমুলেশন ফ্রেমওয়ার্কের ডিজাইন সুচিন্তিত:

  • একাধিক স্কোর বিতরণ বিভিন্ন প্রার্থী গুণমান পরিস্থিতি অনুকরণ করে
  • ISO সম্পর্ক পরামিতি তথ্য সিস্টেমের গুণমান নিয়ন্ত্রণ করে
  • বৃহৎ-স্কেল পুনরাবৃত্তি পরীক্ষা ফলাফল স্থিতিশীলতা নিশ্চিত করে

এই পেপারটি প্রার্থী স্ক্রীনিং সিস্টেম বোঝা এবং উন্নত করার জন্য গুরুত্বপূর্ণ তাত্ত্বিক ভিত্তি এবং ব্যবহারিক সরঞ্জাম প্রদান করে, আরও ন্যায্য এবং কার্যকর কৃত্রিম বুদ্ধিমত্তা-সহায়ক সিদ্ধান্ত গ্রহণ সিস্টেম নির্মাণের জন্য গুরুত্বপূর্ণ।