StatTestCalculator: A New General Tool for Statistical Analysis in High Energy Physics
Abasov, Dudko, Gorin et al.
We present StatTestCalculator (STC), a new open-source statistical analysis tool designed for analysis high energy physics experiments. STC provides both asymptotic calculations and Monte Carlo simulations for computing the exact statistical significance of a discovery or for setting upper limits on signal model parameters. We review the underlying statistical formalism, including profile likelihood ratio test statistics for discovery and exclusion hypotheses, and the asymptotic distributions that allow quick significance estimates. We explain the relevant formulas for the likelihood functions, test statistic distributions, and significance metrics (both with and without incorporating systematic uncertainties). The implementation and capabilities of STC are described, and we validate its performance against the widely-used CMS Combine tool. We find excellent agreement in both the expected discovery significances and upper limit calculations. STC is a flexible framework that can accommodate systematic uncertainties and user-defined statistical models, making it suitable for a broad range of analyses.
academic
StatTestCalculator: উচ্চ শক্তি পদার্থবিজ্ঞানে পরিসংখ্যানগত বিশ্লেষণের জন্য একটি নতুন সাধারণ সরঞ্জাম
এই পেপারটি StatTestCalculator (STC) উপস্থাপন করে, যা উচ্চ শক্তি পদার্থবিজ্ঞান পরীক্ষার বিশ্লেষণের জন্য বিশেষভাবে ডিজাইন করা একটি নতুন ওপেন-সোর্স পরিসংখ্যানগত বিশ্লেষণ সরঞ্জাম। STC আবিষ্কারের সুনির্দিষ্ট পরিসংখ্যানগত তাৎপর্য গণনা করা বা সংকেত মডেল পরামিতিগুলির উপর সীমা নির্ধারণের জন্য অ্যাসিম্পটোটিক গণনা এবং মন্টে কার্লো সিমুলেশন উভয় পদ্ধতি প্রদান করে। পেপারটি অন্তর্নিহিত পরিসংখ্যানগত আনুষ্ঠানিকতা পর্যালোচনা করে, যার মধ্যে রয়েছে আবিষ্কার এবং বর্জন অনুমানের জন্য প্রোফাইল সম্ভাবনা অনুপাত পরীক্ষা পরিসংখ্যান, এবং দ্রুত তাৎপর্য অনুমানের অনুমতি দেয় এমন অ্যাসিম্পটোটিক বিতরণ। লেখকরা সম্ভাবনা ফাংশন, পরীক্ষা পরিসংখ্যান বিতরণ এবং তাৎপর্য পরিমাপের সম্পর্কিত সূত্রগুলি বিস্তারিতভাবে ব্যাখ্যা করেন (পদ্ধতিগত অনিশ্চয়তা সহ এবং ছাড়াই)। পেপারটি STC এর বাস্তবায়ন এবং কার্যকারিতা বর্ণনা করে এবং ব্যাপকভাবে ব্যবহৃত CMS Combine সরঞ্জামের সাথে তুলনার মাধ্যমে এর কর্মক্ষমতা যাচাই করে, প্রত্যাশিত আবিষ্কার তাৎপর্য এবং সীমা গণনা উভয় ক্ষেত্রেই চমৎকার সামঞ্জস্য প্রদর্শন করে।
উচ্চ শক্তি পদার্থবিজ্ঞান (HEP) পরীক্ষাগুলি নতুন ঘটনা সম্পর্কে সিদ্ধান্ত নেওয়ার জন্য পর্যবেক্ষিত ডেটার পরিসংখ্যানগত বিশ্লেষণের উপর নির্ভর করে। কোলাইডার পরীক্ষার ফলাফল প্রকৃতিগতভাবে সম্ভাব্যতামূলক হওয়ায়, পরামিতি অনুমান করতে এবং সম্ভাব্য আবিষ্কারের তাৎপর্য মূল্যায়ন করতে কঠোর পরিসংখ্যানগত পদ্ধতির প্রয়োজন।
যদিও HEP বিশ্লেষণের জন্য অনেক জটিল পরিসংখ্যানগত সরঞ্জাম রয়েছে, যেমন:
RooFit এবং RooStats কাঠামো
CMS Combine সরঞ্জাম
Theta
HistFactory
এই সরঞ্জামগুলি সাধারণত জটিল বড় আকারের বিশ্লেষণের জন্য ডিজাইন করা হয়েছে, বিভিন্ন সাধারণ পরিস্থিতির জন্য দ্রুত এবং নির্ভুল সাধারণ পরিসংখ্যানগত গণনা প্রদান করে এমন একটি হালকা-ওজনের সরঞ্জামের অভাব রয়েছে।