2025-11-13T14:31:10.402139

Out-of-Distribution Detection in LiDAR Semantic Segmentation Using Epistemic Uncertainty from Hierarchical GMMs

Miandashti, Brenner

In addition to accurate scene understanding through precise semantic segmentation of LiDAR point clouds, detecting out-of-distribution (OOD) objects, instances not encountered during training, is essential to prevent the incorrect assignment of unknown objects to known classes. While supervised OOD detection methods depend on auxiliary OOD datasets, unsupervised methods avoid this requirement but typically rely on predictive entropy, the entropy of the predictive distribution obtained by averaging over an ensemble or multiple posterior weight samples. However, these methods often conflate epistemic (model) and aleatoric (data) uncertainties, misclassifying ambiguous in distribution regions as OOD. To address this issue, we present an unsupervised OOD detection approach that employs epistemic uncertainty derived from hierarchical Bayesian modeling of Gaussian Mixture Model (GMM) parameters in the feature space of a deep neural network. Without requiring auxiliary data or additional training stages, our approach outperforms existing uncertainty-based methods on the SemanticKITTI dataset, achieving an 18\% improvement in AUROC, 22\% increase in AUPRC, and 36\% reduction in FPR95 (from 76\% to 40\%), compared to the predictive entropy approach used in prior works.

academic

LiDAR সিমান্টিক সেগমেন্টেশনে শ্রেণিবদ্ধ GMM থেকে এপিস্টেমিক অনিশ্চয়তা ব্যবহার করে আউট-অফ-ডিস্ট্রিবিউশন ডিটেকশন

মৌলিক তথ্য

পেপার আইডি: 2510.08631
শিরোনাম: LiDAR সিমান্টিক সেগমেন্টেশনে শ্রেণিবদ্ধ GMM থেকে এপিস্টেমিক অনিশ্চয়তা ব্যবহার করে আউট-অফ-ডিস্ট্রিবিউশন ডিটেকশন
লেখক: Hanieh Shojaei Miandashti, Claus Brenner (লাইবনিজ বিশ্ববিদ্যালয় হ্যানোভার)
শ্রেণীবিভাগ: cs.CV, cs.LG
প্রকাশনার সময়: ২০২৫ সালের ৮ অক্টোবর (arXiv প্রি-প্রিন্ট)
পেপার লিংক: https://arxiv.org/abs/2510.08631

সারসংক্ষেপ

এই পেপারটি শ্রেণিবদ্ধ বেইজিয়ান গাউসিয়ান মিশ্রণ মডেল (GMM) প্যারামিটার মডেলিংয়ের উপর ভিত্তি করে এপিস্টেমিক অনিশ্চয়তা অনুমান করার একটি পদ্ধতি প্রস্তাব করে, যা LiDAR সিমান্টিক সেগমেন্টেশনে বিতরণ বহির্ভূত (OOD) সনাক্তকরণের জন্য ব্যবহৃত হয়। এই পদ্ধতিটি সহায়ক ডেটা বা অতিরিক্ত প্রশিক্ষণ পর্যায়ের প্রয়োজন নেই এবং SemanticKITTI ডেটাসেটে বিদ্যমান পূর্বাভাস এন্ট্রপি-ভিত্তিক পদ্ধতির তুলনায় উল্লেখযোগ্য উন্নতি অর্জন করে: AUROC ১৮% বৃদ্ধি, AUPRC ২২% বৃদ্ধি, এবং FPR95 ৭৬% থেকে ৪০% হ্রাস।

গবেষণা পটভূমি এবং প্রেরণা

সমস্যার সংজ্ঞা

স্বয়ংচালিত গাড়ি চালনার মতো নিরাপত্তা-সমালোচনামূলক অ্যাপ্লিকেশনে, LiDAR সিমান্টিক সেগমেন্টেশনকে শুধুমাত্র পরিচিত দৃশ্য সঠিকভাবে বুঝতে হবে না, বরং প্রশিক্ষণের সময় দেখা যায়নি এমন বিতরণ বহির্ভূত (OOD) বস্তুগুলি সনাক্ত করতে এবং অজানা বস্তুগুলিকে পরিচিত শ্রেণীতে ভুলভাবে শ্রেণীবদ্ধ করা এড়াতে হবে।

সমস্যার গুরুত্ব

১. নিরাপত্তার প্রয়োজনীয়তা: স্বয়ংচালিত গাড়ি চালনা সিস্টেমকে রাস্তায় অস্বাভাবিক বস্তু (যেমন ট্র্যাশ বিন, চিহ্ন, প্রাণী ইত্যাদি) সনাক্ত করতে হবে २. নির্ভরযোগ্যতার চাহিদা: গভীর মডেলগুলি প্রায়শই OOD ইনপুটের জন্য অত্যধিক আত্মবিশ্বাসী কিন্তু ভুল পূর্বাভাস তৈরি করে ३. ব্যবহারিক বিবেচনা: বাস্তব পরিবেশে প্রশিক্ষণ ডেটাসেট দ্বারা কভার করা হয়নি এমন অনেক বস্তু শ্রেণী রয়েছে

বিদ্যমান পদ্ধতির সীমাবদ্ধতা

१. তত্ত্বাবধানকৃত পদ্ধতি: সহায়ক OOD ডেটাসেটের উপর নির্ভর করে, যা LiDAR ক্ষেত্রে অর্জন করা কঠিন २. তত্ত্বাবধানহীন পদ্ধতি: প্রধানত পূর্বাভাস এন্ট্রপির উপর নির্ভর করে, কিন্তু এপিস্টেমিক অনিশ্চয়তা (epistemic) এবং অ্যালিটরিক অনিশ্চয়তা (aleatoric) বিভ্রান্ত করে ३. অনিশ্চয়তা বিভ্রান্তি: পূর্বাভাস এন্ট্রপি মডেল অনিশ্চয়তা এবং ডেটা শব্দ মিশ্রিত করে, যার ফলে অস্পষ্ট বিতরণ-মধ্যস্থ অঞ্চলগুলিকে OOD হিসাবে ভুলভাবে শ্রেণীবদ্ধ করা হয়

মূল অবদান

१. এপিস্টেমিক অনিশ্চয়তার উপর ভিত্তি করে OOD সনাক্তকরণ পদ্ধতি প্রস্তাব: শ্রেণিবদ্ধ বেইজিয়ান মডেলিং GMM প্যারামিটারের মাধ্যমে এপিস্টেমিক এবং অ্যালিটরিক অনিশ্চয়তা আলাদা করা २. তত্ত্বাবধানহীন কাঠামো: সহায়ক OOD ডেটা বা অতিরিক্ত প্রশিক্ষণ পর্যায়ের প্রয়োজন নেই, ব্যবহারযোগ্যতা উন্নত করে ३. উল্লেখযোগ্য কর্মক্ষমতা উন্নতি: SemanticKITTI ডেটাসেটে বিদ্যমান পদ্ধতিগুলিকে ব্যাপকভাবে অতিক্রম করে ४. তাত্ত্বিক অবদান: প্রমাণ করে যে এপিস্টেমিক অনিশ্চয়তা OOD সনাক্তকরণে পূর্বাভাস এন্ট্রপির চেয়ে উচ্চতর

পদ্ধতির বিস্তারিত ব্যাখ্যা

কাজের সংজ্ঞা

LiDAR পয়েন্ট ক্লাউডের দূরত্ব দৃশ্য প্রতিনিধিত্ব দেওয়া হলে, লক্ষ্য হল: १. পিক্সেল-স্তরের সিমান্টিক সেগমেন্টেশন সম্পাদন করা २. OOD-এর অন্তর্গত পিক্সেল অঞ্চলগুলি সনাক্ত করা ३. পূর্বাভাসের অনিশ্চয়তা পরিমাণ করা

মডেল আর্কিটেকচার

१. জেনারেটিভ-ডিসক্রিমিনেটিভ হাইব্রিড কাঠামো

GMMSeg আর্কিটেকচারের উপর ভিত্তি করে, গভীর স্নায়ু নেটওয়ার্ক ব্যবহার করে পিক্সেল-স্তরের বৈশিষ্ট্য প্রতিনিধিত্ব z ∈ R^D নিষ্কাশন করে, তারপর বৈশিষ্ট্য স্থানে প্রতিটি সিমান্টিক শ্রেণী c-এর জন্য শ্রেণী-শর্তাধীন গাউসিয়ান মিশ্রণ বিতরণ মডেল করে:

p(z | c) = Σ(k=1 to K) π_k^(c) N(z | μ_k^(c), Σ_k^(c))

যেখানে π_k^(c), μ_k^(c), Σ_k^(c) যথাক্রমে k-তম গাউসিয়ান উপাদানের মিশ্রণ ওজন, গড় এবং সহভেদ প্রতিনিধিত্ব করে।

२. শ্রেণিবদ্ধ বেইজিয়ান মডেলিং

মূল উদ্ভাবন GMM প্যারামিটারের জন্য শ্রেণিবদ্ধ বেইজিয়ান মডেলিং:

পূর্ব বিতরণ: প্রতিটি গাউসিয়ান উপাদানের গড় এবং বৈচিত্র্যের জন্য গাউসিয়ান-বিপরীত গামা সংযুক্ত পূর্ব নির্ধারণ করা
পশ্চাদ্বর্তী আপডেট: প্রশিক্ষণ ডেটার উপর ভিত্তি করে প্যারামিটারের পশ্চাদ্বর্তী বিতরণ আপডেট করা
প্যারামিটার নমুনা: অনুমানের সময় পশ্চাদ্বর্তী বিতরণ থেকে একাধিক GMM প্যারামিটার নমুনা করা

구체적으로:

μ_k^(c) ~ N(μ_0, σ_k^2(c)/κ_0)
σ_k^2(c) ~ Inv-Gamma(α_0, β_0)

३. এপিস্টেমিক অনিশ্চয়তা অনুমান

n সেট GMM প্যারামিটার নমুনা করে, প্রতিটি পিক্সেলের জন্য শ্রেণী পূর্বাভাসের ফ্রিকোয়েন্সি বিতরণ গণনা করে, তারপর এন্ট্রপি গণনা করে:

H[y | z] = -Σ(c=1 to C) p̄_c log p̄_c

যেখানে p̄_c = (1/n)Σ(i=1 to n)Iy^(i) = c শ্রেণী c-এর অভিজ্ঞতামূলক সম্ভাবনা প্রতিনিধিত্ব করে।

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

१. অনিশ্চয়তা বিচ্ছেদ: প্যারামিটার নমুনার মাধ্যমে সরাসরি এপিস্টেমিক অনিশ্চয়তা অনুমান করা, পূর্বাভাস এন্ট্রপিতে দুই ধরনের অনিশ্চয়তার বিভ্রান্তি এড়ানো २. পুনঃপ্রশিক্ষণের প্রয়োজন নেই: বিদ্যমান সেগমেন্টেশন নেটওয়ার্কের বৈশিষ্ট্য স্থান ব্যবহার করে, GMM মডেলিংয়ের মাধ্যমে অনিশ্চয়তা অনুমান বাস্তবায়ন করা ३. তাত্ত্বিক ভিত্তি: পারস্পরিক তথ্য তত্ত্বের উপর ভিত্তি করে, এপিস্টেমিক অনিশ্চয়তা Iy; θ | x = H(p(y|x)) - E_θH(p(y|x,θ)) হিসাবে সংজ্ঞায়িত

পরীক্ষামূলক সেটআপ

ডেটাসেট

SemanticKITTI: ১৯টি সিমান্টিক শ্রেণী সহ LiDAR পয়েন্ট ক্লাউড ডেটাসেট
OOD শ্রেণী: ডেটাসেটে আউটলায়ার শ্রেণী ব্যবহার করা হয় OOD নমুনা হিসাবে (ট্র্যাশ বিন, চিহ্ন, প্রাণী ইত্যাদি)
ইনপুট ফর্ম্যাট: ৬४×१०२४×५ দূরত্ব দৃশ্য ছবি (x,y,z স্থানাঙ্ক, তীব্রতা, দূরত্ব)
বৈশিষ্ট্য মাত্রা: SalsaNext মেরুদণ্ড নেটওয়ার্ক ব্যবহার করে ३२-মাত্রিক বৈশিষ্ট্য নিষ্কাশন

মূল্যায়ন মেট্রিক্স

AUROC: ROC বক্ররেখার অধীন এলাকা, সামগ্রিক শ্রেণীবিভাগ কর্মক্ষমতা পরিমাপ করে
AUPRC: নির্ভুলতা-স্মরণ বক্ররেখার অধীন এলাকা, শ্রেণী ভারসাম্যহীনতা দৃশ্যে উপযুক্ত
FPR95: ৯৫% সত্য ধনাত্মক হার সময় মিথ্যা ধনাত্মক হার, নিরাপত্তা পরিমাপ করে
mIoU: সিমান্টিক সেগমেন্টেশনের গড় ইন্টারসেকশন-ওভার-ইউনিয়ন

তুলনামূলক পদ্ধতি

MSP: সর্বাধিক Softmax সম্ভাবনা
ODIN: তাপমাত্রা স্কেলিং এবং ইনপুট বিঘ্ন পদ্ধতি
MC Dropout: মন্টে কার্লো Dropout
Deep Ensembles (DE): গভীর সমষ্টি
GMMSeg: মূল GMM সেগমেন্টেশন পদ্ধতি (অনিশ্চয়তা মডেলিং ছাড়া)

বাস্তবায়ন বিবরণ

মেরুদণ্ড নেটওয়ার্ক: SalsaNext
GMM উপাদান সংখ্যা: প্রতি শ্রেণী २ গাউসিয়ান উপাদান
নমুনা সংখ্যা: २० GMM প্যারামিটার নমুনা
থ্রেশহোল্ড কৌশল: তত্ত্বাবধানহীন শতাংশ থ্রেশহোল্ড (শীর্ষ ५%)

পরীক্ষামূলক ফলাফল

প্রধান ফলাফল

পদ্ধতি	AUROC (%)	AUPRC (%)	FPR95 (%)	mIoU (%)
MSP	70.41	10.90	76.00	56.37
ODIN	73.74	12.45	75.54	56.37
MC Dropout	73.64	13.65	75.92	57.15
Deep Ensembles	73.03	16.14	76.48	57.17
GMMSeg	87.62	26.14	48.84	57.60
এই পেপারের পদ্ধতি	91.06	37.67	40.14	57.71

মূল আবিষ্কার

१. উল্লেখযোগ্য কর্মক্ষমতা উন্নতি: সেরা baseline (GMMSeg) এর তুলনায়, AUROC ३.४४% বৃদ্ধি, AUPRC ११.५३% বৃদ্ধি २. নিরাপত্তা উন্নতি: FPR95 Deep Ensembles এর তুলনায় ७६.४८% থেকে ४०.१४% হ্রাস ३. সেগমেন্টেশন কর্মক্ষমতা: ভোটিং প্রক্রিয়ার মাধ্যমে, সিমান্টিক সেগমেন্টেশন নির্ভুলতাও সামান্য উন্নতি হয়

গুণগত বিশ্লেষণ

তুলনামূলক ভিজ্যুয়ালাইজেশনের মাধ্যমে আবিষ্কৃত:

এই পেপারের পদ্ধতি: সত্যিকারের OOD বস্তু (চিহ্ন, ট্র্যাশ বিন ইত্যাদি) সঠিকভাবে সনাক্ত করে, অস্পষ্ট ID অঞ্চলে উপযুক্ত অনিশ্চয়তা বজায় রাখে
Deep Ensembles: সিমান্টিক সীমানায় অনেক মিথ্যা ধনাত্মক উৎপন্ন করে, সত্যিকারের OOD বস্তু মিস করে

অনিশ্চয়তা বিতরণ বিশ্লেষণ

পূর্বাভাস এন্ট্রপি এবং এপিস্টেমিক অনিশ্চয়তার বিতরণ তুলনা:

পূর্বাভাস এন্ট্রপি ID এবং OOD নমুনার মধ্যে উল্লেখযোগ্য ওভারল্যাপ রয়েছে
এপিস্টেমিক অনিশ্চয়তা আরও স্পষ্ট বিচ্ছেদ অর্জন করে, ID নমুনা কম অনিশ্চয়তা অঞ্চলে কেন্দ্রীভূত

উপসংহার এবং আলোচনা

প্রধান উপসংহার

१. এপিস্টেমিক অনিশ্চয়তা OOD সনাক্তকরণে পূর্বাভাস এন্ট্রপির চেয়ে আরও কার্যকর २. শ্রেণিবদ্ধ বেইজিয়ান GMM মডেলিং এপিস্টেমিক অনিশ্চয়তা অনুমানের জন্য একটি ব্যবহারিক পদ্ধতি প্রদান করে ३. তত্ত্বাবধানহীন কাঠামো সহায়ক ডেটার উপর নির্ভরতা এড়ায়

সীমাবদ্ধতা

१. মিথ্যা ধনাত্মক সমস্যা: সিমান্টিক অস্পষ্টতা বা ভুল সেগমেন্টেশনের ID অঞ্চলে এখনও উচ্চ অনিশ্চয়তা উৎপন্ন হতে পারে २. থ্রেশহোল্ড নির্বাচন: শতাংশ থ্রেশহোল্ড কৌশলের উপর নির্ভর করে, সমস্ত দৃশ্যে প্রযোজ্য নাও হতে পারে ३. গণনামূলক জটিলতা: একাধিক প্যারামিটার নমুনার প্রয়োজন, অনুমান সময় বৃদ্ধি করে

ভবিষ্যত দিকনির্দেশনা

१. সীমানা অঞ্চলের অস্পষ্টতা হ্রাস করার কৌশল গবেষণা করা २. অনিশ্চয়তা থ্রেশহোল্ড নির্বাচন পদ্ধতি উন্নত করা ३. আরও দক্ষ অনিশ্চয়তা অনুমান পদ্ধতি অন্বেষণ করা

গভীর মূল্যায়ন

সুবিধা

१. তাত্ত্বিক অবদান: OOD সনাক্তকরণে এপিস্টেমিক অনিশ্চয়তার সুবিধা স্পষ্টভাবে ব্যাখ্যা করে, তাত্ত্বিক ভিত্তি প্রদান করে २. পদ্ধতি উদ্ভাবন: GMM প্যারামিটারের বেইজিয়ান মডেলিংয়ের মাধ্যমে এপিস্টেমিক অনিশ্চয়তা অনুমান বাস্তবায়নে চতুরতার সাথে ३. পরীক্ষা সম্পূর্ণ: মান ডেটাসেটে একাধিক baseline এর সাথে ব্যাপক তুলনা ४. ব্যবহারিক শক্তি: সহায়ক ডেটা বা পুনঃপ্রশিক্ষণের প্রয়োজন নেই, স্থাপনা সহজ

অপূর্ণতা

१. সাধারণীকরণ যাচাই করা বাকি: শুধুমাত্র SemanticKITTI ডেটাসেটে যাচাই করা হয়েছে, আরও ডেটাসেটে যাচাইয়ের প্রয়োজন २. প্যারামিটার সংবেদনশীলতা: GMM উপাদান সংখ্যা ইত্যাদি হাইপারপ্যারামিটার নির্বাচনের বিস্তারিত বিশ্লেষণ অভাব ३. গণনামূলক খরচ: একাধিক নমুনার গণনামূলক খরচ বিশ্লেষণ অপর্যাপ্ত ४. তাত্ত্বিক বিশ্লেষণ: GMM মডেলিং কেন অনিশ্চয়তা আরও ভালভাবে আলাদা করতে পারে তার গভীর তাত্ত্বিক ব্যাখ্যা অভাব

প্রভাব

१. একাডেমিক মূল্য: LiDAR সিমান্টিক সেগমেন্টেশনে OOD সনাক্তকরণের জন্য নতুন গবেষণা দিকনির্দেশনা প্রদান করে २. ব্যবহারিক মূল্য: স্বয়ংচালিত গাড়ি চালনার মতো নিরাপত্তা-সমালোচনামূলক অ্যাপ্লিকেশনের জন্য গুরুত্বপূর্ণ ३. পুনরুৎপাদনযোগ্যতা: পদ্ধতি বর্ণনা স্পষ্ট, বাস্তবায়ন অপেক্ষাকৃত সহজ

প্রযোজ্য দৃশ্য

१. স্বয়ংচালিত গাড়ি চালনা: রাস্তায় অস্বাভাবিক বস্তু সনাক্ত করা २. রোবট নেভিগেশন: অজানা পরিবেশে বাধা সনাক্ত করা ३. নিরাপত্তা পর্যবেক্ষণ: অস্বাভাবিক আচরণ বা বস্তু সনাক্ত করা ४. শিল্প পরিদর্শন: উৎপাদন লাইনে ত্রুটিপূর্ণ পণ্য সনাক্ত করা

তথ্যসূত্র

পেপারটি সম্পর্কিত ক্ষেত্রের গুরুত্বপূর্ণ কাজ উদ্ধৃত করে, যার মধ্যে রয়েছে:

GMMSeg 18: জেনারেটিভ সিমান্টিক সেগমেন্টেশনের ভিত্তি কাজ
Deep Ensembles 16: অনিশ্চয়তা অনুমানের ক্লাসিক পদ্ধতি
MC Dropout 7: বেইজিয়ান গভীর শিক্ষার প্রতিনিধিত্বমূলক কাজ
SemanticKITTI 1: LiDAR সিমান্টিক সেগমেন্টেশনের মান ডেটাসেট

এই পেপারটি LiDAR সিমান্টিক সেগমেন্টেশনের OOD সনাক্তকরণ ক্ষেত্রে গুরুত্বপূর্ণ অবদান রাখে, চতুর প্রযুক্তিগত ডিজাইনের মাধ্যমে এপিস্টেমিক অনিশ্চয়তার কার্যকর অনুমান বাস্তবায়ন করে, এবং স্বয়ংচালিত গাড়ি চালনা সিস্টেমের নিরাপত্তা এবং নির্ভরযোগ্যতা উন্নত করার জন্য মূল্যবান সমাধান প্রদান করে।