2025-11-13T22:49:11.191086

Effects of automotive microphone frequency response characteristics and noise conditions on speech and ASR quality -- an experimental evaluation

Buccoli, Du, Soendergaard et al.

Upon choosing microphones for automotive hands-free communication or Automatic Speech Recognition (ASR) applications, OEMs typically specify wideband, super wideband or even fullband requirements following established standard recommendations (e.g., ITU-P.1110, ITU-P.1120). In practice, it is often challenging to achieve the preferred bandwidth for an automotive microphone when considering limitations and constraints on microphone placement inside the cabin, and the automotive grade environmental robustness requirements. On the other hand, there seems to be no consensus or sufficient data on the effect of each microphone characteristic on the actual performance. As an attempt to answer this question, we used noise signals recorded in real vehicles and under various driving conditions to experimentally study the relationship between the microphones' characteristics and the final audio quality of speech communication and performance of ASR engines. We focus on how variations in microphone bandwidth and amplitude frequency response shapes affect the perceptual speech quality. The speech quality results are compared by using ETSI TS 103 281 metrics (S-MOS, N-MOS, G-MOS) and ancillary metrics such as SNR. The ASR results are evaluated with standard metrics such as Word Error Rate (WER). Findings from this study provide knowledge in the understanding of what microphone frequency response characteristics are more relevant for audio quality and choice of proper microphone specifications, particularly for automotive applications.

academic

ऑटोमोटिव माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं और शोर स्थितियों का भाषण और ASR गुणवत्ता पर प्रभाव -- एक प्रायोगिक मूल्यांकन

मूल जानकारी

पेपर ID: 2510.09236
शीर्षक: ऑटोमोटिव माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं और शोर स्थितियों का भाषण और ASR गुणवत्ता पर प्रभाव -- एक प्रायोगिक मूल्यांकन
लेखक: Michele Buccoli, Yu Du, Jacob Soendergaard, Simone Shawn Cazzaniga
वर्गीकरण: eess.AS (विद्युत इंजीनियरिंग और प्रणाली विज्ञान - ऑडियो और भाषण प्रसंस्करण), cs.SD (कंप्यूटर विज्ञान - ध्वनि)
प्रकाशन समय/सम्मेलन: AES 159वां सम्मेलन, 23-25 अक्टूबर, लॉन्ग बीच, CA, USA (एक्सप्रेस पेपर)
पेपर लिंक: https://arxiv.org/abs/2510.09236

सारांश

यह अनुसंधान ऑटोमोटिव हैंड्स-फ्री संचार और स्वचालित भाषण पहचान (ASR) अनुप्रयोगों में माइक्रोफोन चयन के महत्वपूर्ण मुद्दे को संबोधित करता है। प्रायोगिक विधि के माध्यम से माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं और भाषण गुणवत्ता तथा ASR प्रदर्शन के बीच संबंध का अध्ययन किया गया है। अनुसंधान वास्तविक वाहन वातावरण में रिकॉर्ड किए गए शोर संकेतों का उपयोग करता है, माइक्रोफोन बैंडविड्थ और आयाम-आवृत्ति प्रतिक्रिया आकार परिवर्तन के कथित भाषण गुणवत्ता पर प्रभाव का मूल्यांकन करता है। भाषण गुणवत्ता मूल्यांकन ETSI TS 103 281 मानक के S-MOS, N-MOS, G-MOS संकेतकों और SNR जैसे सहायक संकेतकों का उपयोग करता है, जबकि ASR प्रदर्शन शब्द त्रुटि दर (WER) के माध्यम से मूल्यांकन किया जाता है। अनुसंधान परिणाम माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं के ऑडियो गुणवत्ता पर प्रभाव को समझने के लिए महत्वपूर्ण ज्ञान प्रदान करते हैं, विशेष रूप से ऑटोमोटिव अनुप्रयोगों में माइक्रोफोन विनिर्देश चयन के लिए मार्गदर्शन प्रदान करते हैं।

अनुसंधान पृष्ठभूमि और प्रेरणा

समस्या परिभाषा

ऑटोमोटिव OEM निर्माता हैंड्स-फ्री संचार या ASR अनुप्रयोगों के लिए माइक्रोफोन चुनते समय, आमतौर पर ITU-P.1110, ITU-P.1120 आदि मानकों की सिफारिशों का पालन करते हैं, जो व्यापक बैंड, अति-व्यापक बैंड या यहां तक कि पूर्ण बैंड विनिर्देश की आवश्यकता करते हैं। हालांकि, व्यावहारिक अनुप्रयोग में, वाहन के अंदर माइक्रोफोन स्थापना स्थान की सीमाओं और ऑटोमोटिव-ग्रेड पर्यावरणीय मजबूती आवश्यकताओं को ध्यान में रखते हुए, आदर्श बैंडविड्थ विनिर्देश प्राप्त करना मुश्किल है।

अनुसंधान का महत्व

सहमति की कमी: उद्योग में विभिन्न माइक्रोफोन विशेषताओं के वास्तविक प्रदर्शन पर प्रभाव के बारे में सहमति और पर्याप्त डेटा की कमी है
व्यावहारिक बाधाएं: वाहन के अंदर माइक्रोफोन स्थापना स्थान सीमित है, पर्यावरणीय आवश्यकताएं कठोर हैं
प्रदर्शन अनुकूलन: यह समझने की आवश्यकता है कि कौन सी माइक्रोफोन विशेषताएं ऑडियो गुणवत्ता और ASR प्रदर्शन के लिए अधिक महत्वपूर्ण हैं

मौजूदा अनुसंधान की सीमाएं

मौजूदा संबंधित अनुसंधान मुख्य रूप से विशिष्ट प्रकार के ऑटोमोटिव माइक्रोफोन पर आधारित है, अनुसंधान स्थान इन माइक्रोफोन की अंतर्निहित विशेषताओं तक सीमित है, माइक्रोफोन विशेषताओं में परिवर्तन के भाषण और ASR गुणवत्ता पर प्रभाव के सामान्य प्रवृत्तियों को प्रदर्शित करने में विफल है।

मुख्य योगदान

व्यवस्थित मूल्यांकन ढांचा स्थापित किया: माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं के भाषण गुणवत्ता और ASR प्रदर्शन पर प्रभाव के लिए एक प्रायोगिक मूल्यांकन मंच का निर्माण किया
व्यापक विशेषता विश्लेषण: माइक्रोफोन बैंडविड्थ, आवृत्ति प्रतिक्रिया शिखर आदि विशेषताओं के प्रदर्शन पर प्रभाव का व्यवस्थित अध्ययन
बहु-आयामी मूल्यांकन: मानव-से-मानव (H2H) संचार की भाषण गुणवत्ता और मानव-से-मशीन (H2M) इंटरैक्शन के ASR प्रदर्शन दोनों का मूल्यांकन
वास्तविक वातावरण सत्यापन: वास्तविक वाहन वातावरण में रिकॉर्ड किए गए शोर का उपयोग करके सत्यापन
मानकीकृत मूल्यांकन संकेतक: ETSI मानक के MOS स्कोर और मानक ASR मूल्यांकन संकेतकों का उपयोग

विधि विवरण

कार्य परिभाषा

विभिन्न वाहन प्रकारों और शोर स्थितियों के तहत माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं (बैंडविड्थ, शिखर आवृत्ति, गुणवत्ता कारक) के भाषण गुणवत्ता (S-MOS, N-MOS) और ASR प्रदर्शन (WER) पर प्रभाव का अध्ययन करना।

प्रायोगिक डिजाइन आर्किटेक्चर

संकेत उत्पादन मॉडल

अनुकरणीय रिकॉर्डिंग संकेत निम्नलिखित सूत्र के माध्यम से उत्पन्न होते हैं:

x(n) = f(s(n) ⋆ h(n) + v(n))

जहां:

s(n): ITU-T P.501 मानक की स्वच्छ भाषण संकेत
h(n): वाहन आवेग प्रतिक्रिया
v(n): वास्तविक वाहन पृष्ठभूमि शोर
f(·): माइक्रोफोन स्पेक्ट्रल विशेषताओं का अनुकरण करने वाले डिजिटल फ़िल्टर कैस्केड

माइक्रोफोन विशेषता अनुकरण

माइक्रोफोन विशेषताओं का अनुकरण करने के लिए दूसरे-क्रम द्विरेखीय रूपांतरण फ़िल्टर कैस्केड का उपयोग:

बैंडविड्थ परिभाषा:
- उच्च-पास फ़िल्टर (HP2): 20, 100, 350 Hz
- निम्न-पास फ़िल्टर (LP2): 4k, 8k, 12k, 16k, 20k Hz
- Q कारक: 0.707
अनुनाद शिखर अनुकरण:
- शिखर फ़िल्टर (PK2): 4k, 6k, 8k, 13k, 16k Hz
- निश्चित आयाम: 20 dB
- Q कारक: 1.414, 2, 4

प्रायोगिक स्थितियां

वाहन प्रकार: मध्यम सेडान, कॉम्पैक्ट SUV, छोटा SUV
शोर स्थितियां: निष्क्रिय (कम पंखा), शहरी (60 km/h मध्यम पंखा), उच्च गति (120 km/h कम पंखा)
माइक्रोफोन कॉन्फ़िगरेशन: 225 संभावित संयोजनों में से 113 व्यावहारिक कॉन्फ़िगरेशन का चयन

तकनीकी नवाचार बिंदु

व्यवस्थित पैरामीटरीकृत अनुसंधान: पहली बार माइक्रोफोन विशेषताओं के ऑटोमोटिव अनुप्रयोग प्रदर्शन पर प्रभाव का व्यवस्थित पैरामीटरीकृत अध्ययन
वास्तविक वातावरण डेटा: वास्तविक वाहन वातावरण में रिकॉर्ड किए गए आवेग प्रतिक्रिया और शोर डेटा का उपयोग
दोहरी मूल्यांकन प्रणाली: भाषण गुणवत्ता और ASR प्रदर्शन दोनों का मूल्यांकन, व्यापक प्रदर्शन चित्र प्रदान करता है
मानकीकृत विधि: ITU और ETSI मानकों का कठोर पालन करके मूल्यांकन

प्रायोगिक सेटअप

डेटासेट

भाषण उत्तेजना: ETSI TS 103 281 परिशिष्ट E द्वारा निर्दिष्ट 20 अमेरिकी अंग्रेजी Harvard वाक्य
वक्ता: विभिन्न पुरुष और महिला वक्ता
कुल अवधि: 80 सेकंड (प्रत्येक वाक्य 4 सेकंड, 1 सेकंड अग्रणी और 1 सेकंड अनुगामी मौन सहित)
वाहन आवेग प्रतिक्रिया: HATS (सिर और धड़ सिम्युलेटर) का उपयोग करके ड्राइवर की स्थिति में रिकॉर्ड किया गया
पृष्ठभूमि शोर: ITU P.1100 मानक परिशिष्ट D दिशानिर्देशों के अनुसार रिकॉर्ड किया गया

मूल्यांकन संकेतक

भाषण गुणवत्ता संकेतक:
- S-MOS: भाषण घटक गुणवत्ता मूल्यांकन (1-5 अंक)
- N-MOS: शोर घटक हस्तक्षेप मूल्यांकन (1-5 अंक)
- G-MOS: समग्र गुणवत्ता प्रभाव
- श्रवण प्रयास संकेतक (ETSI TS 103 558)
- A-भारित SNR
ASR प्रदर्शन संकेतक:
- शब्द त्रुटि दर (WER)
- Whisper tiny मॉडल का उपयोग करके मूल्यांकन

कार्यान्वयन विवरण

कुल 1017 भाषण फ़ाइलें उत्पन्न की गईं (113 माइक्रोफोन कॉन्फ़िगरेशन × 3 वाहन प्रकार × 3 शोर प्रकार)
प्रत्येक परिदृश्य के लिए 20 डेटा बिंदु सांख्यिकीय विश्लेषण के लिए उत्पन्न किए गए
ANOVA परीक्षण का उपयोग करके सांख्यिकीय महत्व का मूल्यांकन

प्रायोगिक परिणाम

मुख्य परिणाम

1. वाहन प्रकार और शोर प्रकार का प्रभाव

शोर प्रकार प्रभाव महत्वपूर्ण: पृष्ठभूमि शोर स्तर बढ़ने के साथ, S-MOS और N-MOS मान में उल्लेखनीय कमी (p मान लगभग 0)
वाहन प्रकार प्रभाव सीमित: विभिन्न वाहन प्रकारों के बीच S-MOS मान बहुत समान हैं, N-MOS में कुछ अंतर है लेकिन कोई स्पष्ट प्रवृत्ति नहीं
छोटा SUV सबसे खराब प्रदर्शन: उच्च गति शोर स्थितियों में SNR सबसे कम

2. माइक्रोफोन बैंडविड्थ का प्रभाव

निम्न कटऑफ आवृत्ति प्रभाव: 20Hz और 100Hz कटऑफ आवृत्ति के S-MOS मान समान हैं, दोनों 350Hz स्थिति से अधिक हैं
उच्च कटऑफ आवृत्ति प्रभाव कमजोर: समान निम्न कटऑफ आवृत्ति पर, उच्च-अंत बैंडविड्थ सीमा का S-MOS पर बहुत कम प्रभाव है
सांख्यिकीय महत्व: निम्न कटऑफ आवृत्ति परिवर्तन का p मान लगभग 0 है (F आंकड़ा = 1174), उच्च कटऑफ आवृत्ति का p मान 0.755 है (F आंकड़ा = 0.47)

3. माइक्रोफोन आवृत्ति प्रतिक्रिया शिखर का प्रभाव

शिखर आवृत्ति प्रभाव: निम्न शिखर आवृत्ति निम्न S-MOS मान की ओर ले जाती है
इष्टतम शिखर स्थिति: अनुनाद शिखर को सर्वोत्तम प्रदर्शन के लिए 10kHz से ऊपर धकेला जाना चाहिए
गुणवत्ता कारक प्रभाव: उच्च गुणवत्ता कारक (संकीर्ण शिखर बैंडविड्थ) बेहतर S-MOS प्रदर्शन लाता है

4. ASR प्रदर्शन परिणाम

माइक्रोफोन विशेषता प्रभाव कमजोर: माइक्रोफोन आवृत्ति प्रतिक्रिया विशेषताओं का ASR प्रदर्शन पर कोई महत्वपूर्ण प्रभाव नहीं है
शोर प्रकार प्रभावशाली: शोर प्रकार WER को प्रभावित करने वाला मुख्य कारक है
संभावित कारण: ASR इंजन भाषण संकेत के आवृत्ति प्रतिक्रिया परिवर्तन के प्रति मजबूत है, या परीक्षण भाषण प्रशिक्षण सेट में मौजूद हो सकता है

विलोपन प्रयोग

कुछ मापदंडों को ठीक करके एकल कारक प्रभाव का अध्ययन:

शुद्ध बैंडविड्थ प्रभाव: शिखर फ़िल्टर को छोड़कर, केवल HP2 और LP2 संयोजन का अध्ययन
शिखर प्रभाव: विभिन्न बैंडविड्थ सेटिंग्स के तहत शिखर आवृत्ति और गुणवत्ता कारक प्रभाव का अध्ययन
इंटरैक्शन प्रभाव: विभिन्न पैरामीटर संयोजनों के सहक्रियात्मक प्रभाव का अध्ययन

प्रायोगिक निष्कर्ष

शोर स्तर निर्णायक कारक है: भाषण गुणवत्ता और ASR प्रदर्शन पर सबसे बड़ा प्रभाव
बैंडविड्थ आवश्यकताओं को शिथिल किया जा सकता है: माइक्रोफोन बैंडविड्थ का भाषण गुणवत्ता पर सीमित प्रभाव है
निम्न आवृत्ति प्रतिक्रिया महत्वपूर्ण: निम्न कटऑफ आवृत्ति 100Hz से अधिक नहीं होनी चाहिए
उच्च आवृत्ति शिखर अनुकूलन: अपरिहार्य अनुनाद शिखर को उच्च आवृत्ति पर और संकीर्ण बैंडविड्थ के साथ धकेला जाना चाहिए
ASR मजबूती: आधुनिक ASR इंजन माइक्रोफोन विशेषता परिवर्तन के प्रति अच्छी मजबूती प्रदर्शित करते हैं

निष्कर्ष और चर्चा

मुख्य निष्कर्ष

शोर प्रकार और स्तर भाषण गुणवत्ता और पहचान को प्रभावित करने वाले सबसे प्रासंगिक कारक हैं
माइक्रोफोन बैंडविड्थ का भाषण गुणवत्ता पर बहुत कम प्रभाव है
निम्न कटऑफ आवृत्ति 100Hz से अधिक होने पर S-MOS प्रदर्शन में कमी
माइक्रोफोन अनुनाद शिखर को यथासंभव उच्च आवृत्ति पर और संकीर्ण शिखर चौड़ाई (उच्च Q कारक) के साथ धकेला जाना चाहिए
ASR प्रदर्शन लगभग माइक्रोफोन कारकों से प्रभावित नहीं है

सीमाएं

वाहन प्रकार नमूना सीमित: केवल तीन विशिष्ट वाहन प्रकारों का परीक्षण किया गया
फ़िल्टर डिजाइन सरलीकृत: माइक्रोफोन विशेषताओं का अनुकरण करने के लिए केवल दूसरे-क्रम फ़िल्टर का उपयोग
ASR इंजन एकल: केवल Whisper एक सामान्य ASR इंजन का उपयोग
वक्ता विशेषताएं: व्यक्तिगत वक्ता विशेषताओं के प्रभाव का गहन अध्ययन नहीं
शिखर आयाम निश्चित: शिखर फ़िल्टर आयाम 20dB पर निश्चित

भविष्य की दिशाएं

वाहन प्रकार श्रेणी का विस्तार: वाहन उद्देश्य विशेषताओं (आकार, श्रेणी, RT60) के प्रभाव का विश्लेषण करने के लिए अधिक वाहन प्रकार शामिल करें
शोर और वाहन प्रकार को अलग करना: सभी वाहन प्रकारों और ड्राइविंग शोर के संयोजन बनाएं ताकि प्रभाव कारकों को प्रभावी ढंग से अलग किया जा सके
वक्ता विशेषता अनुसंधान: पिच आवृत्ति जैसी वक्ता विशेषताओं और माइक्रोफोन विशेषताओं के बीच इंटरैक्शन का अध्ययन
फ़िल्टर डिजाइन विविधता: विभिन्न क्रम फ़िल्टर और विभिन्न शिखर आयामों के प्रभाव की खोज करें
विशेष ASR इंजन: ऑटोमोटिव-विशिष्ट ASR इंजन के प्रदर्शन का मूल्यांकन
ध्वनिक फ्रंट-एंड प्रसंस्करण: व्यावसायिक ध्वनिक फ्रंट-एंड प्रसंस्करण प्रणालियों के साथ व्यापक मूल्यांकन

गहन मूल्यांकन

शक्तियां

विधि नवाचार शक्तिशाली: पहली बार ऑटोमोटिव माइक्रोफोन विशेषताओं के प्रभाव का व्यवस्थित पैरामीटरीकृत अध्ययन, अनुसंधान अंतराल को भरता है
प्रायोगिक डिजाइन कठोर: अंतर्राष्ट्रीय मानकों का पालन, वास्तविक वातावरण डेटा का उपयोग, वैज्ञानिक रूप से उचित प्रायोगिक डिजाइन
मूल्यांकन प्रणाली व्यापक: भाषण गुणवत्ता और ASR प्रदर्शन दोनों पर विचार, व्यापक प्रदर्शन चित्र प्रदान करता है
व्यावहारिक मूल्य उच्च: अनुसंधान परिणाम सीधे ऑटोमोटिव उद्योग के माइक्रोफोन चयन और विनिर्देश निर्धारण को निर्देशित करते हैं
सांख्यिकीय विश्लेषण पर्याप्त: ANOVA आदि सांख्यिकीय विधियों का उपयोग करके परिणामों की महत्ता को सत्यापित करता है

कमियां

नमूना प्रतिनिधित्व: तीन वाहन प्रकारों की प्रतिनिधित्वशीलता सीमित है, निष्कर्षों की सार्वभौमिकता को प्रभावित कर सकता है
ASR मूल्यांकन सीमा: केवल एक सामान्य ASR इंजन का उपयोग, पेशेवर ऑटोमोटिव ASR प्रणाली की विशेषताओं को प्रतिबिंबित नहीं कर सकता
पैरामीटर स्थान सीमा: फ़िल्टर पैरामीटर संयोजन सामान्य स्थितियों को कवर करते हैं, लेकिन अभी भी अनुकूलन की गुंजाइश है
व्यक्तिपरक मूल्यांकन की कमी: केवल उद्देश्य संकेतकों का उपयोग, वास्तविक उपयोगकर्ता के व्यक्तिपरक मूल्यांकन सत्यापन की कमी
पर्यावरणीय कारक सरलीकरण: तापमान, आर्द्रता आदि पर्यावरणीय कारकों के माइक्रोफोन प्रदर्शन पर प्रभाव पर विचार नहीं किया गया

प्रभाव

शैक्षणिक योगदान: ऑटोमोटिव ऑडियो क्षेत्र के लिए महत्वपूर्ण मूल बनाम अनुसंधान डेटा और विधि ढांचा प्रदान करता है
औद्योगिक अनुप्रयोग: सीधे ऑटोमोटिव OEM निर्माताओं के माइक्रोफोन चयन रणनीति को निर्देशित करता है, महत्वपूर्ण व्यावसायिक मूल्य है
मानक निर्धारण: संबंधित अंतर्राष्ट्रीय मानकों के संशोधन और सुधार के लिए प्रायोगिक साक्ष्य प्रदान करता है
तकनीकी विकास: ऑटोमोटिव ऑडियो तकनीक और ASR तकनीक के वाहन वातावरण में अनुकूलन विकास को बढ़ावा देता है

लागू परिदृश्य

ऑटोमोटिव OEM निर्माता: माइक्रोफोन विनिर्देश निर्धारण और आपूर्तिकर्ता चयन
माइक्रोफोन निर्माता: उत्पाद डिजाइन अनुकूलन और प्रदर्शन सत्यापन
ASR सेवा प्रदाता: वाहन ASR प्रणाली अनुकूलन और मजबूती वृद्धि
मानक निर्धारण संस्था: संबंधित मानकों के निर्धारण और संशोधन संदर्भ
शैक्षणिक अनुसंधान: ऑटोमोटिव ऑडियो और भाषण प्रसंस्करण क्षेत्र के बाद के अनुसंधान के लिए आधार

संदर्भ

यह अनुसंधान कई महत्वपूर्ण अंतर्राष्ट्रीय मानकों और पूर्व अनुसंधान कार्यों को संदर्भित करता है, जिसमें ITU-T P.501, ETSI TS 103 281, ITU-P.1100 आदि मानक दस्तावेज शामिल हैं, साथ ही ऑटोमोटिव माइक्रोफोन प्रदर्शन मूल्यांकन में Du et al. के अग्रणी कार्य भी शामिल हैं। ये संदर्भ इस अनुसंधान के लिए एक मजबूत सैद्धांतिक आधार और विधि मार्गदर्शन प्रदान करते हैं।