2025-11-20T03:01:15.256535

Multimodal RAG for Unstructured Data:Leveraging Modality-Aware Knowledge Graphs with Hybrid Retrieval

R, Upadhya
Current Retrieval-Augmented Generation (RAG) systems primarily operate on unimodal textual data, limiting their effectiveness on unstructured multimodal documents. Such documents often combine text, images, tables, equations, and graphs, each contributing unique information. In this work, we present a Modality-Aware Hybrid retrieval Architecture (MAHA), designed specifically for multimodal question answering with reasoning through a modality-aware knowledge graph. MAHA integrates dense vector retrieval with structured graph traversal, where the knowledge graph encodes cross-modal semantics and relationships. This design enables both semantically rich and context-aware retrieval across diverse modalities. Evaluations on multiple benchmark datasets demonstrate that MAHA substantially outperforms baseline methods, achieving a ROUGE-L score of 0.486, providing complete modality coverage. These results highlight MAHA's ability to combine embeddings with explicit document structure, enabling effective multimodal retrieval. Our work establishes a scalable and interpretable retrieval framework that advances RAG systems by enabling modality-aware reasoning over unstructured multimodal data.
academic

असंरचित डेटा के लिए मल्टीमोडल RAG: मोडैलिटी-जागरूक ज्ञान ग्राफ़ के साथ हाइब्रिड रिट्रीवल का लाभ उठाना

बुनियादी जानकारी

  • पेपर ID: 2510.14592
  • शीर्षक: असंरचित डेटा के लिए मल्टीमोडल RAG: मोडैलिटी-जागरूक ज्ञान ग्राफ़ के साथ हाइब्रिड रिट्रीवल का लाभ उठाना
  • लेखक: राश्मि आर (राष्ट्रीय प्रौद्योगिकी संस्थान कर्नाटक), विद्याधर उपाध्याय (राष्ट्रीय प्रौद्योगिकी संस्थान कर्नाटक)
  • वर्गीकरण: cs.LG (मशीन लर्निंग), cs.IR (सूचना पुनर्प्राप्ति)
  • प्रकाशन तिथि: 16 अक्टूबर 2025
  • पेपर लिंक: https://arxiv.org/abs/2510.14592v1

सारांश

वर्तमान रिट्रीवल-ऑगमेंटेड जनरेशन (RAG) सिस्टम मुख्य रूप से यूनिमोडल टेक्स्ट डेटा पर काम करते हैं और पाठ, छवियों, तालिकाओं, समीकरणों और आरेखों जैसी विविध जानकारी वाले असंरचित मल्टीमोडल दस्तावेज़ों को संभालने में सीमित हैं। यह पेपर मोडैलिटी-जागरूक हाइब्रिड रिट्रीवल आर्किटेक्चर (MAHA) प्रस्तावित करता है, जो मोडैलिटी-जागरूक ज्ञान ग्राफ़ के माध्यम से मल्टीमोडल प्रश्नोत्तर तर्क के लिए विशेष रूप से डिज़ाइन किया गया है। MAHA घने वेक्टर रिट्रीवल को संरचित ग्राफ़ ट्रैवर्सल के साथ जोड़ता है, जहां ज्ञान ग्राफ़ क्रॉस-मोडैलिटी सिमेंटिक्स और संबंधों को एन्कोड करता है। यह डिज़ाइन विभिन्न मोडैलिटीज़ में सिमेंटिकली समृद्ध और संदर्भ-जागरूक रिट्रीवल को सक्षम बनाता है। कई बेंचमार्क डेटासेट पर मूल्यांकन से पता चलता है कि MAHA बेसलाइन विधियों से काफी बेहतर प्रदर्शन करता है, 0.486 का ROUGE-L स्कोर प्राप्त करता है और पूर्ण मोडैलिटी कवरेज प्रदान करता है।

अनुसंधान पृष्ठभूमि और प्रेरणा

समस्या परिभाषा

मौजूदा RAG सिस्टम निम्नलिखित मुख्य चुनौतियों का सामना करते हैं:

  1. यूनिमोडल सीमाएं: पारंपरिक RAG सिस्टम मुख्य रूप से टेक्स्ट डेटा को संभालते हैं और छवियों, तालिकाओं, समीकरणों आदि जैसी मल्टीमोडल सामग्री वाले जटिल दस्तावेज़ों को प्रभावी ढंग से संभाल नहीं सकते हैं
  2. क्रॉस-मोडैलिटी संबंध की कमी: विभिन्न मोडैलिटीज़ के बीच जटिल संबंधों को समझने और उपयोग करने की क्षमता का अभाव, जैसे टेक्स्ट विवरण और तालिका डेटा के बीच पत्राचार
  3. अपर्याप्त संरचित तर्क: मौजूदा विधियां मल्टीमोडल घटकों के बीच जटिल अंतर्निर्भरता को अनुकरण करने में कठिनाई का सामना करती हैं

अनुसंधान का महत्व

डेटा-समृद्ध युग में, बड़ी मात्रा में जानकारी असंरचित मल्टीमोडल प्रारूप में मौजूद है, जिसमें PDF दस्तावेज़, स्कैन की गई फाइलें, जटिल तालिकाओं और चार्ट वाले तकनीकी दस्तावेज़ शामिल हैं। इस जानकारी को प्रभावी ढंग से पुनः प्राप्त करना और संश्लेषित करना विभिन्न क्षेत्रों में निर्णय लेने के लिए महत्वपूर्ण है।

मौजूदा विधियों की सीमाएं

  1. अपर्याप्त क्रॉस-मोडैलिटी संरेखण: विभिन्न मोडैलिटीज़ की सामग्री को सिमेंटिकली जोड़ने के लिए तंत्र की कमी
  2. स्थिर रिट्रीवल प्रक्रिया: गतिशील या विकसित हो रहे सूचना स्थान के अनुकूल होने में असमर्थता
  3. उथला ज्ञान ग्राफ़ एकीकरण: मौजूदा हाइब्रिड RAG फ्रेमवर्क के ज्ञान ग्राफ़ मुख्य रूप से टेक्स्ट-केंद्रित हैं और मल्टीमोडल इनपुट के लिए स्पष्ट समर्थन की कमी है
  4. अनुकूलित रणनीति की कमी: टेक्स्ट, छवियों, तालिकाओं, ग्राफ़ और समीकरणों को संभालने के लिए कोई विशेष संयुक्त रणनीति नहीं है

मुख्य योगदान

  1. MAHA आर्किटेक्चर का प्रस्ताव: असंरचित मल्टीमोडल डेटा के लिए विशेष रूप से डिज़ाइन किया गया पहला मोडैलिटी-जागरूक हाइब्रिड रिट्रीवल आर्किटेक्चर
  2. मोडैलिटी-जागरूक ज्ञान ग्राफ़: मौजूदा टेक्स्ट-केंद्रित KG पैटर्न को विस्तारित करना, क्रॉस-मोडैलिटी सिमेंटिक संबंधों को शामिल करना
  3. हाइब्रिड रिट्रीवल रणनीति: घने वेक्टर रिट्रीवल और संरचित ग्राफ़ ट्रैवर्सल को नवीन तरीके से मिलाना
  4. व्यापक प्रायोगिक सत्यापन: कई बेंचमार्क डेटासेट पर महत्वपूर्ण प्रदर्शन सुधार प्राप्त करना, पूर्ण मोडैलिटी कवरेज प्राप्त करना
  5. नई मूल्यांकन मेट्रिक्स: मोडैलिटी कवरेज दर मेट्रिक प्रस्तावित करना, जो क्रॉस-मोडैलिटी रिट्रीवल क्षमता को मापता है

विधि विवरण

कार्य परिभाषा

विभिन्न मोडैलिटीज़ (टेक्स्ट, छवियां, तालिकाएं, समीकरण, चार्ट) वाले असंरचित दस्तावेज़ों के संग्रह D और उपयोगकर्ता क्वेरी q को देखते हुए, सिस्टम को निम्नलिखित करने की आवश्यकता है:

  1. प्रासंगिक मल्टीमोडल साक्ष्य खंडों को पुनः प्राप्त करना
  2. क्रॉस-मोडैलिटी जानकारी को संश्लेषित करके सटीक, पूर्ण उत्तर उत्पन्न करना
  3. व्याख्यात्मकता और संदर्भ सामंजस्य बनाए रखना

मॉडल आर्किटेक्चर

1. दस्तावेज़ सेवन और एम्बेडिंग मॉड्यूल

  • मल्टीमोडल पार्सिंग: दस्तावेज़ों को सिमेंटिकली अर्थपूर्ण खंडों में विभाजित करना, जिसमें टेक्स्ट, तालिकाएं, चार्ट, छवियां और समीकरण शामिल हैं
  • विषम एन्कोडिंग:
    • टेक्स्ट: OpenAI text-embedding-3-small का उपयोग करके एम्बेडिंग में परिवर्तित करना
    • तालिकाएं: HTML प्रारूप में परिवर्तित करना
    • समीकरण: संरचित समीकरण (LaTeX) के रूप में एन्कोड करना
    • दृश्य तत्व: CLIP मॉडल का उपयोग करके एन्कोड करना और base64 प्रारूप में परिवर्तित करना
  • सारांश पीढ़ी: गैर-टेक्स्ट डेटा के लिए टेक्स्ट सारांश उत्पन्न करना और एम्बेड करना

2. वेक्टर स्टोर इंडेक्सिंग और ज्ञान ग्राफ़ निर्माण

  • वेक्टर स्टोर: मल्टीमोडल प्रतिनिधित्व को इंडेक्स करना, तेजी से समानता-आधारित रिट्रीवल का समर्थन करना
  • मोडैलिटी-जागरूक KG:
    • नोड्स: विभिन्न मोडैलिटीज़ के इकाइयों का प्रतिनिधित्व (टेक्स्ट, समीकरण, छवियां, तालिकाएं)
    • किनारे: सिमेंटिक संबंधों को कैप्चर करना, जैसे "NEXT-TEXT", "NEXT-TABLE", "HAS-IMAGE", "HAS-FORMULA" आदि
    • निर्माण प्रक्रिया: पैटर्न-संचालित, जिसमें नामित इकाई लिंकिंग, कोरेफरेंस रेजोल्यूशन और संबंध तर्क शामिल है

3. हाइब्रिड रिट्रीवल तंत्र

  • वेक्टर रिट्रीवल: क्वेरी को एम्बेडिंग में एन्कोड करना, सिमेंटिकली समान सामग्री खंडों से मिलान करना
  • ग्राफ़ ट्रैवर्सल: इकाई संबंधों और ग्राफ़ ट्रैवर्सल के आधार पर समर्थन जानकारी को पुनः प्राप्त करना
  • संलयन रणनीति: सिमेंटिक समानता और संरचित ट्रैवर्सल को संतुलित करना, प्रासंगिकता और कवरेज सुनिश्चित करना

4. संदर्भ-जागरूक पीढ़ी

पुनः प्राप्त मल्टीमोडल जानकारी को संश्लेषित करने के लिए बड़े भाषा मॉडल का उपयोग करके सुसंगत, सटीक और व्याख्यात्मक उत्तर उत्पन्न करना।

तकनीकी नवाचार बिंदु

  1. क्रॉस-मोडैलिटी संबंध मॉडलिंग: RAG सिस्टम में पहली बार स्पष्ट क्रॉस-मोडैलिटी सिमेंटिक संबंधों को शामिल करना
  2. हाइब्रिड रिट्रीवल संलयन: वेक्टर समानता और ग्राफ़ संरचना ट्रैवर्सल के लाभों को नवीन तरीके से जोड़ना
  3. मोडैलिटी-जागरूक इंडेक्सिंग: सामान्य इंडेक्सिंग के माध्यम से सिमेंटिक और संरचित रिट्रीवल का निरबाध एकीकरण
  4. व्याख्यात्मकता वृद्धि: ग्राफ़ मेटाडेटा रिट्रीवल निर्णयों की व्याख्यात्मकता प्रदान करता है

प्रायोगिक सेटअप

डेटासेट

  1. UDA बेंचमार्क सूट:
    • वित्तीय क्षेत्र: जटिल लेआउट वाली वित्तीय रिपोर्ट, संख्यात्मक तर्क क्षमता का परीक्षण
    • शैक्षणिक क्षेत्र: शैक्षणिक पत्रों से, जटिल तकनीकी सामग्री तर्क का परीक्षण
    • विश्व ज्ञान: विकिपीडिया पृष्ठ, व्यापक विषयों पर प्रदर्शन का मूल्यांकन
  2. MRAMG-Bench: वेब, शैक्षणिक और जीवनशैली क्षेत्रों से, मल्टीमोडल तर्क क्षमता का विशेष परीक्षण
  3. REAL-MM-RAG-Bench: उच्च-गुणवत्ता वाली वित्तीय क्षेत्र बेंचमार्क, जिसमें टेक्स्ट, तालिकाएं और छवियां शामिल हैं

मूल्यांकन मेट्रिक्स

रिट्रीवल मेट्रिक्स

  • Recall@K: शीर्ष K परिणामों में सही दस्तावेज़ खंडों वाली क्वेरीज़ का अनुपात
  • MRR (माध्य पारस्परिक रैंक): पहले सही उत्तर की रैंकिंग के पारस्परिक का माध्य

पीढ़ी मेट्रिक्स

  • ROUGE-L: उत्पन्न उत्तर और मानक उत्तर के बीच सबसे लंबे सामान्य अनुक्रम का ओवरलैप

मल्टीमोडल मेट्रिक्स

  • मोडैलिटी कवरेज दर: नई प्रस्तावित मेट्रिक, गणना सूत्र:
Coverage(q) = |Mgt(q) ∩ Mret(q)| / |Mgt(q)|

जहां Mgt(q) मानक उत्तर के लिए आवश्यक मोडैलिटीज़ का समुच्चय है, Mret(q) सिस्टम द्वारा पुनः प्राप्त मोडैलिटीज़ का समुच्चय है।

तुलनात्मक विधियां

  1. BM25: शब्द आवृत्ति-आधारित विरल रिट्रीवर
  2. FAISS + SBERT: घना वेक्टर रिट्रीवर
  3. CLIP: केवल छवि रिट्रीवर
  4. Hybrid (BM25 + FAISS): पारंपरिक हाइब्रिड विधि
  5. Graph Traversal (KG Retriever): शुद्ध ग्राफ़ ट्रैवर्सल विधि
  6. मौजूदा मल्टीमोडल RAG फ्रेमवर्क: HybridRAG, HybGRAG, KG-Guided RAG आदि

प्रायोगिक परिणाम

मुख्य परिणाम

बेसलाइन विधियों के साथ तुलना

MAHA सभी मेट्रिक्स पर बेसलाइन विधियों से काफी बेहतर प्रदर्शन करता है:

  • ROUGE-L: 0.486 (वेक्टर रिट्रीवल की तुलना में 72% सुधार)
  • Recall@3: 0.79-0.81
  • MRR: 0.74 (बेसलाइन की तुलना में 19-21% सुधार)
  • मोडैलिटी कवरेज दर: 1.00 (पूर्ण कवरेज)

मौजूदा मल्टीमोडल RAG फ्रेमवर्क के साथ तुलना

  • MAHA पूर्ण मोडैलिटी कवरेज (1.00) प्राप्त करने वाली एकमात्र विधि है
  • अन्य विधियों की मोडैलिटी कवरेज दर केवल 0.00-0.39 है
  • सभी प्रदर्शन मेट्रिक्स पर उच्चतम स्कोर प्राप्त करता है

विलोपन प्रयोग

तीन कॉन्फ़िगरेशन की तुलना करके प्रत्येक घटक के योगदान को सत्यापित करना:

  1. Vector-Only: ROUGE-L 0.282, Recall@3 0.70, MRR 0.61
  2. Graph-Only: ROUGE-L 0.337, Recall@3 0.68, MRR 0.62
  3. MAHA: ROUGE-L 0.486, Recall@3 0.79, MRR 0.74

परिणाम दर्शाते हैं:

  • वेक्टर रिट्रीवल स्थानीय सिमेंटिक्स को कैप्चर करता है लेकिन संरचित सुराग की कमी है
  • ग्राफ़ ट्रैवर्सल संरचित संबंध प्रदान करता है लेकिन स्वतंत्र रूप से समृद्ध साक्ष्य खोजने में कठिनाई होती है
  • हाइब्रिड विधि सर्वोत्तम प्रदर्शन प्राप्त करती है, दोनों विधियों की पूरकता को प्रमाणित करती है

प्रायोगिक निष्कर्ष

  1. सहक्रियात्मक प्रभाव: संरचित तर्क और सिमेंटिक समानता का संयोजन महत्वपूर्ण सहक्रियात्मक प्रभाव उत्पन्न करता है
  2. क्रॉस-मोडैलिटी लिंकिंग का महत्व: स्पष्ट मोडैलिटी-जागरूक लिंकिंग सिस्टम को मल्टीमोडल साक्ष्य पुनः प्राप्त करने में सक्षम बनाती है जो अन्यथा छूट जाते
  3. पूर्ण कवरेज का मूल्य: पूर्ण मोडैलिटी कवरेज प्राप्त करना उच्च-गुणवत्ता वाले उत्तर उत्पन्न करने के लिए महत्वपूर्ण है

संबंधित कार्य

मुख्य अनुसंधान दिशाएं

  1. पारंपरिक RAG सिस्टम: मुख्य रूप से टेक्स्ट-आधारित, BM25, FAISS आदि एकल रिट्रीवल विधियों का उपयोग
  2. हाइब्रिड RAG फ्रेमवर्क: ज्ञान ग्राफ़ को वेक्टर रिट्रीवल के साथ जोड़ता है, लेकिन KG मुख्य रूप से टेक्स्ट-केंद्रित है
  3. मल्टीमोडल RAG: जैसे Kosmos-1, MM-ReAct आदि, लेकिन अधिकांश बंद सेटिंग में चलते हैं
  4. ज्ञान ग्राफ़ वर्धित RAG: KG के माध्यम से रिट्रीवल विविधता में सुधार, लेकिन दृश्य एन्कोडिंग मॉड्यूल की कमी

इस पेपर के लाभ

मौजूदा कार्यों की तुलना में, MAHA के निम्नलिखित लाभ हैं:

  1. पहली विशेष रूप से डिज़ाइन की गई मोडैलिटी-जागरूक KG आर्किटेक्चर
  2. क्रॉस-मोडैलिटी सिमेंटिक संबंधों का स्पष्ट मॉडलिंग
  3. बारीक-दानेदार मोडैलिटी-जागरूक रिट्रीवल नियंत्रण प्रदान करता है
  4. पूर्ण मोडैलिटी कवरेज और व्याख्यात्मकता प्राप्त करता है

निष्कर्ष और चर्चा

मुख्य निष्कर्ष

  1. तकनीकी सफलता: MAHA ने पारंपरिक RAG सिस्टम की मल्टीमोडल डेटा प्रसंस्करण सीमाओं को सफलतापूर्वक हल किया है
  2. प्रदर्शन सुधार: कई बेंचमार्क डेटासेट पर महत्वपूर्ण प्रदर्शन सुधार प्राप्त करता है, विशेष रूप से ROUGE-L मेट्रिक पर 72% सुधार
  3. पूर्ण कवरेज: पहली बार पूर्ण मोडैलिटी कवरेज प्राप्त करता है, क्रॉस-मोडैलिटी तर्क की प्रभावशीलता को प्रमाणित करता है
  4. स्केलेबिलिटी: एक स्केलेबल और व्याख्यात्मक रिट्रीवल फ्रेमवर्क प्रदान करता है

सीमाएं

  1. KG निर्माण जटिलता: मोडैलिटी-जागरूक ज्ञान ग्राफ़ के निर्माण के लिए विशेष पार्सिंग और संरेखण रणनीतियों की आवश्यकता है
  2. कम्प्यूटेशनल ओवरहेड: हाइब्रिड रिट्रीवल तंत्र कम्प्यूटेशनल जटिलता बढ़ा सकता है
  3. डोमेन अनुकूलन: विशिष्ट डोमेन में अनुकूलन क्षमता को आगे सत्यापन की आवश्यकता है
  4. गतिशील अपडेट: स्थिर KG गतिशील सूचना अपडेट को संभालने में चुनौतियों का सामना करता है

भविष्य की दिशाएं

  1. स्वचालित KG निर्माण: अत्यधिक असंरचित डेटा को संभालने के लिए अधिक उन्नत स्वचालित विधियां विकसित करना
  2. गतिशील क्वेरी रूटिंग: क्वेरी जटिलता के अनुसार वास्तविक समय में अनुकूल होने में सक्षम बुद्धिमान राउटर लागू करना
  3. बड़े पैमाने पर मूल्यांकन: बड़े पैमाने और अधिक विविध डेटासेट पर विधि को सत्यापित करना
  4. वास्तविक समय अनुकूलन: सिस्टम प्रतिक्रिया समय को अनुकूलित करना, व्यावहारिक अनुप्रयोग की व्यवहार्यता में सुधार करना

गहन मूल्यांकन

शक्तियां

  1. मजबूत नवाचार: मोडैलिटी-जागरूक ज्ञान ग्राफ़ की अवधारणा पहली बार प्रस्तावित करता है, मल्टीमोडल RAG में महत्वपूर्ण खाली स्थान को भरता है
  2. पूर्ण विधि: डेटा सेवन से अंतिम पीढ़ी तक का एंड-टू-एंड समाधान
  3. व्यापक प्रयोग: कई डेटासेट पर व्यापक मूल्यांकन, विलोपन प्रयोग सहित
  4. मेट्रिक नवाचार: मोडैलिटी कवरेज दर जैसी महत्वपूर्ण मूल्यांकन मेट्रिक प्रस्तावित करता है
  5. महत्वपूर्ण परिणाम: सभी मुख्य मेट्रिक्स पर महत्वपूर्ण सुधार प्राप्त करता है

कमजोरियां

  1. उच्च जटिलता: सिस्टम आर्किटेक्चर अपेक्षाकृत जटिल है, व्यावहारिक तैनाती चुनौतियों का सामना कर सकती है
  2. डेटासेट स्केल: मूल्यांकन डेटासेट का स्केल और विविधता सीमित हो सकती है
  3. अपर्याप्त त्रुटि विश्लेषण: विफल मामलों के गहन विश्लेषण की कमी
  4. कम्प्यूटेशनल लागत: पेपर कम्प्यूटेशनल संसाधन आवश्यकताओं और दक्षता समस्याओं पर विस्तार से चर्चा नहीं करता है
  5. सामान्यीकरण क्षमता: अदेखे डोमेन और डेटा प्रकारों पर सामान्यीकरण क्षमता को आगे सत्यापन की आवश्यकता है

प्रभाव

  1. शैक्षणिक मूल्य: मल्टीमोडल सूचना पुनर्प्राप्ति क्षेत्र के लिए नई अनुसंधान दिशा और बेंचमार्क प्रदान करता है
  2. व्यावहारिक मूल्य: दस्तावेज़ विश्लेषण, तकनीकी समर्थन, शिक्षा आदि क्षेत्रों में व्यापक अनुप्रयोग संभावनाएं
  3. पुनरुत्पादनीयता: पेपर विस्तृत कार्यान्वयन विवरण प्रदान करता है, बाद के अनुसंधान को सुविधाजनक बनाता है
  4. प्रेरणा: मोडैलिटी-जागरूक KG विचार अन्य मल्टीमोडल कार्यों के अनुसंधान को प्रेरित कर सकता है

लागू परिदृश्य

  1. एंटरप्राइज दस्तावेज़ विश्लेषण: चार्ट, तालिकाओं वाली वित्तीय रिपोर्ट और तकनीकी दस्तावेज़ों को संभालना
  2. शैक्षणिक अनुसंधान समर्थन: शोधकर्ताओं को मल्टीमोडल शैक्षणिक पत्रों से जानकारी निकालने में सहायता करना
  3. शिक्षा सहायता: छात्रों को क्रॉस-मोडैलिटी ज्ञान प्रश्नोत्तर सेवा प्रदान करना
  4. चिकित्सा दस्तावेज़ प्रसंस्करण: छवियों और तालिकाओं वाली चिकित्सा रिपोर्ट का विश्लेषण करना
  5. कानूनी दस्तावेज़ समीक्षा: जटिल कानूनी फाइलों और साक्ष्य सामग्री को संभालना

संदर्भ

पेपर 32 संबंधित संदर्भों का हवाला देता है, मुख्य रूप से शामिल हैं:

  • RAG मूल विधियां: BM25, FAISS, SBERT आदि शास्त्रीय रिट्रीवल विधियां
  • मल्टीमोडल मॉडल: CLIP, Kosmos-1, MM-ReAct आदि
  • ज्ञान ग्राफ़ विधियां: विभिन्न KG-वर्धित RAG फ्रेमवर्क
  • मूल्यांकन बेंचमार्क: UDA, MRAMG-Bench, REAL-MM-RAG-Bench आदि

समग्र मूल्यांकन: यह एक उच्च-गुणवत्ता वाला अनुसंधान पत्र है जो मल्टीमोडल RAG के इस महत्वपूर्ण और चुनौतीपूर्ण समस्या के लिए नवीन समाधान प्रस्तावित करता है। MAHA आर्किटेक्चर मोडैलिटी-जागरूक ज्ञान ग्राफ़ और हाइब्रिड रिट्रीवल रणनीति के माध्यम से तकनीकी रूप से महत्वपूर्ण सफलता प्राप्त करता है, और प्रायोगिक परिणाम विश्वसनीय हैं। हालांकि जटिलता और सामान्यीकरण क्षमता के पहलुओं में सुधार की गुंजाइश है, लेकिन यह कार्य मल्टीमोडल सूचना पुनर्प्राप्ति क्षेत्र के लिए एक महत्वपूर्ण आधार स्थापित करता है और उच्च शैक्षणिक मूल्य और व्यावहारिक संभावनाएं रखता है।