Quantize-Sample-and-Verify: LLM Acceleration via Adaptive Edge-Cloud Speculative Decoding
Zhang, Cai, Yu et al.
In edge-cloud speculative decoding (SD), edge devices equipped with small language models (SLMs) generate draft tokens that are verified by large language models (LLMs) in the cloud. A key bottleneck in such systems is the limited communication bandwidth between edge and cloud, which necessitates quantization of the information transmitted about generated tokens. In this work, we introduce a novel quantize-sample (Q-S) strategy that provably preserves the output distribution of the cloud-based model, ensuring that the verified tokens match the distribution of those that would have been generated directly by the LLM. We develop a throughput model for edge-cloud SD that explicitly accounts for communication latency. Leveraging this model, we propose an adaptive mechanism that optimizes token throughput by dynamically adjusting the draft length and quantization precision in response to both semantic uncertainty and channel conditions. Simulations demonstrate that the proposed Q-S approach significantly improves decoding efficiency in realistic edge-cloud deployment scenarios.
academic
Quantize-Sample-and-Verify: अनुकूली Edge-Cloud सट्टा डिकोडिंग के माध्यम से LLM त्वरण
Edge-Cloud सट्टा डिकोडिंग (SD) प्रणालियों में, छोटे भाषा मॉडल (SLM) से सुसज्जित Edge उपकरण ड्राफ्ट टोकन उत्पन्न करते हैं, जिन्हें क्लाउड में बड़े भाषा मॉडल (LLM) द्वारा सत्यापित किया जाता है। ऐसी प्रणालियों की मुख्य बाधा Edge और क्लाउड के बीच सीमित संचार बैंडविड्थ है, जो प्रेषित टोकन जानकारी को परिमाणित करना आवश्यक बनाता है। यह कार्य एक नई परिमाणीकरण-नमूना (Q-S) रणनीति प्रस्तुत करता है जो क्लाउड मॉडल के आउटपुट वितरण को सिद्ध रूप से संरक्षित करता है, यह सुनिश्चित करता है कि सत्यापित टोकन सीधे LLM द्वारा उत्पन्न टोकन के वितरण से मेल खाते हैं। हम Edge-Cloud SD के लिए एक स्पष्ट थ्रूपुट मॉडल विकसित करते हैं जो संचार विलंबता पर विचार करता है। इस मॉडल के आधार पर, हम एक अनुकूली तंत्र प्रस्तावित करते हैं जो शब्दार्थ अनिश्चितता और चैनल स्थितियों के प्रति प्रतिक्रिया करके ड्राफ्ट लंबाई और परिमाणीकरण सटीकता को गतिशील रूप से समायोजित करता है, जिससे टोकन थ्रूपुट अनुकूलित होता है। सिमुलेशन परिणाम दर्शाते हैं कि प्रस्तावित Q-S विधि वास्तविक Edge-Cloud तैनाती परिदृश्यों में डिकोडिंग दक्षता में उल्लेखनीय सुधार करती है।
यह अनुसंधान Edge-Cloud सट्टा डिकोडिंग प्रणालियों में संचार बैंडविड्थ सीमाओं की समस्या को हल करने का लक्ष्य रखता है। पारंपरिक सट्टा डिकोडिंग में, Edge उपकरणों को क्लाउड को बड़ी मात्रा में संभाव्यता वितरण जानकारी प्रेषित करनी पड़ती है, जो बैंडविड्थ-सीमित वातावरण में प्रणाली प्रदर्शन को गंभीर रूप से प्रभावित करता है।
व्यावहारिक मूल्य: Edge-Cloud सहयोगी अनुमान वर्तमान LLM तैनाती का एक महत्वपूर्ण प्रवृत्ति है, जो कम्प्यूटेशनल संसाधनों और प्रतिक्रिया विलंबता को संतुलित करता है
तकनीकी चुनौती: मौजूदा विधियां संभाव्यता वितरण को परिमाणित करते समय LLM के मूल आउटपुट वितरण को नष्ट करती हैं, जो उत्पादन गुणवत्ता को प्रभावित करता है
आर्थिक लाभ: अनावश्यक API कॉल को कम करता है, ऊर्जा दक्षता और प्रणाली स्केलेबिलिटी में सुधार करता है
इस पेपर की अनुसंधान प्रेरणा एक ऐसी Edge-Cloud सट्टा डिकोडिंग योजना डिजाइन करना है जो संचार ओवरहेड को कम कर सके और LLM आउटपुट वितरण की सख्त सामंजस्य को बनाए रख सके।
परिमाणीकरण-नमूना (Q-S) रणनीति प्रस्तावित की: क्लाउड LLM के आउटपुट वितरण को सिद्ध रूप से संरक्षित करता है, उत्पादन गुणवत्ता में कोई नुकसान नहीं सुनिश्चित करता है
संचार विलंबता पर विचार करने वाला थ्रूपुट मॉडल स्थापित किया: अपलिंक और डाउनलिंक प्रसारण विलंबता के प्रणाली प्रदर्शन पर प्रभाव को स्पष्ट रूप से मॉडल करता है
अनुकूली संसाधन आवंटन तंत्र डिजाइन किया: सुदृढ़ शिक्षा के आधार पर ड्राफ्ट लंबाई और परिमाणीकरण सटीकता को गतिशील रूप से समायोजित करता है
सैद्धांतिक गारंटी प्रदान की: Proposition 1 के माध्यम से Q-S विधि के वितरण समतुल्यता को सिद्ध करता है
Edge-Cloud सट्टा डिकोडिंग कार्य को इस प्रकार परिभाषित किया जाता है: दिए गए इनपुट उपसर्ग s¹ के लिए, प्रणाली को Edge SLM के माध्यम से ड्राफ्ट टोकन उत्पन्न करने, क्लाउड LLM द्वारा सत्यापन करने, और अंततः सीधे LLM का उपयोग करके उत्पन्न टोकन अनुक्रम के समान वितरण वाले टोकन उत्पन्न करने की आवश्यकता है।
Proposition 1: Q-S Edge-Cloud SD यह गारंटी देता है कि उत्पन्न टोकन xᵗₗ की संभाव्यता P(X = xᵗₗ) LLM की संबंधित संभाव्यता pᵗₗ,xᵗₗ के बराबर है।
इस गुण की कुंजी यह है कि नमूना लेना और सत्यापन एक ही परिमाणित वितरण का उपयोग करते हैं, जबकि S-Q विधि विभिन्न वितरणों का उपयोग करती है जिससे वितरण में बदलाव होता है।
पेपर विस्तृत प्रायोगिक सेटअप और ओपन सोर्स कोड लिंक प्रदान करता है, अच्छी पुनरुत्पादनीयता है। लेकिन वास्तविक Edge उपकरणों की तैनाती सत्यापन को अभी और कार्य की आवश्यकता है।
Chen, C., et al. "Accelerating large language model decoding with speculative sampling." arXiv:2302.01318, 2023.
Hao, Z., et al. "Hybrid SLM and LLM for edge-cloud collaborative inference." Proc. Worksh. Edge Mobil. Found. Models, 2024.
Leviathan, Y., et al. "Fast inference from transformers via speculative decoding." Proc. Int. Conf. Mach. Learn. (ICML), 2023.
Reznik, Y. A. "An algorithm for quantization of discrete probability distributions." Data Compress. Conf. (DCC), 2011.
समग्र मूल्यांकन: यह Edge-Cloud सट्टा डिकोडिंग क्षेत्र में महत्वपूर्ण योगदान वाला एक उच्च-गुणवत्ता वाला पेपर है। सैद्धांतिक विश्लेषण कठोर है, प्रायोगिक सत्यापन पर्याप्त है, वास्तविक अनुप्रयोग में मुख्य समस्याओं को हल करता है। हालांकि कुछ सीमाएं हैं, लेकिन इसकी नवीनता और व्यावहारिक मूल्य इसे इस क्षेत्र का एक महत्वपूर्ण कार्य बनाता है।