Large Language Models Inference Engines based on Spiking Neural Networks
Balaji, Madireddy, Balaprakash
Foundational models based on the transformer architecture are currently the state-of-the-art in general language modeling, as well as in scientific areas such as material science and climate. However, training and deploying these models is computationally challenging as the time and space complexity has a quadratic relation to the input sequence length. Several efforts exploring efficient computational paradigms and model architectures to address these limitations have been made. In this work, we explore spiking neural networks (SNNs) to design transformer models. A challenge in training large-scale SNNs, using existing surrogate learning methods is inefficient and time-consuming. On the other hand, techniques to convert existing transformer-based models to their SNN equivalent are not scalable, as achieving optimal performance comes at the cost of a large number of spike time-steps, i.e. increased latency. To address this, we propose NeurTransformer, a methodology for designing transformer-based SNN for inference using a supervised fine-tuning approach with existing conversion methods. The proposed methodology works by: (1) replacing the self-attention mechanism with a spike-based self-attention (SSA), (2) converting the feed-forward block of the trained transformer model to its equivalent SNN, and (3) fine-tuning the SSA block using SNN-based surrogate learning algorithms. We benchmark the proposed methodology and demonstrate its accuracy and scalability using three variants of the GPT-2 model of increasing model size. We observe that the converted GPT-2 small models demonstrate a 5-12% loss in cosine similarity and a 9.7% reduction in perplexity. Finally, we demonstrate the energy efficiency of the SSA block compared to the ASA block and show between 64.71% and 85.28% reductions in estimated energy consumption when implementing the self-attention mechanism on a digital hardware.
academic
Großsprachmodelle-Inferenz-Engines basierend auf Spiking Neural Networks
Grundmodelle basierend auf der Transformer-Architektur stellen derzeit den Stand der Technik in der universellen Sprachmodellierung sowie in wissenschaftlichen Bereichen wie Materialwissenschaften und Klimawissenschaften dar. Allerdings sind das Training und die Bereitstellung dieser Modelle rechnerisch äußerst anspruchsvoll, da ihre Zeit- und Raumkomplexität quadratisch mit der Eingabesequenzlänge skaliert. Dieses Papier untersucht die Verwendung von Spiking Neural Networks (SNNs) zur Gestaltung von Transformer-Modellen. Bestehende Proxy-Lernmethoden zum Training großflächiger SNNs sind ineffizient und zeitaufwändig, während Techniken zur Umwandlung bestehender Transformer-Modelle in äquivalente SNNs mangelnde Skalierbarkeit aufweisen. Zu diesem Zweck schlagen die Autoren die NeuTransformer-Methode vor, die durch überwachte Feinabstimmung in Kombination mit bestehenden Konversionsmethoden SNN-basierte Transformer-Inferenz-Engines gestaltet. Die Methode umfasst: (1) Ersetzung des Self-Attention-Mechanismus durch Spike-basierte Self-Attention (SSA), (2) Umwandlung von Feedforward-Blöcken in äquivalente SNNs, (3) Feinabstimmung von SSA-Blöcken mit SNN-Proxy-Lernalgorithmen. Experimente zeigen, dass das konvertierte GPT-2-Small-Modell einen Verlust von 5-12% bei der Kosinus-Ähnlichkeit aufweist, die Verwirrung um 9,7% sinkt und SSA-Blöcke im Vergleich zu ASA-Blöcken eine Energieverbrauchsreduktion von 64,71%-85,28% erreichen.
Rechenkomplexität-Problem: Der Self-Attention-Mechanismus von Transformer-Modellen weist eine O(n²)-Zeit- und Raumkomplexität auf, wobei n die Sequenzlänge ist. Dies führt dazu, dass Rechen- und Speicheranforderungen bei der Verarbeitung langer Sequenzen stark ansteigen.
Energieverbrauchsproblem: Traditionelle Transformer-Modelle erfordern teure GPUs oder maßgeschneiderte Beschleuniger für Training und Inferenz mit enormem Energieverbrauch.
SNN-Trainingsschwierigkeiten: Bestehende SNN-Trainingsmethoden weisen zwei Haupteinschränkungen auf:
Das direkte Training großflächiger SNNs mit Backpropagation-Lernregeln ist ineffizient
ANN-SNN-Konversionsmethoden erfordern eine große Anzahl von Spike-Zeitschritten zur Erreichung optimaler Leistung, was zu erhöhter Inferenzverzögerung führt
Die Autoren beabsichtigen, die biologisch inspirierten Eigenschaften von Spiking Neural Networks und die Vorteile ereignisgesteuerten Rechnens zu nutzen, um Transformer-Modelle zu gestalten, die effizient auf neuromorphen Hardware-Plattformen ausgeführt werden können. Dies ermöglicht dateneffiziente, energiearme und ressourcenschonende Inferenz großer Sprachmodelle.
Vorschlag der NeuTransformer-Methode: Eine Methode zur Gestaltung SNN-basierter Transformer aus trainierten Transformer-Modellen, kombiniert mit überwachter Feinabstimmung zur Verbesserung der Modellleistung.
Gestaltung eines Sparse-Spike-Aufmerksamkeitsmechanismus: Ersetzung der traditionellen Self-Attention durch spärliche, spike-basierte Berechnungen, um energieintensive und verzögerungsreiche Matrix-Multiplikationen und Softmax-Operationen zu reduzieren.
Implementierung großflächiger SNN-basierter LLMs: Erfolgreiche Umwandlung von GPT-2 und seinen Varianten in SNN-Versionen. Nach Angaben der Autoren ist GPT-2 Large das größte SNN-basierte Transformer-Modell nach Parameterzahl.
Umfassende Leistungsbewertung: Bewertung der Modellleistung aus mehreren Dimensionen einschließlich Anwendungsgenauigkeit, Kosinus-Ähnlichkeit, Verwirrung und Bits pro Byte, mit Analyse von Energieverbrauch und Durchsatzleistung.
Umwandlung eines vortrainierten Transformer-Modells in eine äquivalente Spiking Neural Network-Version unter Beibehaltung akzeptabler Leistungsverluste und Erreichung signifikanter Energieverbrauchsreduktion und Hardware-Effizienzverbesserung.
Auf der Graphcore-Plattform zeigt die SNN-Version in den meisten Konfigurationen überlegenen Durchsatz gegenüber der ANN-Baseline, besonders bei der Verarbeitung unregelmäßiger und spärlicher Datenzugriffe.
Skalierungseffekt: Mit zunehmender Modellgröße nimmt der Leistungsverlust der SNN-Version schrittweise zu
Energieeffizienz-Vorteile: Alle Modellgrößen erreichen signifikante Energieverbrauchsreduktion
Hardware-Kompatibilität: SNNs zeigen hervorragende Leistung auf MIMD-Verarbeitungsarchitekturen und eignen sich besonders für spärliche Spike-Workloads
Im Vergleich zu bestehenden Methoden vermeidet NeuTransformer die Rechenlast des SNN-Trainings von Grund auf und realisiert die Konstruktion großflächiger SNN-basierter LLMs durch eine Konversions- und Feinabstimmungsstrategie.
Machbarkeitsprüfung: Erfolgreiche Umwandlung der GPT-2-Serie in SNN-Versionen beweist die Machbarkeit großflächiger SNN-basierter LLMs
Leistungsabwägung: Erreichung signifikanter Energieverbrauchsreduktion bei akzeptablem Leistungsverlust
Skalierungsbeschränkung: Feststellung, dass bei Modellen mit über 300M Parametern die Leistungsverschlechterung über akzeptable Schwellenwerte hinausgeht
Das Papier zitiert wichtige Arbeiten in diesem Bereich, einschließlich:
Originales Transformer-Papier (Vaswani et al., 2017)
Klassische Arbeiten zu SNN-Konversionsmethoden (Rueckauer et al., 2016; Diehl & Cook, 2015)
Aktuelle SNN-basierte Transformer-Forschung (Li et al., 2024; Zhou et al., 2023)
Proxy-Gradienten-Lernmethoden (Eshraghian et al., 2023)
Zusammenfassung: Dieses Papier schlägt eine innovative Methode zur Umwandlung großflächiger Sprachmodelle in Spiking Neural Network-Versionen vor und erreicht dabei signifikante Energieverbrauchsreduktion bei Beibehaltung akzeptabler Leistung. Trotz Skalierungsbeschränkungen bietet es wertvolle technische Beiträge für die Bereiche energiearme KI-Inferenz und neuromorphes Rechnen.