Optimised neural networks for online processing of ATLAS calorimeter data on FPGAs
Aad, Bertrand, Laatu et al.
A study of neural network architectures for the reconstruction of the energy deposited in the cells of the ATLAS liquid-argon calorimeters under high pile-up conditions expected at the HL-LHC is presented. These networks are designed to run on the FPGA-based readout hardware of the calorimeters under strict size and latency constraints. Several architectures, including Dense, Recurrent (RNN), and Convolutional (CNN) neural networks, are optimised using a Bayesian procedure that balances energy resolution against network size. The optimised Dense, CNN, and combined Dense+RNN architectures achieve a transverse energy resolution of approximately 80 MeV, outperforming both the optimal filtering (OF) method currently in use and RNNs of similar complexity. A detailed comparison across the full dynamic range shows that Dense, CNN, and Dense+RNN accurately reproduce the energy scale, while OF and RNNs underestimate the energy. Deep Evidential Regression is implemented within the Dense architecture to address the need for reliable per-event energy uncertainties. This approach provides predictive uncertainty estimates with minimal increase in network size. The predicted uncertainty is found to be consistent, on average, with the difference between the true deposited energy and the predicted energy.
academic
FPGA-তে ATLAS ক্যালোরিমিটার ডেটার অনলাইন প্রসেসিংয়ের জন্য অপ্টিমাইজড নিউরাল নেটওয়ার্ক
এই গবেষণা উচ্চ-উজ্জ্বলতা বৃহৎ হ্যাড্রন কোলাইডার (HL-LHC) এর প্রত্যাশিত উচ্চ স্তরবিন্যাস অবস্থার অধীনে ATLAS তরল আর্গন ক্যালোরিমিটার ইউনিট শক্তি জমা পুনর্নির্মাণের জন্য নিউরাল নেটওয়ার্ক আর্কিটেকচার সম্পর্কে গভীর গবেষণা পরিচালনা করে। এই নেটওয়ার্কগুলি কঠোর আকার এবং বিলম্ব সীমাবদ্ধতার অধীনে ক্যালোরিমিটার FPGA-ভিত্তিক পঠন হার্ডওয়্যারে চলার জন্য ডিজাইন করা হয়েছে। বেয়েসীয় অপ্টিমাইজেশন পদ্ধতির মাধ্যমে, ঘন নেটওয়ার্ক (Dense), পুনরাবৃত্তিমূলক নিউরাল নেটওয়ার্ক (RNN) এবং কনভোলিউশনাল নিউরাল নেটওয়ার্ক (CNN) সহ একাধিক আর্কিটেকচার অপ্টিমাইজ করা হয়েছে, শক্তি বিভাজন এবং নেটওয়ার্ক আকারের মধ্যে ভারসাম্য অর্জন করে। অপ্টিমাইজড Dense, CNN এবং Dense+RNN সমন্বিত আর্কিটেকচার প্রায় ৮০ MeV এর অনুপ্রস্থ শক্তি বিভাজন অর্জন করেছে, যা বর্তমানে ব্যবহৃত সর্বোত্তম ফিল্টার (OF) পদ্ধতি এবং অনুরূপ জটিলতার RNN এর চেয়ে উল্লেখযোগ্যভাবে উন্নত। সম্পূর্ণ গতিশীল পরিসরের বিস্তারিত তুলনা দেখায় যে Dense, CNN এবং Dense+RNN শক্তি স্কেল সঠিকভাবে পুনরুৎপাদন করে, যখন OF এবং RNN শক্তি কম মূল্যায়ন করে। অতিরিক্তভাবে, Dense আর্কিটেকচারে গভীর প্রমাণ রিগ্রেশন বাস্তবায়ন করা হয়েছে, নির্ভরযোগ্য প্রতি-ইভেন্ট শক্তি অনিশ্চয়তার প্রয়োজনীয়তা পূরণ করতে।
উচ্চ-উজ্জ্বলতা LHC চ্যালেঞ্জ: HL-LHC ২০২৬-২০৩০ সালের আপগ্রেডের পরে ২০০টি পর্যন্ত একযোগে প্রোটন-প্রোটন সংঘর্ষ উৎপন্ন করবে, যা গুরুতর সংকেত স্তরবিন্যাস সমস্যা সৃষ্টি করে
হার্ডওয়্যার সীমাবদ্ধতা: ATLAS তরল আর্গন ক্যালোরিমিটারে ১৮২,৪৬৮টি ইউনিট রয়েছে, প্রতি সেকেন্ডে শত শত TB ডেটা উৎপন্ন করে, বিশেষায়িত ইলেকট্রনিক বোর্ড প্রক্রিয়াকরণের প্রয়োজন
বিলম্ব প্রয়োজনীয়তা: শক্তি পুনর্নির্মাণ অ্যালগরিদম ট্রিগার সিস্টেমের দ্রুত প্রতিক্রিয়া প্রয়োজনীয়তা পূরণের জন্য ১২৫ ns এর মধ্যে সম্পন্ন হতে হবে
বিদ্যমান পদ্ধতির সীমাবদ্ধতা: বর্তমানে ব্যবহৃত সর্বোত্তম ফিল্টার (OF) অ্যালগরিদম উচ্চ স্তরবিন্যাস অবস্থায় কর্মক্ষমতা উল্লেখযোগ্যভাবে হ্রাস পায়
FPGA প্রক্রিয়াকরণ ক্ষমতার উন্নতি ডেটা প্রক্রিয়াকরণ শৃঙ্খলের প্রাথমিক পর্যায়ে আধুনিক মেশিন লার্নিং অ্যালগরিদম বাস্তবায়নের জন্য অনন্য সুযোগ প্রদান করে
কঠোর হার্ডওয়্যার সীমাবদ্ধতার অধীনে চলতে সক্ষম এবং OF অ্যালগরিদমের চেয়ে উন্নত কর্মক্ষমতা সম্পন্ন নতুন পদ্ধতি বিকাশের প্রয়োজন
প্রতি-ইভেন্ট শক্তি অনিশ্চয়তা অনুমান বাস্তবায়ন, পরবর্তী ডেটা অধিগ্রহণ এবং পুনর্নির্মাণ পদক্ষেপের নির্ভুলতা উন্নত করতে
বহু-আর্কিটেকচার অপ্টিমাইজেশন: চারটি নিউরাল নেটওয়ার্ক আর্কিটেকচার (Dense, RNN, CNN, Dense+RNN) প্রস্তাব এবং অপ্টিমাইজ করা হয়েছে, বেয়েসীয় অপ্টিমাইজেশনের মাধ্যমে শক্তি বিভাজন এবং নেটওয়ার্ক আকারের মধ্যে সর্বোত্তম ভারসাম্য অর্জন করে
হার্ডওয়্যার সীমাবদ্ধতা উদ্দেশ্য ফাংশন: MAC ইউনিট সংখ্যা বিবেচনা করে একটি বিভাগীয় শাস্তি উদ্দেশ্য ফাংশন ডিজাইন করা হয়েছে, কার্যকরভাবে নেটওয়ার্ক আকার নিয়ন্ত্রণ করে
কর্মক্ষমতা উন্নতি: সর্বোত্তম আর্কিটেকচার প্রায় ৮০ MeV অনুপ্রস্থ শক্তি বিভাজন অর্জন করে, OF অ্যালগরিদমের তুলনায় প্রায় ৮% উন্নতি
অনিশ্চয়তা পরিমাণীকরণ: FPGA সীমাবদ্ধতার অধীনে প্রথমবারের মতো গভীর প্রমাণ রিগ্রেশন (DER) বাস্তবায়ন, প্রতি-ইভেন্ট শক্তি অনিশ্চয়তা অনুমান প্রদান করে
সম্পূর্ণ গতিশীল পরিসর যাচাইকরণ: ০-১৩০ GeV শক্তি পরিসরে পদ্ধতির কার্যকারিতা এবং শক্তি স্কেল নির্ভুলতা যাচাই করা হয়েছে
এই পেপার ২৮টি গুরুত্বপূর্ণ রেফারেন্স উদ্ধৃত করে, যা ATLAS পরীক্ষা ডিজাইন, LHC আপগ্রেড পরিকল্পনা, FPGA নিউরাল নেটওয়ার্ক বাস্তবায়ন, গভীর প্রমাণ রিগ্রেশন তত্ত্ব ইত্যাদি মূল ক্ষেত্র কভার করে, গবেষণার জন্য দৃঢ় তাত্ত্বিক এবং প্রযুক্তিগত ভিত্তি প্রদান করে।
সামগ্রিক মূল্যায়ন: এটি একটি উচ্চ-মানের প্রয়োগ গবেষণা পেপার, যা তাত্ত্বিক উদ্ভাবন এবং প্রকৌশল অনুশীলনের মধ্যে ভাল ভারসাম্য অর্জন করেছে। গবেষণা সরাসরি প্রধান বৈজ্ঞানিক যন্ত্রপাতি আপগ্রেড প্রয়োজন সেবা করে, পদ্ধতি ডিজাইন যুক্তিসঙ্গত, পরীক্ষামূলক যাচাইকরণ পর্যাপ্ত, উচ্চ শক্তি পদার্থবিজ্ঞান পরীক্ষা এবং FPGA প্রয়োগ ক্ষেত্র উভয়ের জন্য গুরুত্বপূর্ণ মূল্য রয়েছে।