Real-world graph typically evolve via a series of events, modeling dynamic interactions between objects across various domains. For dynamic graph learning, dynamic graph neural networks (DGNNs) have emerged as popular solutions. Recently, prompt learning methods have been explored on dynamic graphs. However, existing methods generally focus on capturing the relationship between nodes and time, while overlooking the impact of historical events. In this paper, we propose EVP, an event-aware dynamic graph prompt learning framework that can serve as a plug-in to existing methods, enhancing their ability to leverage historical events knowledge. First, we extract a series of historical events for each node and introduce an event adaptation mechanism to align the fine-grained characteristics of these events with downstream tasks. Second, we propose an event aggregation mechanism to effectively integrate historical knowledge into node representations. Finally, we conduct extensive experiments on four public datasets to evaluate and analyze EVP.
academic
ইভেন্ট-সচেতন প্রম্পট লার্নিং ডায়নামিক গ্রাফের জন্য
বাস্তব বিশ্বের গ্রাফগুলি সাধারণত ইভেন্টের একটি সিরিজের মাধ্যমে বিকশিত হয়, যা বিভিন্ন ডোমেনে বস্তুগুলির মধ্যে গতিশীল মিথস্ক্রিয়া মডেল করে। ডায়নামিক গ্রাফ লার্নিংয়ে, ডায়নামিক গ্রাফ নিউরাল নেটওয়ার্ক (DGNNs) প্রধান সমাধান হয়ে উঠেছে। সম্প্রতি, প্রম্পট লার্নিং পদ্ধতি ডায়নামিক গ্রাফে অন্বেষণ করা হয়েছে। তবে, বিদ্যমান পদ্ধতিগুলি প্রধানত নোড এবং সময়ের সম্পর্ক ক্যাপচার করার উপর দৃষ্টি নিবদ্ধ করে, যখন ঐতিহাসিক ইভেন্টের প্রভাব উপেক্ষা করে। এই পেপারটি EVP প্রস্তাব করে, একটি ইভেন্ট-সচেতন ডায়নামিক গ্রাফ প্রম্পট লার্নিং ফ্রেমওয়ার্ক, যা বিদ্যমান পদ্ধতিগুলিকে ঐতিহাসিক ইভেন্ট জ্ঞান ব্যবহার করার ক্ষমতা বৃদ্ধি করার জন্য একটি প্লাগইন হিসাবে কাজ করতে পারে। প্রথমত, প্রতিটি নোডের জন্য ঐতিহাসিক ইভেন্টের একটি সিরিজ নিষ্কাশন করা হয় এবং এই ইভেন্টগুলির সূক্ষ্ম-দানাদার বৈশিষ্ট্যগুলিকে ডাউনস্ট্রিম কাজের সাথে সারিবদ্ধ করার জন্য একটি ইভেন্ট অভিযোজন প্রক্রিয়া প্রবর্তন করা হয়। দ্বিতীয়ত, নোড প্রতিনিধিত্বে ঐতিহাসিক জ্ঞান কার্যকরভাবে একীভূত করার জন্য একটি ইভেন্ট সমন্বয় প্রক্রিয়া প্রস্তাব করা হয়। অবশেষে, চারটি জনসাধারণ ডেটাসেটে ব্যাপক পরীক্ষা-নিরীক্ষা পরিচালিত হয় EVP মূল্যায়ন এবং বিশ্লেষণ করার জন্য।
এই গবেষণা যে মূল সমস্যা সমাধান করতে চায় তা হল: ডায়নামিক গ্রাফ লার্নিংয়ে ডাউনস্ট্রিম কাজের কর্মক্ষমতা উন্নত করতে ঐতিহাসিক ইভেন্ট জ্ঞান কীভাবে কার্যকরভাবে ব্যবহার করা যায়। এটি নির্দিষ্টভাবে অন্তর্ভুক্ত করে:
প্রাক-প্রশিক্ষণ এবং ডাউনস্ট্রিম কাজের লক্ষ্যের অসামঞ্জস্য: ঐতিহ্যবাহী DGNNগুলি সাধারণত লিঙ্ক পূর্বাভাস কাজে প্রশিক্ষিত হয়, কিন্তু ডাউনস্ট্রিম কাজ নোড শ্রেণীবিভাগ হতে পারে, যা লক্ষ্যের পার্থক্য সৃষ্টি করে
ঐতিহাসিক ইভেন্টের প্রভাব উপেক্ষা: বিদ্যমান ডায়নামিক গ্রাফ প্রম্পট লার্নিং পদ্ধতিগুলি প্রধানত নোড-সময় সম্পর্কের উপর দৃষ্টি নিবদ্ধ করে, গ্রাফ বিবর্তন প্রক্রিয়ায় ঐতিহাসিক ইভেন্ট জ্ঞান উপেক্ষা করে
বাস্তব তাৎপর্য: বাস্তব বিশ্বের গ্রাফ কাঠামো ইভেন্ট সিকোয়েন্সের মাধ্যমে বিকশিত হয়, যেমন ব্যবহারকারীরা Reddit-এ পোস্ট করা, Wikipedia-তে পৃষ্ঠা তৈরি করা ইত্যাদি
কর্মক্ষমতা উন্নতি: ঐতিহাসিক ইভেন্টগুলিতে মূল্যবান জ্ঞান রয়েছে যা ভবিষ্যত ইভেন্টগুলির পূর্বাভাস দিতে এবং নোড টেম্পোরাল প্রতিনিধিত্ব শেখা উন্নত করতে পারে
পরামিতি দক্ষতা: প্রম্পট লার্নিং শুধুমাত্র হালকা-ওজনের প্রম্পট সামঞ্জস্য করার প্রয়োজন, কম-সম্পদ পরিস্থিতিতে বিশেষভাবে কার্যকর
ঐতিহ্যবাহী DGNNs: প্রাক-প্রশিক্ষণ এবং ডাউনস্ট্রিম কাজের লক্ষ্যের অসামঞ্জস্য সমস্যা রয়েছে
ডায়নামিক গ্রাফ প্রাক-প্রশিক্ষণ পদ্ধতি: একইভাবে লক্ষ্যের অসামঞ্জস্যের কারণে জ্ঞান স্থানান্তরের অসুবিধার সম্মুখীন হয়
বিদ্যমান ডায়নামিক গ্রাফ প্রম্পট লার্নিং: DyGPrompt, TIGPrompt ইত্যাদির মতো শুধুমাত্র নোড-সময় মিথস্ক্রিয়া বিবেচনা করে, গ্রাফ কাঠামো বিবর্তনের ঐতিহাসিক ইভেন্ট তথ্য উপেক্ষা করে
EVP ফ্রেমওয়ার্ক প্রস্তাব: প্রথম ইভেন্ট-সচেতন ডায়নামিক গ্রাফ প্রম্পট লার্নিং ফ্রেমওয়ার্ক, যা বিদ্যমান ডায়নামিক গ্রাফ লার্নিং পদ্ধতিগুলিকে প্লাগইন হিসাবে উন্নত করতে পারে
ইভেন্ট অভিযোজন প্রক্রিয়া: ঐতিহাসিক ইভেন্টের সূক্ষ্ম-দানাদার বৈশিষ্ট্য ক্যাপচার করতে এবং ডাউনস্ট্রিম কাজের চাহিদা অনুযায়ী মানিয়ে নিতে ইভেন্ট প্রম্পট ডিজাইন করা
ইভেন্ট সমন্বয় প্রক্রিয়া: ডায়নামিক প্রম্পট এবং টেম্পোরাল ক্ষয় ফাংশন একত্রিত করে ঐতিহাসিক ইভেন্ট জ্ঞান কার্যকরভাবে একীভূত করা
ব্যাপক পরীক্ষা-নিরীক্ষা যাচাইকরণ: চারটি বেঞ্চমার্ক ডেটাসেটে EVP এর কার্যকারিতা এবং প্লাগইন হিসাবে সার্বজনীনতা যাচাই করা
বিদ্যমান পদ্ধতি যেমন DyGPrompt, TIGPrompt টেম্পোরাল-সচেতন এবং নোড-সচেতন প্রম্পট ডিজাইন করে, কিন্তু ঐতিহাসিক ইভেন্টের প্রভাব উপেক্ষা করে। EVP এই শূন্যতা পূরণ করে।
পেপারটি ডায়নামিক গ্রাফ লার্নিং, গ্রাফ নিউরাল নেটওয়ার্ক, প্রম্পট লার্নিং এবং অন্যান্য সম্পর্কিত ক্ষেত্রের গুরুত্বপূর্ণ কাজ উদ্ধৃত করেছে, পাঠকদের জন্য ব্যাপক পটভূমি জ্ঞান প্রদান করে। প্রধান সংদর্ভগুলিতে TGN, TGAT এবং অন্যান্য ক্লাসিক ডায়নামিক গ্রাফ পদ্ধতি, এবং GraphPrompt, DyGPrompt এবং অন্যান্য প্রম্পট লার্নিং পদ্ধতি অন্তর্ভুক্ত রয়েছে।
সামগ্রিক মূল্যায়ন: এটি একটি উচ্চ-মানের গবেষণা পেপার যা ডায়নামিক গ্রাফ প্রম্পট লার্নিং ক্ষেত্রে গুরুত্বপূর্ণ অবদান করেছে। EVP ফ্রেমওয়ার্ক যুক্তিসঙ্গতভাবে ডিজাইন করা হয়েছে, পরীক্ষা-নিরীক্ষা পর্যাপ্তভাবে যাচাইকৃত, এবং উচ্চ ব্যবহারিক মূল্য রয়েছে। যদিও তাত্ত্বিক এবং পরীক্ষা-নিরীক্ষা দিক থেকে কিছু অপূর্ণতা রয়েছে, তবে সামগ্রিকভাবে এটি এই ক্ষেত্রের একটি গুরুত্বপূর্ণ অগ্রগতি।