पाइराफ़ॉर्मर: लंबी-श्रेणी की समय-श्रृंखला पूर्वानुमान के लिए पिरामिडल अटेंशन ट्रांसफ़ॉर्मर
पाइराफ़ॉर्मर, इ.एल.सी.आर. 2022 में लियू एट अल. द्वारा प्रस्तुत लंबी-श्रेणी की समय-श्रृंखला पूर्वानुमान के लिए एक ट्रांसफ़ॉर्मर-आधारित मॉडल है। इसका केंद्रीय नवाचार एक पिरामिडल अटेंशन मॉड्यूल (पीएएम) है जो टोकन को बहु-रिज़ॉल्यूशन पदानुक्रम में व्यवस्थित करता है, जिससे मॉडल समय और मेमोरी जटिलता को ओ(एल लॉग एल) पर रखते हुए, वैनिला सेल्फ-अटेंशन की द्विघात लागत के बजाय, कई पैमानों पर लौकिक निर्भरताओं को पकड़ने में सक्षम होता है।
पूरी विधि पढ़ें
यह खंड पढ़ने के लिए निःशुल्क खाते से साइन इन करें।
Method map
The neighbourhood of related methods — select a node to explore.
स्रोत
- Liu, S., Yu, H., Liao, C., Li, J., Lin, W., Liu, A. X., & Dustdar, S. (2022). Pyraformer: Low-complexity pyramidal attention for long-range time series modeling and forecasting. ICLR. link ↗
इस पृष्ठ का उद्धरण कैसे दें
ScholarGate. (2026, June 2). Pyraformer (Pyramidal Attention for Long-Range Forecasting). ScholarGate. https://scholargate.app/hi/deep-learning/pyraformer
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- ऑटोफ़ॉर्मर: दीर्घकालिक समय-श्रृंखला पूर्वानुमान के लिए डीकंपोज़िशन ट्रांसफ़ॉर्मरगहन अधिगम↔ compare
- सूचनाकर्तागहन अधिगम↔ compare
- सुधारक: लंबी अनुक्रमों के लिए कुशल ट्रांसफार्मरगहन अधिगम↔ compare