เปรียบเทียบวิธี
ดูวิธีที่เลือกเทียบกันแบบเคียงข้าง แถวที่ต่างกันจะถูกเน้นไว้
| การเรียนรู้แบบถ่ายโอนด้วยตนเอง (Self-supervised Transfer Learning)× | การเรียนรู้แบบถ่ายโอน× | |
|---|---|---|
| สาขาวิชา | การเรียนรู้ของเครื่อง | การเรียนรู้ของเครื่อง |
| ตระกูล | Machine learning | Machine learning |
| ปีกำเนิด≠ | 2018–2020 (modern consolidation) | 2010 (formalized); 1990s (early roots) |
| ผู้ริเริ่ม≠ | LeCun, Y. (concept); Devlin et al. (BERT, NLP); Chen et al. (SimCLR, vision) | Pan, S. J. & Yang, Q. (survey); Bengio, Y. (deep learning framing) |
| ประเภท≠ | Learning paradigm (self-supervised pre-training + fine-tuning) | Learning paradigm |
| แหล่งต้นตำรับ≠ | Chen, T., Kornblith, S., Norouzi, M., & Hinton, G. (2020). A simple framework for contrastive learning of visual representations. In Proceedings of the 37th International Conference on Machine Learning (ICML), PMLR 119, 1597–1607. link ↗ | Pan, S. J., & Yang, Q. (2010). A Survey on Transfer Learning. IEEE Transactions on Knowledge and Data Engineering, 22(10), 1345–1359. DOI ↗ |
| ชื่อเรียกอื่น | self-supervised pre-training, SSL-based transfer learning, representation transfer from self-supervised models, contrastive pre-training with transfer | TL, domain adaptation, fine-tuning, pre-trained model adaptation |
| ที่เกี่ยวข้อง≠ | 6 | 3 |
| สรุป≠ | Self-supervised transfer learning combines two powerful paradigms: a model first learns rich representations from unlabeled data using self-supervised pretext tasks, then those learned representations are transferred and fine-tuned on a downstream task with limited labeled data. This approach underlies landmark systems such as BERT in NLP and SimCLR and DINO in computer vision, dramatically reducing labeled-data requirements across many domains. | Transfer learning is a machine learning paradigm in which knowledge gained from training a model on a source task or domain is reused to improve learning on a different but related target task or domain. It is especially powerful when labeled data for the target task is scarce, and it underlies most modern deep learning applications in computer vision, natural language processing, and beyond. |
| ScholarGateชุดข้อมูล ↗ |
|
|