เปรียบเทียบวิธี
ดูวิธีที่เลือกเทียบกันแบบเคียงข้าง แถวที่ต่างกันจะถูกเน้นไว้
| การเรียนรู้แบบถ่ายโอนด้วยตนเอง (Self-supervised Transfer Learning)× | การเรียนรู้แบบน้อยตัวอย่าง× | |
|---|---|---|
| สาขาวิชา | การเรียนรู้ของเครื่อง | การเรียนรู้ของเครื่อง |
| ตระกูล | Machine learning | Machine learning |
| ปีกำเนิด≠ | 2018–2020 (modern consolidation) | 2011–2017 |
| ผู้ริเริ่ม≠ | LeCun, Y. (concept); Devlin et al. (BERT, NLP); Chen et al. (SimCLR, vision) | Lake, B. M.; Vinyals, O.; Finn, C. et al. |
| ประเภท≠ | Learning paradigm (self-supervised pre-training + fine-tuning) | Meta-learning / low-data learning paradigm |
| แหล่งต้นตำรับ≠ | Chen, T., Kornblith, S., Norouzi, M., & Hinton, G. (2020). A simple framework for contrastive learning of visual representations. In Proceedings of the 37th International Conference on Machine Learning (ICML), PMLR 119, 1597–1607. link ↗ | Vinyals, O., Blundell, C., Lillicrap, T., Wierstra, D., & Kavukcuoglu, K. (2016). Matching Networks for One Shot Learning. Advances in Neural Information Processing Systems (NeurIPS), 29. link ↗ |
| ชื่อเรียกอื่น | self-supervised pre-training, SSL-based transfer learning, representation transfer from self-supervised models, contrastive pre-training with transfer | FSL, low-shot learning, k-shot learning, meta-learning for few examples |
| ที่เกี่ยวข้อง≠ | 6 | 4 |
| สรุป≠ | Self-supervised transfer learning combines two powerful paradigms: a model first learns rich representations from unlabeled data using self-supervised pretext tasks, then those learned representations are transferred and fine-tuned on a downstream task with limited labeled data. This approach underlies landmark systems such as BERT in NLP and SimCLR and DINO in computer vision, dramatically reducing labeled-data requirements across many domains. | Few-shot learning is a machine learning paradigm that trains models to recognize new classes or solve new tasks from only a handful of labeled examples — typically one to five — by leveraging prior knowledge acquired from a large, related training distribution. It is especially relevant in domains where labeling is expensive, scarce, or structurally limited. |
| ScholarGateชุดข้อมูล ↗ |
|
|