Machine learningDeep learning / NLP / CV

טרנספורמר ראייה (Vision Transformer) בלמידה עצמית

טרנספורמר ראייה (Vision Transformer) בלמידה עצמית (Self-supervised Vision Transformer, SSL-ViT) מיישם מטרות אימון מקדים עצמיות — כגון חיזוי טלאים ממוסכים (Masked Autoencoder, MAE) או זיקוק עצמי ללא תוויות (self-distillation with no labels, DINO) — על ארכיטקטורת טרנספורמר הראייה, ומאפשר למידת ייצוגים חזותיים עוצמתיים מקורפוס תמונות גדולות ללא תיוג, לפני כל כוונון עדין (fine-tuning) ספציפי למשימה.

פתיחה ב-MethodMindבקרובוידאובקרובDownload slides

קראו את השיטה במלואה

לחברים בלבד

התחברו עם חשבון חינמי כדי לקרוא חלק זה.

התחברות

Method map

The neighbourhood of related methods — select a node to explore.

מקורות

  1. Caron, M., Touvron, H., Misra, I., Jegou, H., Mairal, J., Bojanowski, P., & Joulin, A. (2021). Emerging Properties in Self-Supervised Vision Transformers. Proceedings of the IEEE/CVF International Conference on Computer Vision (ICCV), 9650–9660. link
  2. He, K., Chen, X., Xie, S., Li, Y., Dollar, P., & Girshick, R. (2022). Masked Autoencoders Are Scalable Vision Learners. Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 16000–16009. link

איך לצטט עמוד זה

ScholarGate. (2026, June 3). Self-supervised Vision Transformer (SSL-ViT). ScholarGate. https://scholargate.app/he/deep-learning/self-supervised-vision-transformer

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

מאוזכר על ידי

ScholarGateSelf-supervised Vision Transformer (Self-supervised Vision Transformer (SSL-ViT)). אוחזר בתאריך 2026-06-15 מתוך https://scholargate.app/he/deep-learning/self-supervised-vision-transformer · מערך נתונים: https://doi.org/10.5281/zenodo.20539026