Machine learning
BERT 미세 조정
Devlin과 동료들이 2019년에 소개한 BERT 모델을 기반으로 하는 BERT 미세 조정은 분류, 개체명 인식 또는 질의응답과 같은 특정 작업을 위해 소규모 레이블링된 데이터셋에서 사전 훈련된 BERT 모델을 재훈련합니다. 전이 학습을 통해 상대적으로 적은 작업별 데이터로도 높은 성능을 달성합니다.
방법 전문 읽기
회원 전용
로그인무료 계정으로 로그인하면 이 섹션을 읽을 수 있습니다.
Method map
The neighbourhood of related methods — select a node to explore.
출처
- Devlin, J., Chang, M.-W., Lee, K. & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. NAACL. DOI: 10.18653/v1/N19-1423 ↗
- Sun, C., Qiu, X., Xu, Y. & Huang, X. (2019). How to Fine-Tune BERT for Text Classification. CCL. DOI: 10.1007/978-3-030-32381-3_16 ↗
이 페이지 인용 방법
ScholarGate. (2026, June 1). Fine-Tuning of Pre-trained BERT (Bidirectional Encoder Representations from Transformers). ScholarGate. https://scholargate.app/ko/deep-learning/bert-finetuning
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- GPT 파인튜닝딥러닝↔ compare
- LoRA 및 PEFT딥러닝↔ compare
- 랜덤 포레스트머신러닝↔ compare
- Vision Transformer딥러닝↔ compare
- XGBoost머신러닝↔ compare