ScholarGate
Asisten
Machine learningDeep Learning, Language Models, RLHF Alternatives

Optimisasi Preferensi Langsung

Optimisasi Preferensi Langsung (DPO) adalah metode pelatihan yang diperkenalkan oleh Rafailov et al. pada tahun 2023 yang menyelaraskan model bahasa dengan preferensi manusia tanpa memerlukan model imbalan (reward model) eksplisit. Dengan mengoptimalkan secara langsung pasangan preferensi (respons lebih baik vs respons lebih buruk), DPO menyederhanakan alur kerja pelatihan dibandingkan dengan pembelajaran penguatan dari umpan balik manusia (RLHF).

Buka di MethodMindSegeraVideoSegeraDownload slides

Baca metode selengkapnya

Khusus anggota

Masuk dengan akun gratis untuk membaca bagian ini.

Masuk

Method map

The neighbourhood of related methods — select a node to explore.

Sumber

  1. Rafailov, R., Sharma, A., Mitchell, E., Manning, C. D., Ermon, S., & Finn, C. (2023). Direct preference optimization: Your language model is secretly a reward model. arXiv preprint arXiv:2305.18290. link

Cara menyitasi halaman ini

ScholarGate. (2026, June 3). Direct Preference Optimization: Your Language Model is Secretly a Reward Model. ScholarGate. https://scholargate.app/id/deep-learning/direct-preference-optimization

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Dirujuk oleh

ScholarGateDirect Preference Optimization (Direct Preference Optimization: Your Language Model is Secretly a Reward Model). Diakses 2026-06-15 dari https://scholargate.app/id/deep-learning/direct-preference-optimization · Set data: https://doi.org/10.5281/zenodo.20539026