Перейти до вмістуScholarGate
БібліотекаМоя бібліотекаСтілReview StudioАсистент
Увійти
Direct Preference Optimization/Докази
Запис доказів методу

Direct Preference Optimization

Direct Preference Optimization (DPO) is a training method introduced by Rafailov et al. in 2023 that aligns language models with human preferences without requiring an explicit reward model. By directly optimizing for preference pairs (better response vs worse response), DPO simplifies the training pipeline compared to reinforcement learning from human feedback (RLHF).

Sources recorded, not reviewed

Запис джерела

Цитати скопійовано дослівно з вихідного запису методу. Вони не передбачають перевірки на рівні тверджень.

Direct Preference Optimization: Your Language Model is Secretly a Reward Model
Запис таксономічного методу · ml-model / deep-learning
  • Rafailov, R., Sharma, A., Mitchell, E., Manning, C. D., Ermon, S., & Finn, C. (2023). Direct preference optimization: Your language model is secretly a reward model. arXiv preprint arXiv:2305.18290. · URL
Відкрити повний метод

Відібрані твердження

Твердження збережено в журналі доказів, кожне зі своєю оцінкою.

Відібраних тверджень ще немає

Цей перегляд не вигадує оцінку твердження, якщо в журналі її немає.

Пов'язані методи

Згенеровано з графа методів і показано як рекомендовані системою зв'язки — жодне твердження доказів не передбачається.

Same method familyLatent Diffusion Modelsmachine-suggested · Relational suggestion, not evidence.Same method familyMamba (State Space Model)machine-suggested · Relational suggestion, not evidence.Same method familyMasked Autoencodersmachine-suggested · Relational suggestion, not evidence.Same method familyQLoRAmachine-suggested · Relational suggestion, not evidence.

Статус доказів

Sources recorded, not reviewed

Bibliographic sources are present. Claim-level evidence review has not been performed.

Джерела

1 записана цитата, скопійована з вихідного запису методу.

Дії

Відкрити сторінку методу
ScholarGate

Довідкова бібліотека дослідницьких методів, де головне — зміст: що являє собою кожен метод, як він працює і звідки походить.

Відкриті дані (CC-BY)

Огляд

  • Бібліотека
  • Пошук методів…
  • Огляд за галузями
  • Галузі
  • Шлях
  • Порівняти
  • Який метод обрати?

Довідник

  • Дисципліни
  • Атлас
  • Глосарій
  • Методологія
  • Філософія

Робочий простір

  • Моя бібліотека
  • Стіл
  • Чат

Компанія

  • Про проєкт
  • Ціни
  • Контакти
  • Запропонувати метод

Матеріали зібрано з опублікованих джерел для довідки. Перевірка точності та придатності будь-якої інформації для ваших власних потреб залишається вашою відповідальністю.

© 2026 ScholarGate · Довідкова бібліотека дослідницьких методів
  • Конфіденційність
  • Куки
Умови користування
  • Видалити обліковий запис