Промпт-инжиниринг — разработка инструкций для больших языковых моделей

Промпт-инжиниринг — это практика создания структурированных инструкций на естественном языке (промптов) для получения целевых результатов от больших языковых моделей (БЯМ). Формализованный Брауном и соавт. (2020) в контексте GPT-3 и расширенный Вэй и соавт. (2022) с помощью промптинга "цепочка рассуждений", он включает четыре основные стратегии: "нулевой выстрел" (zero-shot), "несколько выстрелов" (few-shot), "цепочка рассуждений" (chain-of-thought) и "дерево рассуждений" (tree-of-thought). Вместо переобучения модели аналитик формирует ее поведение исключительно посредством разработки входного текста.