Генерація з доповненим пошуком (RAG)

Генерація з доповненим пошуком (RAG) — це конвеєр обробки природної мови, представлений Льюїсом та ін. у 2020 році, який посилює велику мовну модель (LLM) доказами, отриманими в час висновку з зовнішньої бази знань. Замість того, щоб покладатися виключно на те, що модель запам'ятала під час навчання, RAG спочатку витягує найрелевантніші уривки з індексу документів, а потім передає ці уривки LLM як контекст, обґрунтовуючи згенеровану відповідь перевіреною, актуальною інформацією. Цей підхід зменшує галюцинації та дозволяє вводити специфічні для домену або чутливі до часу знання без перенавчання моделі.