Робустна регресия

OLS напасва линия чрез минимизиране на квадратите на остатъците, което означава, че дори една екстремна точка от данните може да издърпа линията далеч от по-голямата част от данните. Робастната регресия вместо това използва функция на загубата, която расте по-бавно от квадрат за големи остатъци, така че отдалечените екстремни стойности допринасят много по-малко за напасването. Алгоритъмът прогресивно намалява теглото на наблюденията с големи остатъци при всяка итерация — напаснатата линия в крайна сметка представя точно по-голямата част от данните, докато екстремните стойности се изолират, вместо да бъдат приети.