Kontrastīvā mācīšanās NLP — teksta attēlojumu apguve ar kontrastu

Kontrastīvā mācīšanās NLP ir attēlojumu apguves tehnika — ko popularizējuši SimCSE (Gao et al., 2021) un Supervised Contrastive Learning (Khosla et al., 2020) — kas trenē teksta kodētāju, pietuvinot līdzīgu teksta pāru attēlojumus un attālinot atšķirīgu pāru attēlojumus. Rezultātā tiek iegūta blīva, augstas kvalitātes attēlojumu telpa, ko var apgūt bez jebkādām anotācijām vai ar minimālu uzraudzību, padarot to īpaši vērtīgu, ja anotēti dati ir reti.