Обработка естественного языка (NLP) в социальных сетях — анализ коротких и "шумных" текстов

NLP в социальных сетях — это специализированный конвейер обработки естественного языка, разработанный для коротких, "шумных" и неформальных текстов, появляющихся на таких платформах, как Twitter, Reddit и в разделах комментариев. В отличие от NLP общего назначения, этот конвейер учитывает специфические для платформы соглашения — хэштеги, эмодзи, аббревиатуры и смешение языков — что позволяет выполнять такие задачи, как анализ хэштегов, обнаружение вирусного контента и измерение общественного мнения. Эталонная традиция для такого подхода была установлена в рамках совместной задачи SemEval-2017 Task 4 (Rosenthal et al., 2017) и унифицированного эталонного набора TweetEval (Barbieri et al., 2020).