Представление и предобработка текста

135 — методы этого семейства.

Избранное

Разрешение аббревиатурAbbreviation and acronym resolution is a natural-language-processing pipeline that maps each short form in a text to its full-length definition using contextual cues from the surro Акустическая фонетикаAcoustic Phonetics is the study of the physical properties of speech sounds using instrumentation to measure and analyze sound waves. Pioneered by Peter Ladefoged and Kenneth Steve Извлечение аргументацииArgument mining is a natural-language-processing task that automatically detects claims, premises and the argumentative structures that link them within text. Consolidated as a fie Аудио-отпечаткиAudio fingerprinting is a technique for creating a compact, robust identifier (fingerprint) for audio recordings that uniquely represents the content while being tolerant to modifi Атрибуция авторства (стилометрия)Authorship attribution is the task of identifying the most probable author of an anonymous or disputed text by analysing its stylistic fingerprint. Rooted in the statistical work o Автоматизированная оценка эссе (AES)Automated Essay Scoring (AES) is a natural-language-processing task in which a computational model assigns scores to student-written essays across dimensions such as grammatical co

Reading path

This topic's most-referenced foundational methods, in the order they were developed — a place to start if you're new here.

TF-IDF1988by Salton & Buckley
Алгоритм определения высоты тона2002by Alain de Cheveigné
Векторные представления предложений2015–2019by Kiros et al. (Skip-Thought, 2015); Reimers & Gurevych (Sentence-BERT, 2019)
Классификация на основе BERT2019by Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (Google AI Language)
Дообученная классификация на основе BERT2019by Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (Google AI)
Мультиязычный трансформер2019–2020by Devlin et al. (mBERT); Conneau et al. (XLM-R)
Мультимодальная классификация на основе BERT2019by Kiela, D. et al.; Lu, J. et al.
Классификация на основе RoBERTa2019by Liu, Y. et al. (Facebook AI Research / University of Washington)

all methods on this shelf ↓

Все методы 135

Разрешение аббревиатур Акустическая фонетика Извлечение аргументации Аудио-отпечатки Атрибуция авторства (стилометрия)Автоматизированная оценка эссе (AES)Автоматическая транскрипция музыки Отслеживание тактов Дообучение BERT Классификация на основе BERT Распознавание аккордов Chronos Clinical Text Mining CLIP Анализ совместной встречаемости Коллокационный анализ Здравый смысл в обработке естественного языка (NLP)Сравнительный метод Разрешение кореференции Корпусная лингвистика Отслеживание сущностей между документами Кросс-языковой анализ текстов Диалектометрия Прямая оптимизация предпочтений Кластеризация документов Адаптация домена Адаптация BERT-модели к домену на основе классификации Адаптация к домену для распознавания именованных сущностей Адаптация RoBERTa на основе домена для классификации Адаптация к домену при анализе тональности Domain-adaptive Word2Vec Электропалатография Выявление событий Объяснимое распознавание именованных сущностей Объяснимый анализ тональности FastText Дообученная классификация на основе BERT Дообученное распознавание именованных сущностей Дообученное вопросно-ответное извлечение Классификация на основе дообученной модели RoBERTa Тонкая настройка эмбеддингов предложений Fine-Tuned Word2Vec Глоттохронология Тонкая настройка GPT GraphRAG Обнаружение галлюцинаций Гармонический анализ в музыке Детекция языка вражды Преобразование Гильберта-Хуанга Основанная на признаках структура фразы (HPSG)Извлечение информации Распознавание инструментов Внутренняя реконструкция Извлечение ключевых слов Построение графа знаний из текста Идентификация языка (LID)Лексическое разнообразие Лексическая подстановка Оценка лингвистической приемлемости Лингвистическая этнография Извлечение мелодии Минималистская программа Морфологический анализ Многоязычная классификация на основе RoBERTa Многоязычный анализ тональности Мультиязычный трансформер Мультимодальная классификация на основе BERT Мультимодальный дискурс-анализ Мультимодальное распознавание именованных сущностей Мультимодальная классификация на основе RoBERTa Мультимодальный Word2Vec Классификация музыкальных жанров Сегментация музыки Мера музыкального сходства Определение тональности музыки Анализ N400/P600 Генерация естественного языка Обнаружение отрицания Извлечение открытой информации Теория оптимальности Задача Ламберта (Определение орбиты)Обнаружение парафраз Алгоритм определения высоты тона Шкала политической толерантности Обнаружение пропаганды Теория прототипов Психолингвистическое отслеживание взгляда QLoRA Анализ удобочитаемости Извлечение отношений Генерация с дополненной выборкой (Retrieval-Augmented Generation, RAG)Классификация на основе RoBERTa Научный текстовый майнинг Классификация на основе самообуча с использованием BERT Самообучающееся распознавание именованных сущностей Классификация на основе самообучения с использованием RoBERTa Самостоятельно обучаемый анализ тональности Самообучающийся Word2Vec Семантический анализ признаков Семантическое сходство Полуавтоматическая классификация на основе BERT Классификация на основе RoBERTa с частичной разметкой Полуавтоматический анализ тональности Полуавтообучаемый Word2Vec Векторные представления предложений Заполнение слотов Анализ сетей типа «малый мир» и безмасштабных сетей Обработка естественного языка (NLP) в социальных сетях Детекция спекуляций Теория речевых актов Проверка орфографии и грамматики Системная функциональная лингвистика Оценка темпа Оценка связности текста Анализ сложности текста Дедупликация текстов Анализ частоты текста Текстовый сетевой анализ Нормализация текста Регрессия на тексте Сегментация текста Обусловленность текста TF-IDF Анализ тембра TimeGPT Извлечение временной шкалы Трансферное обучение с классификацией на основе BERT Трансферное обучение для распознавания именованных сущностей Transfer Learning with Sentence Embeddings Transformer (NLP)Разделение вокала Классификация на основе BERT при слабом обучении Слабо контролируемая классификация на основе RoBERTa Слабо контролируемый Word2Vec Шкала ксенофобии

Ещё в разделе «Обработка естественного языка»

Задачи NLP 32 Тематическое моделирование 28 Эмбеддинги и языковые модели 11