Компьютерная лингвистика

Компьютерная лингвистика изучает язык с вычислительной точки зрения — моделируя, обрабатывая и порождая естественный язык средствами компьютера.

Scope

Область охватывает обработку естественного языка, синтаксический анализ (парсинг), машинный перевод, обработку речи, а также статистические и нейросетевые модели языка.

Core questions

• Как компьютеры могут обрабатывать и порождать человеческий язык?
• Как можно моделировать языковую структуру вычислительными методами?
• Как языковые данные могут использоваться для обучения языковых моделей?
• Как автоматически понимаются речь и текст?

Key concepts

• Обработка естественного языка
• Синтаксический анализ (парсинг)
• Машинный перевод
• Статистические языковые модели
• Распознавание речи
• Языковые корпусы

Key theories

Статистическая обработка естественного языка

Manning и Schütze обобщили статистический, управляемый данными подход к обработке языка.

Обработка речи и языка

Jurafsky и Martin объединили лингвистические и вычислительные подходы применительно к речи и тексту.

History

Компьютерная лингвистика прошла путь от систем, основанных на правилах, к статистическим методам (Manning и Schütze; Jurafsky и Martin) и, в последнее время, к нейросетевым и большим языковым моделям, занимающим центральное место в современных языковых технологиях.

Debates

Подходы на основе правил versus управляемые данными подходы

Следует ли создавать языковые технологии на основе лингвистических правил или методами машинного обучения из данных?

Key figures

• Christopher Manning
• Hinrich Schütze
• Daniel Jurafsky
• James Martin

Seminal works

• manning-schutze-1999
• jurafsky-martin-2000

Frequently asked questions

Что такое обработка естественного языка?

Вычислительные методы анализа, понимания и порождения человеческого языка, составляющие ядро компьютерной лингвистики.