形態素解析 — ステミングとレンマ化

形態素解析は、単語を語幹と接辞に分割し、同じ単語の異なる表面形を1つとして扱えるようにする。これは、Porter (1980) や Snowball アルゴリズムのような規則ベースのステミングと、辞書を考慮したレンマ化という2つの補完的なアプローチを包含し、トルコ語やアラビア語のような膠着語における重要なテキスト正規化ステップである。