有效的词法分析器，避免字典查找

Question

我想把字符串像'eat'转换成'eating'， 'eats'。我搜索并找到了词序化作为解决方案，但我遇到的所有词序化工具都使用单词列表或字典查找。有没有一种词法归纳器可以避免字典查找并提供高效率，可能是基于规则的词法归纳器。是的，我不是在找"stemmer"

Answer 1

你可以试试LRBL:一个基于规则的词序化器

它使用递归缩略词的概念。