是否为LUIS-bot-app推荐了任何文本预处理?

时间:2017-07-14 06:47:55

标签: bots text-classification luis

是否建议对“训练话语”和“最终用户输入话语”执行以下文本预处理任务?

  1. 替换为“root”同义词。例如。将“em”普通/典型替换为“root”同义词 regular 。这类似于 LUIS短语列表,但我可以定义自己的应用内部列表,不仅限于10个短语列表。
  2. 词干:将变形(或有时派生)的单词缩减为其根形式。例如,单词“connect”,“connected”,“connected”,“connection”,“connected”将映射到“connect”。
  3. ......我错过了其他任何文字预处理任务吗?

1 个答案:

答案 0 :(得分:0)

根据LUIS的经验,我不建议进行文本预处理。 LUIS正在使用使用POS标记的分类方法。阻止或替换根可能会改变句子的含义。最好的方法是继续使用原始用户创建的内容。