是否有最佳实践来处理LUIS训练集和查询中的句点?

时间:2018-03-20 13:55:30

标签: luis

我处理的一些话语是由几个句子组成的,我注意到句号的存在/不存在通常会改变检测到的意图。

为了举例 - "嗨。我想订购。"可能会导致意图不同于"您好我想订购"。

LUIS如何用句点标记话语?是否将期间视为其他令牌,或者在某些情况下是否对清理期进行了一些处理?

1 个答案:

答案 0 :(得分:0)

LUIS使用CNTK来构建LSTM,并且话语正在经历各种NLP管道步骤,如POS标记和句子tockenizing。

当有句号时,LUIS内部的管道可能会将其作为单独的句子。最好用这两种话语进行训练。