如何在注释语料库时解释synaxnet的输出

Question

我使用预先训练的语法网模型（即使用Parse McParseface）注释语料库。我在理解输出时遇到了问题。输出中有两个指标重新编制。是那些用于POS标记和依赖性解析的吗？如果是，哪一个是POS标记性能，哪一个是依赖性解析性能？

这是输出：

INFO:tensorflow:Total processed documents: 21710 INFO:tensorflow:num correct tokens: 454150 INFO:tensorflow:total tokens: 560993 INFO:tensorflow:Seconds elapsed in evaluation: 1184.63, eval metric: 80.95% INFO:tensorflow:Processed 206 documents INFO:tensorflow:Total processed documents: 21710 INFO:tensorflow:num correct tokens: 291851 INFO:tensorflow:total tokens: 504496 INFO:tensorflow:Seconds elapsed in evaluation: 1193.17, eval metric: 57.85%

Answer 1

如果您正在使用 https://github.com/tensorflow/models/blob/master/syntaxnet/syntaxnet/demo.sh 那么第一个指标是POS标签准确度，第二个指标是UAS。只有当您输入的conll数据包含黄金POS标签和黄金依赖关系时，它们才有意义。