Hadoop示例排序验证

Question

在hadoop-examples.jar中， 我知道对于TeraSort，我们可以使用TeraValidate来验证输出。 是否有类似的方法来验证Sort示例的输出？

另外，我尝试使用TeraValidate来验证排序输出，但它给了我一个错误。

以下是TeraValidate的输出，

> error misorder in part-00001 last: ';:widdl' current: ')(winga'
> error misorder in part-00001 last: 'scrat bact' current: 'FEBassa'
> error misorder in part-00001 last: 'FEBassa' current: '?>Fouqu'
> error misorder in part-00001 last: '?>Fouqu' current: '=<Itali'
> error misorder in part-00001 last: 'shola spec' current: 'XWLemur'
> error misorder in part-00001 last: 'biventer L' current: '43Mesua'
> error misorder in part-00001 last: 'ploration ' current: 'pinulus ar'
> error misorder in part-00001 last: 'pinulus ar' current: 'hgShiah'
> error misorder in part-00001 last: 'pendulant ' current: '/.Tamil'
> error misorder in part-00001 last: '`_Whilk' current: '54Yanni'
> error misorder in part-00001 last: 'ribaldrous' current: 'cinque cha'

Answer 1

我刚检查过teravalidate仅适用于terasort。没有标准作业来验证Sort的输出。

这就是TeraSort用于大多数基准测试工作的原因，因为它拥有TeraGen，TeraSort，TeraValidate。