如何以csv格式输出hadoop结果

时间:2013-05-02 03:29:50

标签: java csv hadoop mapreduce

我需要以.csv格式输出我的hadoop结果。 我该怎么做? 我的代码:https://github.com/studhadoop/xml/blob/master/XmlParser11.java

我应该在我的代码中简单地包含csvoutputFormat。 我正在使用mapreduce API

myjob.sh

bin/hadoop jar /var/root/ALA/ala_jar/clsperformance.jar ala.clsperf.ClsPerf /user/root/ala_xmlrpt/Amrita\ Vidyalayam\,\ Karwar_Class\ 1\ B_ENG.xml  /user/root/ala_xmlrpt-outputshell4

bin/hadoop fs -get /user/root/ala_xmlrpt-outputshell4/part-r-00000 /Users/jobsubmit


cat /Users/jobsubmit/part-r-00000 /Users/jobsubmit/output.csv

我错过了>在猫

cat /Users/jobsubmit/part-r-00000> /Users/jobsubmit/output.csv

1 个答案:

答案 0 :(得分:14)

您可以使用TextOutputFormat。默认键/值分隔符是制表符。您可以通过在驱动程序中设置属性“mapred.textoutputformat.separatorText”来更改分隔符。

conf.set("mapred.textoutputformat.separatorText", ",");