我希望保存一些reducer脚本(在php中)在执行过程中累积到另一个表(具有完全不同的模式)的数据。最好的方法是什么? 另外,我们可以从reducer中写入文件吗?
答案 0 :(得分:0)
您可以选择通过WebHDFS将数据上传到HDFS到相应的目录(http://hadoop.apache.org/docs/stable/webhdfs.html / CREATE)。
如果更方便,您也可以使用WebHCatalog(http://hive.apache.org/docs/hcat_r0.5.0/resources.html / PUT ddl / database /:db / table /:table / partition /:partition)将其公开为分区
然后会在表格中显示您要将其写入。