Hadoop权威指南"国家气候数据中心"获取数据

时间:2015-06-05 13:38:54

标签: hadoop

我正在尝试学习Hadoop。我试图将National Climatic Data Center数据提供给我新安装的Hadoop Master。获取整个数据的最简单方法是什么

编辑:因为我得到了投票,即使我得到了答案,我想我应该详细解释我的问题。在下载页面上有许多.gz格式的文件。我需要以人性化的方式获取这些文件。谢谢。

1 个答案:

答案 0 :(得分:0)

我认为您找到了该网站并且您看到了数据。我希望你问这个问题的原因。您需要使用像sudo apt-get install wget这样的包管理器安装wget,然后使用wget工具适当的参数。对于一个度和.gz文件使用

wget -r -np -l 1 -A gz http://www.ncdc.noaa.gov/orders/qclcd/