使用“本地”S3作为HDFS的替代品?

时间:2012-09-17 06:09:48

标签: hadoop amazon-s3 cloudera jets3t

我一直在笔记本上测试most recent Cloudera CDH4 hadoop-conf-pseudo(即MRv2或YARN),该笔记本有4核,8GB RAM和Intel X25MG2 SSD。操作系统是Ubuntu 12.04LTS 64位。到目前为止一切都很好。

Setting up hadoop to use S3 as a replacement for HDFS,我想在我的笔记本上做这个 - 在这个笔记本上,我和我的同事实现了一个S3模拟器。

尽管如此,我无法找到将jets3t.properties设置为将结束点更改为localhost的位置。我下载了hadoop-2.0.1-alpha.tar.gz并搜索了源代码而没有找到线索。在SO Using s3 as fs.default.name or HDFS?上有一个类似的Q,但是我想在我们的实验中使用我们自己的轻量级和快速S3仿真层而不是AWS S3。

我希望能够提示如何将终点更改为其他主机名。

此致

- 扎克

0 个答案:

没有答案