如何分析和查询大块数据

Question

我需要：

1。分析http日志的大文件

• 我正在考虑使用mapreduce，但我不确定在哪里托管它。我应该使用App Engine Mapper还是EC2 + MapReduce，还是只在我的VPS中使用它？
• MapReduce以外的其他建议？

2.保存并查询结果

• 在分析了我需要保存的所有数据并以最佳方式呈现给用户之后。我该如何保存结果？ MongoDB是一个很好的解决方案吗？

感谢。

问候。

Answer 1

你见过BigQuery吗？它看起来就像你需要的那样。