如何从Hadoop映射有效地进行Web服务调用减少了作业MRv1 / MRv2

时间:2016-09-15 16:59:18

标签: web-services hadoop architecture hadoop2 hadoop-streaming

map / reduce作业希望作为管道的一部分对Web服务进行内联调用。什么是有效的架构/堆栈来创建这种可扩展的Web服务。

如果此类Web服务必然会遇到共享资源的瓶颈。其他选项是什么?

首先,我们正在考虑使用Hadoop Streaming从map / reduce job直接调用Web服务核心逻辑的各个组件

0 个答案:

没有答案