标签: web-services hadoop architecture hadoop2 hadoop-streaming
map / reduce作业希望作为管道的一部分对Web服务进行内联调用。什么是有效的架构/堆栈来创建这种可扩展的Web服务。
如果此类Web服务必然会遇到共享资源的瓶颈。其他选项是什么?
首先,我们正在考虑使用Hadoop Streaming从map / reduce job直接调用Web服务核心逻辑的各个组件