张量流和hadoop的兼容性

Question

我想将tensorflow用作机器学习库，并将hadoop用作大数据框架。 但我不知道这些是兼容的。 我无法在网站上搜索任何引用。

我的问题是

1. 我可以使用带有hadoop的tensorflow吗？
2. （如果没有）请推荐大数据框架可以与tensorflow一起使用。

Answer 1

它们是兼容的。在我的公司，我们使用TensorFlow在Hadoop上运行应用程序。为了清楚起见，将TensorFlow视为可以在python中使用的python库。一个例子是编写Map-Reduce代码，其中mapper分组/累积数据，在reducer中，您的学习代码使用TensorFlow存在于reducer中。