在同一程序中同时运行Tensorflow和Pyspark

时间:2018-11-16 05:25:40

标签: apache-spark tensorflow pyspark

当我使用tensorflow和spark-submit sample.py一起运行pyspark程序时,它说没有名为tensorflow的模块,但是当我运行激活tensorflow并使用python sample.py运行时说没有名为pyspark的模块。

import tensorflow as tf

import pyspark # only run after findspark.init()

from pyspark.sql import SparkSession

spark = SparkSession.builder.getOrCreate()

df = spark.sql('''select 'spark' as hello ''')

df.show()

0 个答案:

没有答案