标签: hadoop pyspark
我正在使用PySpark,但未安装Hadoop。我收到此警告Hadoop “Unable to load native-hadoop library for your platform” warning。
Hadoop “Unable to load native-hadoop library for your platform” warning
我是否需要安装Hadoop,如果已经安装了PySpark,该怎么办?
请注意,我是Hadoop生态系统的新手。
答案 0 :(得分:2)
这只是警告,您可以忽略它。 无需使用hadoop就可以使用Spark和pyspark。
您可以在此链接处循环浏览
https://community.hortonworks.com/questions/19897/apache-spark-error-unable-to-load-native-hadoop-li.html