我正在使用pyspark,并且没有这样安装。我会收到此警告Hadoop “Unable to load native-hadoop library for your platform” warning
。
我需要安装hadoop,如果是的话,我该如何进行系统安装在系统上的Pyspark?
请注意,我是Hadoop生态系统的新手。
这只是一个警告,您可以忽略它。火花和Pyspark可以不用Hadoop使用。
您可以在此链接上进行循环:
https://community.hortonworks.com/questions/19897/apache-spark-error-eror-unap-to-load-native-native-native-hadoop-li.html