我在我的电脑(Windows 10(上运行pyspark,但我无法导入HiveContext:
from pyspark.sql import HiveContext
---------------------------------------------------------------------------
ImportError Traceback (most recent call last)
<ipython-input-25-e3ae767de910> in <module>
----> 1 from pyspark.sql import HiveContext
ImportError: cannot import name 'HiveContext' from 'pyspark.sql' (C:sparkspark-3.0.0-preview-bin-hadoop2.7pythonpysparksql__init__.py)
我应该如何继续解决它?
你使用的是 Spark 3.0 的预览版。根据发行说明,您应该使用SparkSession.builder.enableHiveSupport()
.
在 Spark 3.0 中,已弃用的 HiveContext 类已被删除。请改用 SparkSession.builder.enableHiveSupport((。