Snappy-Data与预构建现有的Spark群集



数据我将与apache hadoop配置集成了我的火花群集,然后我开始将火花群集成与Azure Data Lake Storage(也可以正常工作),以供参考i服用。此链接与Azure Data Lake一起使用,然后我需要将Spark与活泼的数据集成在一起,根据Snappy-Data文档,我们可以使用Snappy-Data软件包

./bin/spark-shell -conf spark.snappydata.store.store.sys-disk-dir = quickstartdatadir -conf spark.snappydata.store.store.log-file = quickstartdatadadir/quickstartaDir/quickstart.log-pake.log-packages-pake- packages -pakeSnappyData:0.7-S_2.11"

执行此操作后,我可以创建活泼的会话,但是我无法创建Snappy-Data表。我在hiveutill软件包然后org.apache.slf jar问题上面临此问题。如果有人知道如何解决该问题,请让我知道谢谢。

几个问题:

  1. 您在哪个火花版本?

  2. 您使用哪些命令来创建活泼的表?

我可以看到您没有连接到任何现有的SnappyData群集。您是否正在以本地模式进行测试?

相关内容

  • 没有找到相关文章

最新更新