如何在SQL模式下使用缓存或持续使用显式存储级别(不是数据集API)

Question

如何在SPARK SQL中以SQL模式使用PERSIST与存储级别使用？可以在Spark SQL中使用CACHE。

Answer 1

在SQL模式下，使用spark-sql或spark.sql执行，仅CACHE语句如Spark SQL的Antlr Grammar中所述可用：

缓存懒惰？桌面识别仪（as？query）？

PERSIST或具有持久存储级别的CACHE在语法中不出现，这是Spark SQL Parser允许的确定列表。