apache spark -如何获取已经在内存中持久化的RDD的引用

Question

我不小心覆盖了内存中对RDD的原始引用，我如何将其取回或设置另一个引用?

Answer 1

您可以调用sc.getPersistentRDDs，它返回所有已标记为持久(使用.cache())的rdd。