属性错误："RDD"对象没有 Spark 数据砖中文本文件的属性"显示"

Question

from pyspark import SparkContext, SparkConf, sql
from pyspark.sql import Row

text_file = sc.textFile('/FileStore/tables/data.txt').show()

Answer 1

sc.textFile不返回数据帧

RDD没有显示((

您可以收集((或取(10(返回一个可以打印的列表

Answer 2

或者，使用spark.read.text('/FileStore/tables/data.txt').show()，其中spark.read.text返回可以是.show()编辑的数据帧。