将 JSON 文件从 GitHub 导入 Python 中.获取错误:JSONDecode错误:预期值:第 7 行第 1

Question

这是我的代码：

import re, json, requests
url = 'https://github.com/caminofinancial/data-eng-take-home/blob/master/prequalresult.json'
resp = requests.get(url)
resp_parsed = re.sub(r'^jsonpd+(|)s+$', '', resp.text)
data = json.loads(resp_parsed)
print(data)

我得到了错误： JSONDecodeError：预期值：第 7 行第 1 列(字符 6(。 有人可以检查并解决问题吗？

Answer 1

当您需要直接访问文件时，请使用原始 GitHub URL。您可以通过单击页面上的"原始"按钮来获取它。

url = 'https://raw.githubusercontent.com/caminofinancial/data-eng-take-home/master/prequalresult.json'
resp = requests.get(url)
data = json.loads(resp.text)
print(data)

Answer 2

from pyspark import SparkFiles
zip_url = "https://raw.githubusercontent.com/spark-examples/spark-scala-examples/master/src/main/resources/zipcodes.json"
spark.sparkContext.addFile(zip_url)
zip_df = spark.read.json("file://" +SparkFiles.get("zipcodes.json"))

在原始 #click，然后复制网址