通过二进制文件生成许多 curl 命令

Question

>我有一个名为image_info_binary.data的二进制数据文件，我想根据该文件行中的信息下载许多FITS图像。如果我使用pickle模块将此文件加载到 Python 中并打印单个元素，我会得到这个：

import pickle
with open('image_info_binary', 'rb') as f:
img_info = pickle.load(f)
print(img_info[0])

输出此字符串：

Object #: 2000073.0
Counter #: 2
Scan ID: 0245
Frame #: 167
Band #: 3
Image Link: http://....fits... #long url

大约有 50,000 个这样的元素，每个元素都有不同的对象 #、计数器 #、适合图像 URL 等。我想浏览这些元素中的每一个，并将每个FITS图像下载为：{int(object number)}_{three digit counter}_w{band}.fits。

例如，我希望2000073_002_w3.fits上面示例的下载图像。

最好的方法是什么？我知道如果我只是下载一个图像，我可以简单地执行curl -o 2000073_002_w3.fits "url"，例如。我不确定生成许多这些 curl 语句是否是执行此操作的最佳方法。如果我可以在终端中运行命令，那就太好了，但我也可以使用 Python(但我觉得子进程可能会很慢(。谢谢！

Answer 1

您可以通过迭代对象并将其拆分为多个部分来生成 URL。

for img in img_info:
attr = dict()
for line in img.split('n'):
key, value = line.split(': ', 1)
attr[key] = value
filename = '{0}_{1:03}_w{2}.fits'.format(
attr['Object #'], attr['Counter #'], attr['Band #'])
url = attr['Image Link']

然后，您可以打印这些内容，或者将它们传递给subprocess.run(['curl', '-o', filename, url], check=True)或在 Python 中本地下载它们。