轮询API端点 - 当没有返回JSON时,我将如何重试



我正在使用一个while循环对API端点进行轮询,该循环检查JSON上的.get()方法是否返回无:

    while requests.get(render_execution_url, headers=headers).json().get('finalized_at') is None:
        status = requests.get(render_execution_url, headers=headers).json().get('status')
        status_detail = requests.get(render_execution_url, headers=headers).json().get('status_detail')
        logger.info("status for {} is {}.  detailed status is {}".format(render_execution_url, status, status_detail))

这里的想法是,我们继续对端点进行轮询,直到填充"最终确定"值。

不幸的是,当JSON根本不存在时,我们会定期出现失败:

 File "/usr/lib/python2.7/json/__init__.py", line 339, in loads
   return _default_decoder.decode(s)
 File "/usr/lib/python2.7/json/decoder.py", line 364, in decode
   obj, end = self.raw_decode(s, idx=_w(s, 0).end())
 File "/usr/lib/python2.7/json/decoder.py", line 382, in raw_decode
   raise ValueError("No JSON object could be decoded")
ValueError: No JSON object could be decoded

我尝试在方法上使用重试装饰器(Decorator语法请参见下文),但是当我击中此失败时,它似乎并没有执行重试。

@retry(stop_max_attempt_number=7, wait_fixed=10000)

是否有一种优美的,pythonic的方式来处理JSON不存在的情况(即,在一定时间内重试)?

您的代码太密集,无法轻松分离您需要处理的不同条件,因此您的错误报告并不能完全清楚地表明'何时JSON不存在所有"表示服务器是返回404(找不到页面),还是响应数据为空?

这是一个重写,无法访问每个访问JSON的URL。它可能不完全适合您的需求,但应该给您开始。

while True:
    resp = requests.get(render_execution_url, headers=headers)
    # I assume response status is always 200 or 204 -
    # Really easy to detect a 404 here if that happens.
    if not resp.data:
        time.sleep(WAIT_TIME)
        continue
    rj = resp.json()
    if rj.get('finalized_at') is not None:
        break
    status = rj.get('status')
    status_detail = rj.get('status_detail')
    logger.info("status for {} is {}.  detailed status is {}"
                .format(render_execution_url, status, status_detail))
    time.sleep(WAIT_TIME)

最新更新