解析亚马逊产品页面会返回胡言乱语

Question

我一直在使用java来解析一些亚马逊产品页面，直到几天前，这一直工作正常。然而，最近我开始注意到亚马逊正在返回胡言乱语。

示例（使用 curl）：卷曲 https://www.amazon.in/dp/B00TYK2AZK/

谁能帮我提供一些指示？亚马逊最近开始使用任何新的编码吗？

干杯罗希特什

Answer 1

我使用了java的URLConnection，大约4个请求中有5个很好。有效的 HTML。每隔一段时间，它就会返回 503 错误代码的 giberrish 原因，并使用错误流。您是否检查过 HTTP 响应代码？