Python urlopen并不适用于所有网站



嗨,我有一个工作代码,它完美地打开了我告诉他的大多数网站。但出于某种原因,这似乎不适用于某些特定的网站。我甚至没有得到一个错误,我的代码只是永远运行,没有任何程序。我尝试打开的网站都是https网站,包括那些不起作用的网站。但我可以手动打开网站,它运行得很好,所以它不像网站坏了或其他什么。有人知道为什么吗?从urlib.request导入urlopen作为uReq

url = r'https://www.mouser.de/'
url_text = uReq(url)
html_text = url_text.read()

您可能需要像实际浏览器一样使用User-Agent。下面的代码是如何使用User-Agent的一个示例。

import urllib.request
req = urllib.request.Request('http://www.example.com/')
req.add_header('Referer', 'http://www.python.org/')
# Customize the default User-Agent header value:
req.add_header('User-Agent', 'urllib-example/0.1 (Contact: . . .)')
r = urllib.request.urlopen(req)

相关内容

  • 没有找到相关文章

最新更新