如何手动打开100000个不同的网站



我需要从网站中点击100000个不同的url来抓取关于网站的不同数据。数据必须手动提取,因为每个网站的数据都不同,而且不遵循模式。

我的问题是,有没有任何程序或脚本可以粘贴100000 URL,它只需在选项卡/窗口中打开/预加载一些URL,这样当我关闭一个选项卡时,下一个URL就会在新选项卡中打开?通过这种方式,我在主网站选项卡中工作,这需要我10秒的时间来查看,然后我单击control+w并转到下一个url。

这样我就可以节省很多时间,而不是手动点击每个链接并等待加载。

您可以使用python网络抓取或RPA(如果您不了解基本的python(,通过逻辑步骤,用户可以自动完成n个任务。或者你也可以使用python的"pyautogui库"来点击可视化的东西。

竖起大拇指。如果得到帮助。。。

最新更新