Websense 抓取 /ScriptResource.axd 时出现"This is an invalid script resource request."错误

Question

我经常在我的网站上得到以下错误:

"这是无效的脚本资源请求。"

爬行器试图爬行/ScriptResource时发生错误。axd或/WebResource.axd.

在robots.txt中禁用这些文件可以正常工作(正如thelukemmccarthy在这里建议的那样)。

user - agent: *
不允许:/网站/ScriptResource.axd
不允许:/网站/WebResource.axd

但是，对于像Websense这样(粗鲁地)忽略robots.txt的服务来说，这不起作用。

你知道如何阻止Websense抓取这些文件吗?

网站是使用ASP开发的。. NET和HTML5，并托管在IIS7上。

提前感谢!

Answer 1

我们得到了类似的东西。我唯一的想法是在IIS中打开IP地址限制，然后阻止他们的IP。(我没有亲自做过，所以这只是一个想法。)