我有一项任务要阻止谷歌的爬网程序对一些内容进行索引。我读过,如果我有这种html:
<!--googleoff: index-->
<!--googleon: index-->
然后googleoff告诉谷歌的爬虫不要索引内容,而googleon告诉谷歌的爬虫索引内容。到目前为止,一切都很好。因此,谷歌爬虫不应该索引的内容应该在这些评论之间。我已经使用googleoff和googleon功能将所有应该从谷歌索引中排除的内容打包到这些评论中,并且所有要从谷歌索引排除的内容都正确地打包在本地和分期回购中的这些评论中。然而,我没有在实时版本的HTML中看到包含googleoff和googleon指令的评论。这可能是什么原因造成的?为什么除了实时版本外,我的所有转发中都有谷歌索引说明?我认为这可能是设置的问题,但我不确定我是对的,也不确定我应该从哪里寻找问题的根源?
这是服务器设置的问题,已经解决。过一段时间(当重新索引完成时),不需要的内容应该从谷歌索引中过滤掉。