百度lee曾在地下场所说过:不同的站点略有不同,但通常在几天内陆续失效。 其实咱们能够假想下robots失效的进程:
1.蜘蛛发现robots文件修正并将信息传回
2.剖析修正前后的robots文件
3.删除不容许被收录的索引数据 这个进程中肯能还会存在其余的一些步骤,但是因为每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而招致蜘蛛发现robots更改的工夫延时或许被解决的优先性不同,最终招致的后果就是robots的失效工夫不同。
织梦模板网结语:经过以上剖析咱们能够得出robots的失效工夫并不是肯定的,假如你的robots更改后很久都没有失效的话,那么可能就是robots设置谬误了
郑重声明:
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长(anda@andawork.com)!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 如有链接无法下载、失效或广告,请联系管理员处理!
5. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
6. 如遇到加密压缩包,请使用WINRAR解压,如遇到无法解压的请联系管理员!
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长(anda@andawork.com)!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 如有链接无法下载、失效或广告,请联系管理员处理!
5. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
6. 如遇到加密压缩包,请使用WINRAR解压,如遇到无法解压的请联系管理员!