Robots生效的过程是怎样的,需要多长时间
Admin 2022-08-13 群英技术资讯 990 次浏览
在实际应用中,我们有时候会遇到“Robots生效的过程是怎样的,需要多长时间”这样的问题,我们该怎样来处理呢?下文给大家介绍了解决方法,希望这篇“Robots生效的过程是怎样的,需要多长时间”文章能帮助大家解决问题。有时候我们建站前期忘记写robots.txt文件了,很多我们不想让搜索引擎收录的内容却被收录了,这个时候会发现好像过了很长时间我们不想让收录的页面还是处于被收录的状态,到底robots生效要多久呢?
百度lee曾在公开场合说过:不同的站点略有不同,但通常在几天内陆续生效。
其实我们可以假想下robots生效的过程:
1.蜘蛛发现robots文件修改并将信息传回
2.分析修改前后的robots文件
3.删除不允许被收录的索引数据
这个过程中肯能还会存在其他的一些步骤,然而由于每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同,最终导致的结果就是robots的生效时间不同。
通过以上分析我们可以得出robots的生效时间并不是一定的,如果你的robots更改后很久都没有生效的话,可以去投诉。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
TAG页面是什么样的,和分类页面是相同吗?TAG标签页面在网站SEO优化中经常会用到,TAG标签用得好的话SEO效果不错,但是如果没有合理的使用TAG标签,也可能会导致网站出现负面的影响。
在网站SEO优化中搜索引擎友好度是非常关键的,搜索引擎对网站的友好度越高,网站的SEO优化效果也会越好,搜索引擎对网站也会越青睐,所以在网站SEO优化中一定要做好搜索引擎友好度,避免搜索引擎友好度低,下面南昌网络公司百恒科技小编来跟大家聊一下降低搜索引擎友好度的因素有哪些。
网站首页快照一直不更新怎么办?网站首页快照不更新的原因有很多,本文就给大家带来快照一直不更新的原因分析,感兴趣的朋友们可以过来看看
互联网+时代下,各行各业都想在在互联网中占据市场,目前网站优化成为时代的潮流,很多站长,在对网站进行优化时,稍不注意就会造成网站优化过度,这也是各位最头疼的事情,网站优化能急于求成,需要有足够的耐心与信心来应对。
SEO优化是网站的日常工作,通过SEO优化提升网站权重排名,获得更多浏览,让网站运营更好。那么,SEO优化有什么技巧呢?接下来小编就给大家带来SEO优化技巧整合,一起来看看吧!
成为群英会员,开启智能安全云计算之旅
立即注册关注或联系群英网络
7x24小时售前:400-678-4567
7x24小时售后:0668-2555666
24小时QQ客服
群英微信公众号
CNNIC域名投诉举报处理平台
服务电话:010-58813000
服务邮箱:service@cnnic.cn
投诉与建议:0668-2555555
Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 ICP核准(ICP备案)粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008