Robots生效的过程是怎样的,需要多长时间
Admin 2022-08-13 群英技术资讯 1101 次浏览
在实际应用中,我们有时候会遇到“Robots生效的过程是怎样的,需要多长时间”这样的问题,我们该怎样来处理呢?下文给大家介绍了解决方法,希望这篇“Robots生效的过程是怎样的,需要多长时间”文章能帮助大家解决问题。有时候我们建站前期忘记写robots.txt文件了,很多我们不想让搜索引擎收录的内容却被收录了,这个时候会发现好像过了很长时间我们不想让收录的页面还是处于被收录的状态,到底robots生效要多久呢?
百度lee曾在公开场合说过:不同的站点略有不同,但通常在几天内陆续生效。
其实我们可以假想下robots生效的过程:
1.蜘蛛发现robots文件修改并将信息传回
2.分析修改前后的robots文件
3.删除不允许被收录的索引数据
这个过程中肯能还会存在其他的一些步骤,然而由于每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同,最终导致的结果就是robots的生效时间不同。
通过以上分析我们可以得出robots的生效时间并不是一定的,如果你的robots更改后很久都没有生效的话,可以去投诉。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
在网站SEO优化中友情链接是非常重要的,也非常关键,友情链接不仅可以提升网站权重,同时也能提升网站关键词排名,让网站获取更多的展现次数,获取更多的浏览量,但是有些SEO优化人员做友情链接时会使用一些作弊手段去获取。
随着互联网的不断发展,网站SEO优化对于企业来说也是越来越重要了,很多的企业网站也都开始做了SEO优化,但是不是所有的网站都适合做网站SEO优化,什么样的网站更适合做SEO优化。
用户体验是一门超级学问。关于什么是用户体验的话题,可谓是百家争鸣。什么是用户体验、如何做好用户体验等问题一直以来也是争论不休。用户体验能通过网站解决和满足用户的需
网站快照回档的原因主要是服务器不稳定、网站内容质量差,重复度高、内容长时间没更新、经常修改首页title标题、网站改版导致以及友情链接被惩罚这六点,那么网站快照回档该如何处理呢?
网站排名究竟和什么有关系,企业们都比较关心自己网站的排名情况,这是网站知名度和点击率的直接反应,但是有一些网站的排名就怎么也上不去,到底原因是什么呢?
成为群英会员,开启智能安全云计算之旅
立即注册关注或联系群英网络
7x24小时售前:400-678-4567
7x24小时售后:0668-2555666
24小时QQ客服
群英微信公众号
CNNIC域名投诉举报处理平台
服务电话:010-58813000
服务邮箱:service@cnnic.cn
投诉与建议:0668-2555555
Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 ICP核准(ICP备案)粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008