如何禁止部分网页被收录,设置方法是什么
Admin 2022-11-23 群英技术资讯 915 次浏览
通常做网站的目标就是让搜索引擎收录,扩大推广面,但是如果你的网站涉及个人隐私或者机密性非公开的网页,而需要禁止搜索引擎收录抓取的话,那么禁止网站部分网页不被收录的方法有哪些?
1) noindex 标签
利用“noindex”禁止搜索引擎抓取页面,在不希望被收录的网页中使用以下指令:
<meta name="robots" content="noindex">
利用这个方法可以有效的解决不想要被收录页面。也是比较推荐的方式,可以解决大多数的问题,操作容易,就是需要单页面设定,如果页面数量多会有执行困难,需要后台开发单页面代码插入功能。
2) robots.txt 协议
robots.txt 文件位于网站根目录,能够向搜索引擎爬虫表明你不希望被收录的网站内容路径。在大多数的情况下都可以解决不想被收录的问题,不过 robots.txt 本身还是有一些限制的,比如它不是强制的指令,因此不是每个搜索引擎都会完全遵守 robots.txt 内的协议。
3) 服务器设定解决
直接在服务器上把目录或文件设定成密码存取,例如使用Apache网页服务器时,可以编辑 .htaccess 文件使目录受密码保护。如此一来就可以保证搜索引擎不会抓取,这是最根本且绝对有效的方式,不过这样设定也代表了用户无法查看网页,可能会不符合网站设计的目的,因此这个方法通常只适合应用在敏感的资料上
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
利于并提高网站收录的方法:1、不要采集过多的文章。2、要选择好的服务器。3、不要有非法的内容。4、尽量少用图片、JS调用、iframe。5、千万不要作弊。6、要做好内链和外链的建设。7、做好网站内部的布局。8、向各大搜索引擎提交网址等等。
随着互联网的不断发展,在这个互联网时代很多的企业都拥有着自己的品牌网站,品牌网站可以让客户更方便地了解公司的业务,树立企业良好的网络形象,并与客户保持畅通的沟通,品牌网站建设也是企业必不可少的
网站SEO优化要想效果好,排名搞的话是离不开收录的,但是收录要想好的话也离不开蜘蛛的抓取,只有蜘蛛经常来抓取我们的站点,才会有更好的收录,然后更好的获取排名,那么在网站SEO优化中做好哪些细节才能更好的吸引蜘蛛呢
网站是一个企业在互联网上的门面,在浩瀚的网络信息中,要让自己的网站更多人知道,进行网站推广是免不了的。门户网站一定是以内容为先,再辅以搜索引擎竟价等来提高流量,以下就介绍一些门户网站推广方法。
随着互联网的不断发展,很多的企业都做了自己公司的网站,而域名则是网站建设中的关键,是网站的门牌标识,是用户用来打开网站的一种途径,是网站建设中必不可少的
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008