Hi 你好,欢迎访问!登录

如何让百度蜘蛛不过度抓取不重要的目录?

2020-08-17°c
A+ A-
互联网上的东西几乎是以每秒为单位在变化,说不定今天还是这样的明天就换了,有些会对于我们在工作中造成一定的困惑,例如:如何让百度蜘蛛不过度抓取不重要的目录,虽然是一个问题,但是牵涉到了包含:标签、网站、方法、目录、过度、百度、百度蜘蛛、robots、nofollow、蜘蛛(爬虫)等众多因素,下面小编在搜外问答上为大家找到了2条关于如何让百度蜘蛛不过度抓取不重要的目录?的解决方案

如何让百度蜘蛛不过度抓取不重要的目录?问题及描述

目前我管理的这个网站有几个不是很重要的目录,但百度蜘蛛对于这些不重要的目录抓取次数过多,我想让蜘蛛更好的抓取另外的目录。
首先自己想到的方法是robots设置成Disallow
另一种方法是加nofollow标签。
请问大神们这两种哪种方法更好,或者还有其它更好的方法?

如何让百度蜘蛛不过度抓取不重要的目录?参考方案

一、不想被抓取直接robots就可以了。

二、如果不参与排名,干脆直接robots屏蔽。

如何让百度蜘蛛不过度抓取不重要的目录?,看到这里,您是否还有疑问?大家在优化网站时,所制定的每一个步骤肯定都是提前订好了达成的目标,所以优化的时候都是有的放矢,自然会条理清晰。所有遇到的问题最终会迎刃而解!欢迎点击以下栏目继续熟悉关于:标签、网站、方法、目录、过度、百度、百度蜘蛛、robots、nofollow、蜘蛛(爬虫)搜索引擎优化很累,是一个长时间坚持的进程,不要输给他人!

《如何让百度蜘蛛不过度抓取不重要的目录?》地址:https://www.laoyangseo.com/4189.html

提醒:本文来自网络,由本站整理,不代表老杨SEO网立场

版权声明:如无特别注明,转载请注明本文地址!

发表评论

选填

必填

必填

选填

请拖动滑块解锁
>>


  用户登录