如何禁止百度收录某个页面的内容?

在网站页面中,总有那么些页面是不想让搜索引擎抓取收录的,对于这类页面我们应该怎么设置呢?其实方法很简单,本文笔者就跟大家说说如何禁止百度收录某个页面。

要禁止搜索引擎抓取某个页面,通常来说我们都是通过robots文件来设置,下面我们就来举个例子,加以说明。

比如本站有个页面http://www.tangmengyun.com/abc.html,但是笔者不想让这个页面被所以搜索引擎抓取,那么应该如何禁止呢?我们可以用以下代码:

User-agent: *

Disallow: /abc.html

其中User-agent: *就是指针对所有搜索引擎,而Disallow: 就是禁止抓取的意思,这么需要知道Disallow: 后面的斜杠,是从域名那里开始的。很多人不知道对此不是很明白,我们可以简单的理解:在这个斜杠前加上网站域名,斜杠后就是页面的相对地址,大家参考下笔者提到的案例,应该很好理解。

如何禁止百度收录某个页面的内容?

但是,虽然我们通过robots文件能够禁止百度收录某个页面,但是百度等搜索引擎并不会严格遵守约定,如果有外链或者是内链到达页面的话,搜索引擎还是会收录的。所以,为了保险起见,笔者建议大家结合nofollow标签一起来使用,一方面告诉搜索引擎不要收录该页面,同时在网站其他页面告诉搜索引擎蜘蛛不要去追踪该链接。

另外禁止百度收录某个页面还可以在头部文件里设置,但是这种做法有明显的局限性,所以笔者不建议大家去用,搞不好会出现很多不必要的麻烦。

关于如何禁止百度收录某个页面的问题,就给大家讲解到这里。总结来说,想要禁止百度收录某个页面是很简单的,通过robots就可以很方便的搞定,当然如果能够结合nofollow标签一起使用,会更加保险。

在线解决和检测域名被墙、DNS污染,客服QQ:349591234 TG:@yumingidc。发布者:admin,转转请注明出处:https://www.qingidc.com/5833.html

(0)
上一篇 2023年11月12日 上午9:40
下一篇 2023年11月12日 上午9:41

相关推荐

  • 如何看网站是否被降权?

    网站被降权有很明显的表现,通常就是关键词排名直线下降,另外有些严重的网站可能会直接大幅度减少收录。在判断网站是否被降权的时候,还要考虑到网站是否是新站,新站在考核期也会出现排名消失的情况。 比如某个站点已经有2年的建站时间,关键词词库2000+,突然有一天词库数量急剧减少,昨天还是2000+,今天就只有1500+,明天就是1000+,直至剩下不到100个。这…

    2023年10月4日
    00
  • 2023年做什么网站最赚钱?

    2023年做什么网站最赚钱,要正规的项目,有想法的朋友可以一起交流一下! 回答1:你可以试试,出国留学,出国签证,出国旅游。这些是我认为的,毕竟开放了。 回答2:肯定是做行业站。第一金融类,联盟单价高,挂商家广告也能高价。第二下载类,很多软件有联盟分成,别人下载你就有钱,挂APP广告价格很高。 回答3:英语可以的话,还是做个英文行业站赚钱的很!! 回答4:独…

    2023年8月9日
    00
  • 百度蜘蛛只抓取首页是什么原因?

    通常而言,对于新站百度蜘蛛会更多的抓取首页,比较少去抓取内页;另外就是如果网站本身的页面少,并且长时间不更新,这样情况下蜘蛛也会集中抓取首页。 目前来看,这种情况多见于新站,尤其是2个月以内的新站,百度蜘蛛抓取内页的频次会很少。但如果我们提交网站地图的话,当天的抓取频次也会比较多,但也不能天天都提交,百度搜索不会重复抓取的。所以,总体上新站的百度搜索抓取频次…

    2023年10月27日
    00
  • 蜘蛛抓取页面没有记录是什么原因?

    只要日志功能是齐全的,任何蜘蛛抓取页面都有记录,不然就是你的日志功能受到限制,或者是没有发现! 网站日志的功能是强大的,它不仅能够记录蜘蛛抓取的数据,所有普通用户浏览页面的记录日志里都有数据。所以,我们说数据分析的时候都会提到要去看网站日志。 那为什么有朋友提到蜘蛛抓取了页面却没有记录呢?原因之一是日志功能不全,有些服务商为了减轻服务器压力,就对网站日志做了…

    2023年9月23日
    00
  • 文章url用id好还是用英文或者拼音好一点?

    就百度搜索来说,URL直接用文章ID就行,当然如果你能单个用户英文或者拼音来设置,会更好! 根据沐风SEO的观察,百度搜索对于文章页面的URL还是比较看重的,会更喜欢那些直观的设置。相对来说,合理的英文或者拼音设置比纯ID的URL更好!但是,URL的设置只是影响排名很小的因素,不能起决定性作用。 虽然英文或拼音的URL会更好,但我们在实际操作中需要考虑到实用…

    2023年9月17日
    00
  • 网站老被k首页,k了两次,是不是没希望了?

    我一个2年纯手工打字更新的网站,今年伪原创软件,采集更新了100来篇文章以后, 首页就被k了,在百度站长平台反馈以后,又给我收录了,我现在又手工打字更新了2个月,现在发现首页又被k了。 之前这个网站每天还有几十ip,现在这一阵子,百度一个ip都不给了,这个情况是不是要放弃这个网站了。 回答1:有可能是采集导致的吧。 回答2:再反馈一下看看是什么原因。 回答3…

    2023年12月1日
    00

发表回复

登录后才能评论