加入收藏 | 设为首页 | 会员中心 | 我要投稿 云计算网_泰州站长网 (http://www.0523zz.com/)- 视觉智能、AI应用、CDN、行业物联网、智能数字人!
当前位置: 首页 > 运营中心 > 搜索优化 > 正文

如何拒绝搜索引擎收录网站?

发布时间:2022-04-15 19:29:51 所属栏目:搜索优化 来源:互联网
导读:一个新的网站建好之后,只要搜索引擎蜘蛛抓取到的、网站内容不是很差劲那么搜索引擎就很有可能收录我们的网站,如果因为某种原因不想让搜索引擎收录网站,要如何操作? 事实上拒绝搜索引擎收录网站可以利用robots.txt(什么是robots.txt)屏蔽搜索引擎蜘蛛
       一个新的网站建好之后,只要搜索引擎蜘蛛抓取到的、网站内容不是很差劲那么搜索引擎就很有可能收录我们的网站,如果因为某种原因不想让搜索引擎收录网站,要如何操作?
 
  事实上拒绝搜索引擎收录网站可以利用robots.txt(什么是robots.txt)屏蔽搜索引擎蜘蛛,仅供参考
 
  Robots是搜索引擎都要遵守的国际互联网协议,所以可以通过robots拒绝所有搜索引擎的收录,代码如下:
 
  User-agent:*
 
  Disallow:/
 
  上面两行代码就是说禁止所有搜索引擎(User-agent:*)抓取所有内容(Disallow:/)。
 
  当然你也可以使用以下代码禁止百度收录:(如果想拒绝其他搜索引擎,则将user-agent:后面的内容替换成其他搜索引擎蜘蛛的名称,各大搜索引擎蜘蛛的名称可参照:
 
  http://seo.aizhan.com/term/124.html )
 
  User-agent:baiduspider
 
  Disallow:/
 
  如果你不想让搜索引擎建立快照可以这样:
 
  将这段代码加入head中去。
 
  如下想让搜索引擎建立索引而禁止跟踪网页上的链接可以这样:
 
  所以我们要清楚是禁止搜索引擎收录网站还是拒绝搜索引擎建立快照,然后选择相应的方法。

(编辑:云计算网_泰州站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读