Baiduspider的详细介绍

对,baiduspider就是我们SEOer口中经常说的百度蜘蛛,有些朋友可能发现baiduspider不止一个,是的。它有很多种,还有冒充的哦,所以我们在查看这些信息的时候不得不注意了,而今天我不仅要介绍百度的多种spider,还会说到如何查看冒充的baiduspider等等……

Baiduspider都有哪些(图)?

详细介绍8个Baiduspider
几种baiduspider的介绍

这里我们要说的就是最后一个百度spider,这个相信每一位seo朋友都很熟悉,因为这个是我们经常遇到的baiduspider,也就是网页搜索的spider,遇到其他的也不要慌张,因为上面我已经做了介绍,大家可以参照去自己的IIS日志里进行查看。

Baiduspider的真假判断

判断spider的真假我就不多太复杂的技术方法了,给大家提供一个工具进行辨别,这个SEO工具不仅简单方便,还大大节省了我们的时间,它就是Chinaz的IP地址查询工具(地址:http://ip.chinaz.com/),在你的IIS日志看到了Baiduspider,前面会有IP地址,这样进行查询,就简单方便多了!

如何禁止Baiduspider抓取我的网站?

如果你想禁止百度蜘蛛抓取你的网站的那请在robots协议注明,协议一般是这样:

User-agent: Baiduspider
Disallow: /

为了表示的更准确些我调用一张图片为大家进行描述:

用robots禁止baiduspider的方法
设置robots的说明

好了,关于百度蜘蛛的常见问题基本就这些,希望能够帮到你,如果你对关于百度spider有其他的问题欢迎你评论给我,我会第一时间给与回复!

刚刚就在我写文章的时候有朋友和我提到:“你的SEO博客最近怎么总是发布SEO技术基础的东西呢?”终于有人给我提意见了,太谢谢了,我明天会给一些我实践过的SEO技术,敬请期待!

除非注明:此文章为赵彦刚博客原创,欢迎转载!转载请注明本文地址,谢谢!

本文地址:https://zhaoyangang.cn/jichu/271.html

原创文章:《Baiduspider的详细介绍》,作者:赵彦刚。不经允许,请勿转载,如若转载,请注明出处:https://zhaoyangang.cn/?p=271

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
赵彦刚的头像赵彦刚
上一篇 2013 年 6 月 2 日
下一篇 2013 年 6 月 4 日

相关推荐

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注