高端响应式模板免费下载

响应式网页设计、开放源代码、永久使用、不限域名、不限使用次数

如何正确识别百度蜘蛛?就做这两件事

许多seo从业者经常问他们第一次接触这个行业是什么时候& mdash& mdash什么是百度蜘蛛?我们可以理解,百度蜘蛛是用来捕捉网站链接的ip。边肖经常听到百度蜘蛛来的太频繁,服务器会被抓住。如果你不能识别百度蜘蛛,你怎么知道它被抓住了?也有百度蜘蛛不来的情况,许多网站想得到百度蜘蛛的ip部分,想把ip添加到白名单,但不能识别百度ip。

我们如何识别正确的百度蜘蛛?拜托,只要做两件事,就能正确识别百度蜘蛛

首先,检查ua。如果ua不正确,你可以直接判断没有被百度搜索到的蜘蛛。目前,普遍获得已公开宣布如下:

移动ua:Mozilla/5.0(Linux;u;Android 4 . 2 . 2;zh-cn;)applewebkit/534.46 (khtml,likegecko)版本/5.1 mobile safari/10600.6.3(兼容;baiduspider/2.0;+)

pc ua:mozilla/5.0(兼容;baiduspider/2.0;+)

添加渲染ua:

移动普遍获得:普遍获得:Mozilla/5.0(iphone;CPU iphone OS 9 _ 1 like MAC OS x)apple WebKit/601 . 1 . 46(khtml,like gecko)版本/9.0 mobile/13b143 safari/601.1(兼容;baiduspider-render/2.0;+)

pc ua:mozilla/5.0(兼容;baiduspider-render/2.0;+)

第二,反向检查ip

站长可以通过域名反查ip来判断蜘蛛是否来自百度搜索引擎。根据不同的平台,验证方法也不同。例如,linux/windows/os下的验证方法如下:

(1)在linux平台下,您可以使用主机ip命令来解解释ip,以确定它是否被baiduspider捕获。Baiduspider的主机名以*.baidu.com或*.baidu.jp命名。

(2)在windows平台或ibm os/2平台下,您可以使用nslookup ip命令来反转ip,以确定它是否被baiduspider捕获。打开命令处理器,输入nslookup xxx.xxx.xxx.xxx(ip地址)来解析ip,以确定它是否来自baiduspider的捕获。baiduspider的主机名以*.baidu.com或*.baidu.jp格式命名,非*.baidu.com或*.baidu.jp是冒名顶替。

(3)在mac os平台下,您可以使用dig命令来解解释ip,以确定它是否被baiduspider捕获。打开命令处理器,输入dig xxx.xxx.xxx.xxx(ip地址)来解析ip,以确定它是否来自baiduspider的捕获。baiduspider的主机名以* Baidu . com或* .baidu.jp格式命名,而不是* Baidu . com或*。baidu.jp

猜你喜欢