标题:如何判断Baiduspider的真假? 出处:北京SEO_北京SEO培训 - 【元创SEO】 时间:Thu, 01 Dec 2011 14:56:14 +0000 作者:元创 地址:http://www.yuan-chuang.cc/read.php/876.htm 内容: 如何判断Baiduspider的真假? 目前中文互联网上有少量spider冒充Baiduspider抓取网页,周六madcon会上,发现很多同学不知道如何判断Baiduspider的真假,再次说明一下: 中文互联网上,Baiduspider ip的hostname以 *.baidu.com的格式命名,非 *.baidu.com即为冒充,建议您使用DNS反查方式来确定抓取来源的ip是否属于百度。 例如,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。 $ host 123.125.66.120 120.66.125.123.in-addr.arpa domain name pointer baiduspider-123-125-66-120.crawl.baidu.com. 在windows平台下,可以用nslookup命令反解ip来判断是否来自Baiduspider的抓取。 点击“开始”-“运行”-“cmd”-“输入nslookup IP地址”-“回车” C:\Documents and Settings\wangtao>nslookup 123.125.66.120 Name: baiduspider-123-125-66-120.crawl.baidu.com Address: 123.125.66.120 详请参考: http://www.baidu.com/search/spider_chinese.html PS:Baiduspider绝对不会以匿名的方式抓取网页。 备注:本文来自百度站长俱乐部 Generated by Bo-blog 2.1.1 Release