通常情况下,模拟百度蜘蛛是比较少见的,但是当我们分享百度蜘蛛必须要在一个前提下,那就是必须是真的百度蜘蛛。所以在日志中获得一个IP后首先就是排除假蜘蛛这种情况。下面说一下通过nslookup反解IP来实现辨别真假蜘蛛
nslookup查询
运行——CMD——输入nslookup IP(例如nslookup 111.206.221.22)然后按一下enter键
这个时候,就能查询到IP的hostname,如果是以 *.baidu.com的格式命名,则为百度蜘蛛,如果不是。表示为伪装的假蜘蛛
其他操作系统查询
linux
在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
MAC
在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
相关通知:
如发现本站有侵权违规的相关内容请致信E-mail: @qq.com