baiduspider-mobile-gate真的是百度的蜘蛛么?
08年10月遇到baiduspider-mobile-gate的时候,小小菜鸟同学写了http://www.zhaozhihui.com.cn/tag/baiduspider/这篇文章。小小菜鸟曾经认其是百度的蜘蛛。但是今天再次查看log日志,非常奇怪这个的发现似乎不是那么回事。这是一个非常奇怪的spider。且听我于诸君慢慢道来。
首先看一下Baiduspider的日志:
61.135.168.54 – - [23/Dec/2008:00:00:00 +0800] “GET / HTTP/1.1″ 200 15313 “-” “Baiduspider+(+http://www.baidu.com/search/spider.htm)
其次我们再看一下baiduspider-mobile-gate
61.135.166.31 – - [23/Dec/2008:00:01:37 +0800] “GET /product/8366877.html HTTP/1.1″ 200 14701 “-” “baiduspider-mobile-gate”
虽然二者属同一IP段,IP138查询的结果是:
您查询的IP:61.135.166.31
本站主数据:北京市 网通
参考数据一:北京市 网通
参考数据二:北京市 网通ADSL 全文阅读 »