怪人 大佬有话说 :
这样的是不是度娘假爬虫？
27.209.178.9 – – "GET /data/cache/index.htm HTTP/1.1" 404 479 "https://www.baidu.com/" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.htmlx09"
好多页面都是404 是不是被扫了
Antony 大佬有话说 :
http://www.baidu.com/search/spider.htmlx09"我猜是:lol
woc 大佬有话说 :
应该不是度娘，可以查询下ip看看
英梨梨 大佬有话说 :
百度一下爬虫的ip不就知道了，蜘蛛的ip都是公开的
dyxg.cc小哥 大佬有话说 :
百度一下爬虫的ip:lol
ILL 大佬有话说 :
nslookup 查询不是
多多打折 大佬有话说 :
爬虫个毛线