hateme99 大佬有话说 :
你们看看这是百度吗 网站被抓瘫痪两天了
本帖最后由 hateme99 于 2020-12-7 18:24 编辑
一秒钟300多次一直这么抓,以前不会这样的,但是以前收录比现在好。三台毒妇负载的 都扛不住。看看这是真百度蜘蛛不,我查过来他还真的是。
两天了,被抓的老是502错误,pv少了上百万了。。。
Madlifer 大佬有话说 :
是不是ip来源伪造? 不太懂,好像有这个说法
论坛大师 大佬有话说 :
我在服务器拦截所有百度蜘蛛https://cdn.jsdelivr.net/gh/hishis/forum-master/public/images/patch.gif
亿硕云 大佬有话说 :
被打了
huaheshang 大佬有话说 :
我前几天也被抓瘫痪了
hateme99 大佬有话说 :
huaheshang 大佬有话说 : 2020-12-7 18:16
我前几天也被抓瘫痪了
那咋办 靠它吃饭的。。。
全球主机云 大佬有话说 :
不懂这个
hateme99 大佬有话说 :
https://s3.ax1x.com/2020/12/07/DxWZ79.jpg
ah520 大佬有话说 :
本帖最后由 ah520 于 2020-12-7 18:22 编辑
确认过眼神 遇见对的人 是百度的IP我遇到过1h2g学生机 百度每天爬几千 我的解决办法 把访问和百度爬虫从DNS区分开 外国IP直接解析127.0.0.1
省的扫爆都每天扯淡
看了图116段咋没来,这是阳泉机房都
卖机器的小女孩 大佬有话说 :
你需要一台铂金CPU的服务器,可以解决这个问题,哈哈