爬虫遇到 IP 的问题,住宅 IP 可以爬取到想要的结果,但是代理或服务器 IP 就会被 302 如何解决?
資深大佬 : respect11 3
代码确定没问题
在自己电脑上可以爬取到指定内容,但是在服务器上运行就会被 302.
找了多家的代理 IP 都会被拦截,有什么好的解决办法吗?
有想过让自己的电脑当代理服务器…但是没有一个好的实现思路
大佬有話說 (6)
代码确定没问题
在自己电脑上可以爬取到指定内容,但是在服务器上运行就会被 302.
找了多家的代理 IP 都会被拦截,有什么好的解决办法吗?
有想过让自己的电脑当代理服务器…但是没有一个好的实现思路
另外自家电脑当代理,为啥不直接用自家电脑爬算了。
对方服务器既然做了各大机房、甚至各种代理 ip 的封禁,那么说明对于反爬虫的目的极其强烈,建议慎重,甚至放弃。
如果个人确实有需要,那么可以用笔记本下的 4G 网络热点,不断重启热点网络连接方式来变更下当前出口 ip
目前有其他开放的类似平台是可以获取到的