一叶知秋123 大佬有话说 : 2019-12-22 20:59:29
刚发现一个厉害的网站,明白为什么有ip被loc封了
本帖最后由 一叶知秋123 于 2019-12-22 21:04 编辑
刚发现一个很厉害的网站,实时爬去loc的帖子和下面的评论。做成一个知更鸟一样主题的wp博客。收录还挺好的。用户头像自己变化,用户名字和论坛一样。
网站就不发了,大佬写爬虫也不容易了。看版主自己反爬了。如果这个大佬看见我的帖子,请教我怎么爬虫,挺想学的。
大佬牛逼
https://pan.hongtu.me/img/75490307519b5e9b908c5c446d96ea91.jpg
开心小站长 大佬有话说 : 2019-12-22 21:24:31
既然你诚心诚意的问了,那么我就勉为其难回答一下。
截图里那个站,不是我的站。
顺便说一下,我的站点是www.kxxzz.com
有兴趣的朋友,可以自己看一下,对比一下。
一位不知名网友 大佬有话说 : 2019-12-22 21:00:34
爬虫学的好,牢里去的早!
米是域名是米 大佬有话说 : 2019-12-22 21:01:40
那个开心小站长就是爬的,好像用的ID权限还很高。感觉至少是版主级的。:lol
一般ID爬下试试,很快封你IP了。
VPSMarket 大佬有话说 : 2019-12-22 21:00:39
就不用藏着掖着了loc的人都知道你说的是 开心小站长
yrj 大佬有话说 : 2019-12-22 21:02:49
送你四个字:自学成才
woniu 大佬有话说 : 2019-12-22 21:05:28
本帖最后由 woniu 于 2019-12-22 21:06 编辑
这个抓这些数据又不难,这方面讲不算厉害
我签名聊天室就是抓论坛的新帖,方便大家忙的时候偶尔看看论坛大概都有些啥内容!
另外私以为论坛不会因为这个封ip的,大家心里都有数,不会特别频繁的抓!比如一秒好几次那种!
怎么说呢,设置一分钟去抓一次数据,就跟你手动刷新一次对论坛产生的影响一样的,
一叶知秋123 大佬有话说 : 2019-12-22 21:05:32
VPSMarket 大佬有话说 : 2019-12-22 21:00
就不用藏着掖着了loc的人都知道你说的是 开心小站长
我之前不知道是他。也是刚才发现的。
夜不眠 大佬有话说 : 2019-12-22 21:09:43
小开心呢?
robot 大佬有话说 : 2019-12-22 21:10:27
我还知道一个用xiunoBBS做的站,那个更完美
一叶知秋123 大佬有话说 : 2019-12-22 21:11:21
woniu 大佬有话说 : 2019-12-22 21:05
这个抓这些数据又不难,这方面讲不算厉害
我签名聊天室就是抓论坛的新帖,方便大家忙的时候偶尔看看论坛 …
论坛大佬真多,你这个是2分钟爬一次么。用的什么爬虫啊(~_~;)