OXO 大佬有话说 : 2020-1-2 16:54:48
头条的搜索到底在哪？蜘蛛一天来几千次
Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)
看了一下 nginx 的 access log，这破蜘蛛每天来2000多次，它家真的有做搜索？还是只是来推广它家的站长平台的？
OXO 大佬有话说 : 2020-1-2 17:19:35
bbcnn 大佬有话说 : 2020-1-2 16:59
把它封了~~~~
下了个头条app搜不到自己的站，于是把它封了 yc022t
bbcnn 大佬有话说 : 2020-1-2 16:59:27
把它封了~~~~ :lol:lol:lol:lol:lol
初夏科技 大佬有话说 : 2020-1-2 17:33:56
小米自带的搜索似乎被换成头条了
OXO 大佬有话说 : 2020-1-2 17:35:59
初夏科技 大佬有话说 : 2020-1-2 17:33
小米自带的搜索似乎被换成头条了
那还是把它放出来吧… 向流量低头…
squalll 大佬有话说 : 2020-1-2 17:39:12
nginx放到server里：
if ($http_user_agent ~* (toutiao))
{
return 503;
}
就可以把它屏蔽了