zqm840527 大佬有话说 :
套了百度云加速后,如何让百度蜘蛛不爬源站?
套了百度云加速后,如何让百度蜘蛛不爬源站?
以前百度云加速好像有个“自动让搜索引擎爬虫回源”的选项,现在找了一下,没有这个选项了。
现在在站长工具里模拟抓取,抓的都是源站地址,有没有什么办法让蜘蛛爬百度的cdn,而不爬源站?
特别是百度蜘蛛,当然可以让所有蜘蛛都爬cdn也可以。
各位大佬指点一下?谢谢
度百 大佬有话说 :
百度蜘蛛自动识别自家cdn然后回源的吧估计
hyd 大佬有话说 :
dns解析有一个搜索引擎 到源站https://cdn.jsdelivr.net/gh/hishis/forum-master/public/images/patch.gif
zqm840527 大佬有话说 :
hyd 大佬有话说 : 2021-7-3 17:57
dns解析有一个搜索引擎 到源站
大佬我请教的是怎样让蜘蛛不到源站…yc022t