全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1584|回复: 7

限制单ip每分钟请求数,会不会影响搜索引擎收录

[复制链接]
发表于 2018-5-20 19:22:01 来自手机 | 显示全部楼层 |阅读模式
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2018-5-20 19:26:45 | 显示全部楼层
什么搜索引擎60秒爬100次?
 楼主| 发表于 2018-5-20 19:33:58 来自手机 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2018-5-20 19:55:06 | 显示全部楼层
小站可以这样做 大站的话现在很多地方都是共用出口 会误封
搜索引擎不是同一IP爬站,是N个IP爬 一般不会影响蜘蛛
发表于 2018-5-20 19:58:25 | 显示全部楼层
蜘蛛一般不会影响,以百度为例,都是整个段来爬的。每个IP,要好久才能轮一次。
发表于 2018-5-20 20:04:44 来自手机 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2018-5-20 20:40:00 来自手机 | 显示全部楼层
binghe 发表于 2018-5-20 19:33
我不是很懂搜索引擎,所以来问一下,只要不会出现这种情况就好。我之前一直很信任Cloudflare,直到昨天晚 ...

那是你策略不对,CF可不背这个锅!
发表于 2018-5-20 20:51:03 | 显示全部楼层
搜索引擎正常是没事,不会一个ip一直爬,都是非常多ip分布式的爬取
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-9-22 04:15 , Processed in 0.058805 second(s), 7 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表