大神帮我看看， 这是爬虫吗？？ 服务器负载一直超50% ~~~

laosiji

byhefei 发表于 2024-8-8 00:44
禁止不了， N多个IP。。

禁不完

那就禁UA

byhefei

我不是大傻瓜 发表于 2024-8-7 23:35
我采集的，咋滴

大佬别开玩笑。。

rangered

限制速率啊，10秒之内请求大于多少，直接全部拒绝。

byhefei

rangered 发表于 2024-8-8 00:49
限制速率啊，10秒之内请求大于多少，直接全部拒绝。

刚限制了 10秒 10次请求！

我想知道这是为什么，，  被人搞了  还是爬虫

lordong

就是爬虫

byhefei

lordong 发表于 2024-8-8 03:33
就是爬虫

这要是1U 1G的机器还真不一定扛得住它爬

lewissue

机器能抗住就别反爬，为了开放的互联网（

rangered

byhefei 发表于 2024-8-8 00:59
刚限制了 10秒 10次请求！

我想知道这是为什么，，  被人搞了  还是爬虫

我都加了N多个黑名单IP了。互联网哪有什么为什么的。人家有可能专门来搞你，也有可能只是刚好扫到你而已。
人家抓鱼，网子大了，总能抓到鱼。你只能加强你的安全设置，别让网到你。

另外你这10秒10次请求也太少了，会影响用户正常访问的。单纯的一次访问会有很多请求的，有什么css、js之类的。具体要设置多少，你自己测试一下。

byhefei

rangered 发表于 2024-8-8 23:54
我都加了N多个黑名单IP了。互联网哪有什么为什么的。人家有可能专门来搞你，也有可能只是刚好扫到你而已 ...

谢谢老哥！