全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
12
返回列表 发新帖
楼主: tianky

python 采集小说好慢啊

[复制链接]
发表于 2021-3-8 14:44:42 | 显示全部楼层
楼上都没考虑源站的感受
一晚1万本,算平均一本100章,就是100万个请求了
一个晚上算8个小时,28800秒,1000000/28800=34.7QPS
So,慢慢采吧,别把源站弄挂了
 楼主| 发表于 2021-3-8 19:00:24 | 显示全部楼层
萌墨 发表于 2021-3-8 14:18
多线程即可解决

多线程快多了
发表于 2021-3-8 19:09:40 | 显示全部楼层
怎么没人问脚本?那我来问一下
发表于 2021-3-8 21:11:11 来自手机 | 显示全部楼层
至少打个招呼呀,人家直接送你了
发表于 2021-3-8 21:28:08 | 显示全部楼层
我觉得瓶颈不在python上
发表于 2021-3-8 21:35:44 | 显示全部楼层
哪个小说程序,采集脚本能不能发我一个
发表于 2021-3-8 23:20:51 来自手机 | 显示全部楼层
我想知道是哪个源站,哈哈
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-5-5 11:32 , Processed in 0.070663 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表