全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1129|回复: 6

[疑问] 一个简易采集小说的脚本!

[复制链接]
发表于 2021-3-29 21:53:22 | 显示全部楼层 |阅读模式
本帖最后由 plato0516 于 2021-3-29 21:59 编辑

一个简易采集小说的脚本!主要是我想把人生的第一本看的付费小说,还付费看完本小说的下载下来,就当做韭菜的回忆吧!




novel_collect.zip

1.69 KB, 阅读权限: 1, 下载次数: 57

一个小说采集脚本!

发表于 2021-3-29 22:26:45 来自手机 | 显示全部楼层
也喜欢看小说
发表于 2021-3-29 23:17:43 | 显示全部楼层
站长不知道该哭还是该笑
 楼主| 发表于 2021-3-29 23:20:00 | 显示全部楼层
鼎剑阁 发表于 2021-3-29 23:17
站长不知道该哭还是该笑

当然是开心啦.....收集点东西,那是看得起他。
 楼主| 发表于 2021-3-29 23:29:14 | 显示全部楼层
提示一下,其实速度采集很慢的,大概每分钟也就90左右的IO,我想的是如何加快速度。一个方式是自适应调整response的并发速度,大概是首先生成所有的连接,将所有的连接分为不同的进程组。应该会加快一点点,不过就这样咸鱼采集一点能用就行。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2026-5-11 12:56 , Processed in 0.068623 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表