只需一步,快速开始
举报
欧阳逍遥 发表于 2014-8-19 13:54 自己写蜘蛛 多线程去爬 只能这样了。。另外 尽量别用 数据库。。 我现在搞一个项目 2小时爬一次, 每次上 ...
ali727 发表于 2014-8-19 14:38 直接生成HTML吗?
欧阳逍遥 发表于 2014-8-19 14:43 之前写过一个 采集程序。 超高并发。 数据库搞不过来。 就直接 IO 操作了 自己搞好目录结构 和读写逻辑。 ...
本版积分规则 发表回复 回帖后跳转到最后一页
Archiver|手机版|小黑屋|全球主机交流论坛
GMT+8, 2024-6-18 09:27 , Processed in 0.074231 second(s), 9 queries , Gzip On, MemCache On.
Powered by Discuz! X3.4
© 2001-2023 Discuz! Team.