爬取 Discuz!论坛用什么爬虫

jiangyi · 发表于 2021-4-23 18:51:48

想爬几个论坛,做下一个machbbs,有什么快速配置的爬虫吗?
只爬新帖,不翻页也行

CodyDoby · 发表于 2021-4-23 18:53:24

同问有什么方便的，写python太繁琐了

小尾巴翘起来

嗷嗷 · 发表于 2021-4-23 19:03:15

给我也整一个

louiejordan · 发表于 2021-4-23 19:04:32

你问论坛老大，他这loc一堆人都在爬

citywar · 发表于 2021-4-23 19:33:09

那个站是火车头爬的

gssasd · 发表于 2021-4-23 19:43:53

teardrops · 发表于 2021-4-23 19:46:13

本帖最后由 teardrops 于 2021-4-23 20:52 编辑

python 那么简单还说繁琐....

pycurl + 线程池..

___________________________________

自己花点时间看看.. 特别正则.

反正是可以用一辈子的东西.

Chriss · 发表于 2021-4-23 20:10:38

teardrops 发表于 2021-4-23 19:46
python 那么简单还说繁琐....

pycurl + 线程池..

mark一下，感谢大佬

dengwen168 · 发表于 2021-4-23 20:24:00

火车头

淘宝50块钱写个规则。。

已注销账号 · 发表于 2021-4-23 21:39:56

gssasd 发表于 2021-4-23 19:43

求一个下载地址，官方下载地址没了，如果是付费版当我没说

		自动登录	找回密码
密码			注册