论坛 › 美国服务器 › Hetzner 独立服务器 tumblr采集.. 开足马力，冲啊!

openos 发表于 2018-3-14 16:33:31

cw723 发表于 2018-3-14 16:29
什么爬虫？

求推荐。

https://github.com/dixudx/tumblr-crawler

cw723 发表于 2018-3-14 16:43:39

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

缓存10G 图片。
G口跑满。

你的网站流量很大哦。

还都是境外流量:D

atcaoyufei 发表于 2018-3-14 16:44:28

openos 发表于 2018-3-14 16:32
缓存10G的常用图片就够了.

你网站 表示帝都电信打不开了，要扶墙

cw723 发表于 2018-3-14 16:44:45

openos 发表于 2018-3-14 16:33
https://github.com/dixudx/tumblr-crawler

也是像是随便爬的爬虫呀。

openos 发表于 2018-3-14 16:47:20

cw723 发表于 2018-3-14 16:43
缓存10G 图片。
G口跑满。



搜索路过图床

openos 发表于 2018-3-14 16:48:37

atcaoyufei 发表于 2018-3-14 16:44
你网站 表示帝都电信打不开了，要扶墙

有些地方把阿里云的443端口屏蔽了，不想动了，反正没几个人看，想看的人自己想办法

左手写爱 发表于 2018-3-14 17:32:21

我去 已经下载100G了   

硬盘不够用了

openos 发表于 2018-3-14 17:39:32

速度下来了，可能正在采集图片....
https://s1.ax1x.com/2018/03/14/949m1e.png

sm1314 发表于 2018-3-14 17:56:26

楼主Hetzner装的什么系统呀yc010t

yjlml 发表于 2018-3-14 17:57:38

sm1314 发表于 2018-3-14 17:56
楼主Hetzner装的什么系统呀

BT面板

查看完整版本: Hetzner 独立服务器 tumblr采集.. 开足马力，冲啊!