最近想做个文档站（非小说）

Jan · 发表于 2018-12-30 20:58:55

提示: 作者被禁止或删除内容自动屏蔽

solomon · 发表于 2018-12-30 21:05:09

按一个文档5M大小，100T有2000多万个文档了，国内除了几个百度文库，豆丁，道客巴巴等几个外没有达到这个量的了

miniloop · 发表于 2018-12-30 21:05:19

Jan 发表于 2018-12-30 20:58
oneindex 然后买微软的one drive 或者 $10 rclone Google Drive

这种云盘风险不可控啊，说封就封了，而且还不能版权，采集来的东西多少都有点版权问题。

Jan · 发表于 2018-12-30 21:05:55

提示: 作者被禁止或删除内容自动屏蔽

doors · 发表于 2018-12-30 21:06:34

miniloop 发表于 2018-12-30 20:52
光硬盘就已经伤不起了，所以说 “想想还是算了”

硬件其实还好，采集不容易，采集了还得处理过吧？

ApkB · 发表于 2018-12-30 21:08:35

什么样的文档站要100T？

miniloop · 发表于 2018-12-30 21:08:54

doors 发表于 2018-12-30 21:06
硬件其实还好，采集不容易，采集了还得处理过吧？

采集相对容易，只需采集标题、摘要、作者什么的就可以，文档是可以下载的PDF等

Jan · 发表于 2018-12-30 21:09:01

提示: 作者被禁止或删除内容自动屏蔽

miniloop · 发表于 2018-12-30 21:15:20

ApkB 发表于 2018-12-30 21:08
什么样的文档站要100T？

3个站的资源文档总数5000+W，平均文档大小2M左右

miniloop · 发表于 2018-12-30 21:16:21

Jan 发表于 2018-12-30 21:09
正经付费云盘，封什么啊，别白p盘就行吧, 采集好了，脚本跑起来，直接随机文件名上传，数据库映射文件名就 ...

有文件数限制吗？

		自动登录	找回密码
密码			注册

Jan Jan 当前离线积分 3605	发表于 2018-12-30 20:58:55 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
Jan Jan 当前离线积分 3605
	回复支持反对举报

Jan Jan 当前离线积分 3605	发表于 2018-12-30 21:05:55 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
Jan Jan 当前离线积分 3605
	回复支持反对举报

Jan Jan 当前离线积分 3605	发表于 2018-12-30 21:09:01 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
Jan Jan 当前离线积分 3605
	回复支持反对举报