全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
楼主: miniloop

最近想做个文档站(非小说)

[复制链接]
发表于 2018-12-30 20:58:55 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2018-12-30 21:05:09 来自手机 | 显示全部楼层
按一个文档5M大小,100T有2000多万个文档了,国内除了几个百度文库,豆丁,道客巴巴等几个外没有达到这个量的了
 楼主| 发表于 2018-12-30 21:05:19 | 显示全部楼层
Jan 发表于 2018-12-30 20:58
oneindex 然后买微软的one drive 或者 $10 rclone Google Drive

这种云盘风险不可控啊,说封就封了,而且还不能版权,采集来的东西多少都有点版权问题。
发表于 2018-12-30 21:05:55 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2018-12-30 21:06:34 | 显示全部楼层
miniloop 发表于 2018-12-30 20:52
光硬盘就已经伤不起了,所以说 “想想还是算了”

硬件其实还好,采集不容易,采集了还得处理过吧?
发表于 2018-12-30 21:08:35 | 显示全部楼层
什么样的文档站要100T?
 楼主| 发表于 2018-12-30 21:08:54 | 显示全部楼层
doors 发表于 2018-12-30 21:06
硬件其实还好,采集不容易,采集了还得处理过吧?

采集相对容易,只需采集标题、摘要、作者什么的就可以,文档是可以下载的PDF等
发表于 2018-12-30 21:09:01 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
 楼主| 发表于 2018-12-30 21:15:20 | 显示全部楼层
ApkB 发表于 2018-12-30 21:08
什么样的文档站要100T?

3个站的资源文档总数5000+W,平均文档大小2M左右
 楼主| 发表于 2018-12-30 21:16:21 | 显示全部楼层
Jan 发表于 2018-12-30 21:09
正经付费云盘,封什么啊,别白p盘就行吧, 采集好了,脚本跑起来,直接随机文件名上传,数据库映射文件名就 ...

有文件数限制吗?

点评

分享稍微多点就被限制了,太折腾了  发表于 2018-12-30 21:33
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2026-4-12 15:16 , Processed in 0.067029 second(s), 13 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表