全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
楼主: hdwan.net

最新小说站源码,狂雨小说站源码带10+数据采集规则!正...

[复制链接]
 楼主| 发表于 2022-7-6 20:14:17 | 显示全部楼层
朝花夕拾 发表于 2022-7-6 20:13
想到好的一面了。
坏的一面就是,如果源站没有更新实质内容,只是标题占百度排名“正在手打中“,有用户 ...

听不懂。。意思是要把内容存本地?
发表于 2022-7-6 20:19:24 | 显示全部楼层
hdwan.net 发表于 2022-7-6 20:14
听不懂。。意思是要把内容存本地?

用户点击,就会把源站的内容存下来。用户看哪章,那一章就会存下来,也是txt形式。
你不想要内容可以定期清除缓存,不过源站不可能一直让你这样请求下载的,存本地是最好的方式。
迟早会被ban ip,因为用户点击一章,请求有 8 9次甚至更多,假设1000用户,每个人保守估计看6章,每章分两页,就是12000次大约乘以10,就是12万次请求,源站站长即使是小白,也可以清除知道自己的站被人直接转码了。
 楼主| 发表于 2022-7-6 20:49:41 | 显示全部楼层
朝花夕拾 发表于 2022-7-6 20:19
用户点击,就会把源站的内容存下来。用户看哪章,那一章就会存下来,也是txt形式。
你不想要内容可以定期 ...

是这样啊,我就说采集的好快,原来是表象。那我还要存下来哦
发表于 2022-7-6 20:55:44 | 显示全部楼层
杰奇 才是王道  其他小偷程序玩玩就行
发表于 2022-7-6 21:00:24 | 显示全部楼层
这玩意不存小说,如果用户不访问不会生成缓存。清了就啥都没有了。
 楼主| 发表于 2022-7-6 21:02:32 | 显示全部楼层
hpp 发表于 2022-7-6 21:00
这玩意不存小说,如果用户不访问不会生成缓存。清了就啥都没有了。

用火车头每天爬自己的网站  是不是算触发访问?
发表于 2022-7-6 21:05:56 | 显示全部楼层
hdwan.net 发表于 2022-7-6 21:02
用火车头每天爬自己的网站  是不是算触发访问?

可以的,我之前的就是这样搞的。 要以访问的形式 不要使用 curl 的形式。
发表于 2022-7-6 21:09:48 | 显示全部楼层
hdwan.net 发表于 2022-7-6 20:49
是这样啊,我就说采集的好快,原来是表象。那我还要存下来哦

要自己存的话,就自己遍历一下全站的链接,每个链接设置个两三秒就可以,看个人服务器性能设置了。
你还要顺便把后台的清除缓存按钮给注释掉,真有可能不小心清除了。
反正这个程序不适合自己的第一个小说站的,适合第二个,第一个还是老老实实放自己服务器。
小说站不建议用这个程序,还有好多问题呢,拿来玩玩是可以的。
 楼主| 发表于 2022-7-6 21:45:49 来自手机 | 显示全部楼层
朝花夕拾 发表于 2022-7-6 21:09
要自己存的话,就自己遍历一下全站的链接,每个链接设置个两三秒就可以,看个人服务器性能设置了。
你还 ...

第一个有什么推荐?杰奇?
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-9-9 21:49 , Processed in 0.059575 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表