全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1358|回复: 12

[Windows VPS] 这个防采集思路是否可行?

[复制链接]
发表于 2021-7-4 11:08:43 | 显示全部楼层 |阅读模式
写点什么违法违规的东西,然后在robot.txt拒绝蜘蛛采集这页,一般的搜索引擎都会遵守,不爬取不收录。

让采集站采了发布之后,你删掉本站的文章,截图采集站的...之后是警告还是举报就由你了。

不知道是否可行?
发表于 2021-7-4 11:23:35 | 显示全部楼层
可以 就是怕你对手 直接举报你
发表于 2021-7-4 11:23:09 | 显示全部楼层
这个假设的前提是. 蜘蛛100% 尊重 robot.txt 规则


而尊重robot.txt的 蜘蛛少之又少.
国内的 基本就不会..
发表于 2021-7-4 11:20:44 | 显示全部楼层
人肉采集飘过
发表于 2021-7-4 11:21:35 | 显示全部楼层
你写写试试。。
发表于 2021-7-4 11:23:08 | 显示全部楼层
上网代理教学 标题加随机数字
发表于 2021-7-4 11:29:54 | 显示全部楼层
自己写的核心内容来个加密,就不用担心采集了,反正采了也不完整
发表于 2021-7-4 11:30:58 | 显示全部楼层
你比较坏啊。
发表于 2021-7-4 11:42:40 | 显示全部楼层
好家伙,以毒攻毒
发表于 2021-7-4 11:58:11 | 显示全部楼层
干嘛robots啊,nginx规则什么的不好用吗
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2026-5-11 01:53 , Processed in 0.075315 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表