全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1005|回复: 10

sehuatang抓包用curl怎么跳过那个18岁点击?

[复制链接]
发表于 2024-5-20 09:46:52 | 显示全部楼层 |阅读模式
我只爬下面这个网页,然后在本地处理一下把标题保存起来,方便查看,省得打开网页了,每天也只爬一次,没有任何恶意
  1. https://www.sehuatang.net/forum-103-1.html
复制代码


之前一直通过curl来爬这个网页的,最近网站管理员可能开启了什么盾,爬不了了,MJJ论坛都是高手,只要能把这个网页内容全爬下来就可以了,后面我用shell再过滤出标题,请大佬指点一下!
发表于 2024-5-20 09:54:51 | 显示全部楼层
长见识 这是什么网站。上班不敢打开
 楼主| 发表于 2024-5-20 09:59:04 | 显示全部楼层
kvmgo 发表于 2024-5-20 09:54
长见识 这是什么网站。上班不敢打开

我也不敢打开,所以写了个脚本只抓标题
发表于 2024-5-20 10:42:41 | 显示全部楼层
最近开启了CF的五秒盾,验证频率超级高,很烦
发表于 2024-5-20 10:54:12 | 显示全部楼层
验证页面中有一个js代码是var safeid=''将这个值放到cookie中 _safe属性中就行了
 楼主| 发表于 2024-5-20 10:54:50 | 显示全部楼层
muyijiang 发表于 2024-5-20 10:42
最近开启了CF的五秒盾,验证频率超级高,很烦

我看公告应该是被攻击了,这些人,尽捣乱
发表于 2024-5-20 11:00:22 | 显示全部楼层
本帖最后由 coobar 于 2024-5-20 11:07 编辑

[quote]Southcat 发表于 2024-5-20 10:54
俺来试试看
发表于 2024-5-20 11:18:29 | 显示全部楼层
缺了cookie,带上cookie
发表于 2024-5-20 16:41:44 | 显示全部楼层
哥你是有采集站吗?我没色花堂的号呢,哪里能白**内容
发表于 2024-5-20 17:11:51 来自手机 | 显示全部楼层
色花堂?采集什么呢
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-9-21 21:06 , Processed in 0.061192 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表