爬网站遇到只能100页的怎么整

NEET姬 · 发表于 2021-6-30 23:11:32

一些网站翻页只能翻到100页剩下的翻不了
这要怎么解决呢

mubazhe · 发表于 2021-6-30 23:13:13

你也不说网站跟工具是打算让我们算卦给你算出问题嘛？

muyu · 发表于 2021-6-30 23:41:43

这网站，老哥注意身体呀

笑花落半世琉璃 · 发表于 2021-6-30 23:12:54

啊？这种不都是直接url变参数吗？

NEET姬 · 发表于 2021-6-30 23:15:40

笑花落半世琉璃发表于 2021-6-30 23:12
啊？这种不都是直接url变参数吗？

就是变参数呀，问题是他这个网站翻页只能翻到100页，用了各种分类、关键词搜索都是只能到100页

笑花落半世琉璃 · 发表于 2021-6-30 23:18:32

本帖最后由笑花落半世琉璃于 2021-6-30 23:19 编辑

NEET姬发表于 2021-6-30 23:15
就是变参数呀，问题是他这个网站翻页只能翻到100页，用了各种分类、关键词搜索都是只能到100页 ...

。。。。。怎么可能会做这种限制，那参数调完的链接，你自己复制到浏览器上访问看看

NEET姬 · 发表于 2021-6-30 23:22:06

笑花落半世琉璃发表于 2021-6-30 23:18
。。。。。怎么可能会做这种限制，那参数调完的链接，你自己复制到浏览器上访问看看 ...

就是不行呀
https://jojodl.com/
这个网站你可以看看

Chriss · 发表于 2021-6-30 23:23:56

NEET姬发表于 2021-6-30 23:22
就是不行呀
https://jojodl.com/
这个网站你可以看看

人家只有一百页啊

NEET姬 · 发表于 2021-6-30 23:25:25

Chriss 发表于 2021-6-30 23:23
人家只有一百页啊

数据不止100页的但是100页后面的就翻不了了

hezuogongying · 发表于 2021-6-30 23:32:35

提示: 作者被禁止或删除内容自动屏蔽

ApkB · 发表于 2021-6-30 23:36:28

防爬啊，所以只给展示100页，你能有什么办法

		自动登录	找回密码
密码			注册

hezuogongying hezuogongying 当前离线积分 2493	发表于 2021-6-30 23:32:35 来自手机 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
hezuogongying hezuogongying 当前离线积分 2493
	回复支持反对举报