[全球爬虫论坛] python获取的网页和浏览器的结果不一致

遥远彼方 · 发表于 2022-8-19 11:16:25

深海空间发表于 2022-8-19 10:59
去看33楼，他用requests get下来了，不过他似乎没打算说咋搞的。。。，应该是被检测到用requests所以返回 ...

pronhub我上大学的时候在做过，把整个网站都趴下来了....目前来说看样子用头信息会有一些检测吧。多试试总会有办法，现在具体的反爬机制是什么样了，不过大体就那几种

inighty · 发表于 2022-8-19 11:24:48

我这没这个问题随便就能请求是因为代理的原因吗

深海空间 · 发表于 2022-8-19 12:37:11

本帖最后由深海空间于 2022-8-19 12:49 编辑

inighty 发表于 2022-8-19 11:24
我这没这个问题随便就能请求是因为代理的原因吗

有毒，你跑一下我这段代码试试，不像是代理的问题，因为我用chrome是可以正常请求页面的。

https://notepad.pw/4asps27f

inighty · 发表于 2022-8-19 13:57:53

深海空间发表于 2022-8-19 12:37
有毒，你跑一下我这段代码试试，不像是代理的问题，因为我用chrome是可以正常请求页面的。

https://note ...

我没有http代理

		自动登录	找回密码
密码			注册