求扒站正确姿势→目标站已ssl+反代

飞奔的蜗牛 · 发表于 2017-9-19 12:34:45

curl是模拟人的操作所以应该不用考虑 ssl和饭袋的问题

leaveoff · 发表于 2017-9-19 12:36:52

ctrl+S

sskdgu · 发表于 2017-9-19 13:08:49

wget referer

llwxxcn · 发表于 2017-9-19 14:01:57

python还不是随便搞

llwxxcn · 发表于 2017-9-19 14:02:35

Selenium

板凳 · 发表于 2017-9-19 15:19:20

llwxxcn 发表于 2017-9-19 14:02
Selenium

能说的具体点吗

板凳 · 发表于 2017-9-19 15:19:43

llwxxcn 发表于 2017-9-19 14:02
Selenium

大佬怎么随便搞，求一种正确姿势即可

板凳 · 发表于 2017-9-19 15:19:55

sskdgu 发表于 2017-9-19 13:08
wget referer

不行

llwxxcn · 发表于 2017-9-19 15:40:03

板凳发表于 2017-9-19 15:19
大佬怎么随便搞，求一种正确姿势即可

Selenium框架搞个爬虫，配上多个header，然后搞个ip代理池不就完事了。
这个东西是基于浏览器的，所以相比普通的模拟http请求是慢一点。但是优点就就是难以通过常规手段来发现。
想发现的话只能从用户行为来分析了。不过貌似除了特别大的那种公司外一般也没有这个实力。
中间如果有验证码的话，自己有实力就tenserflow搞一搞，没实力就若快。

板凳 · 发表于 2017-9-19 15:50:04

llwxxcn 发表于 2017-9-19 15:40
Selenium框架搞个爬虫，配上多个header，然后搞个ip代理池不就完事了。
这个东西是基于浏览器的，所以相 ...

这个太深奥了，

		自动登录	找回密码
密码			注册

[疑问] 求扒站正确姿势→目标站已ssl+反代