这种TLSv1.2的网站，怎么爬

igoogle · 发表于 2021-12-12 19:43:51

https://www.hkicpa.org.hk/en/Membership/Find-a-CPA/Hong-Kong-CPA-Practice-Directory

复制代码

给公司做个相关行业的统计，我用火车采集来爬这个网站上的公司和资料，
但是一直失败。

看了下时由于这个网站用的TLSv1.2
貌似火车不支持1.2

我想到了用反代再爬，但是反代也失败了，nginx也加了支持1.2的ssl，还是失败。

求求给位大佬，这个网站到底怎么爬？

emptysuns · 发表于 2021-12-12 19:51:20

import requests, re

kok · 发表于 2021-12-12 19:56:11

1、不用火车头换软件
2、先用别的软件了发布到自己做的网站，再用火车头爬自己的网站

微羽 · 发表于 2021-12-12 20:01:41

遇到过同样问题，安装kb3140245更新就可以了

微羽 · 发表于 2021-12-12 20:05:15

https://kfun.lanzouo.com/itoHuxjbafi
win7安装这两个补丁，重启电脑应该就行了

蝙蝠侠 · 发表于 2021-12-12 20:07:27

高铁可以。

igoogle · 发表于 2021-12-13 10:38:27

微羽发表于 2021-12-12 20:05
https://kfun.lanzouo.com/itoHuxjbafi
win7安装这两个补丁，重启电脑应该就行了

这两个我装了啊，还是抓取不到。。

而且，我用本地win10上的火车，也抓不到数据，fiddler也取不到值。。

		自动登录	找回密码
密码			注册