国外IP伪装成国内搜索的UA来爬？这是什么操作？

小笨笨 · 发表于 2021-7-22 17:23:17

刚才看了昨天的站点日志，发现一堆亚马逊的IP来爬，有国内的有国外的，UA伪装成搜狗的蜘蛛来站点爬了一个多小时。

中间还混杂着不少搜狗的真实蜘蛛，到底是亚马逊伪装了搜狗，还是搜狗用了亚马逊的主机。

这是TM是哪门子操作？

hxuf · 发表于 2021-7-22 17:27:09

伪装的被。你看到的哪个真搜狗没准也是伪装的。

G.K.D · 发表于 2021-7-22 17:27:33

UA 这种太容易伪装了，难以辨别~

本人马保国 · 发表于 2021-7-22 17:28:14

蜘蛛还是看IP准些吧好多扫的会用蜘蛛UA

小笨笨 · 发表于 2021-7-22 17:28:15

hxuf 发表于 2021-7-22 17:27
伪装的被。你看到的哪个真搜狗没准也是伪装的。

nslookup了一下有的是搜狗有的是亚马逊

yrj · 发表于 2021-7-22 17:29:07

他这么干之前，压根就没想过会有人肉眼看日志

hxuf · 发表于 2021-7-22 19:12:28

小笨笨发表于 2021-7-22 17:28
nslookup了一下有的是搜狗有的是亚马逊

然而IP也能伪装。

雪丫鬟 · 发表于 2021-7-22 19:13:25

我从来不看这些

phpsky · 发表于 2021-7-22 19:20:32

蜘蛛常见的IP段就那些，看到不对的直接屏蔽

小旭 · 发表于 2021-7-22 19:32:21

可能有人采集

		自动登录	找回密码
密码			注册