百度有没有提供100%可靠的方法来判断访问IP确实属于蜘蛛?

wawos · 发表于 2025-4-13 11:17:21

比如微软的蜘蛛访问, 微软就提供了通用方法,

比如访问IP是157.55.39.15, 你只需要查询: msnbot-157-55-39-15.search.msn.com 解析的IP和当前访问一致,

就确保100%是微软官方IP不是假冒的蜘蛛,

百度和google的蜘蛛有提供这类判断方法吗

wawos · 发表于 2025-4-13 11:18:32

不是那种一大串固定IP段来判断那种, 这样肯定是不靠谱的蜘蛛IP段会变动更新

afkool · 发表于 2025-4-13 11:22:35

百度以前也提供过。但是是骗人的。。。

hins · 发表于 2025-4-13 13:49:09

不是用nslookup判断吗

linkaixiang · 发表于 2025-4-13 14:03:17

百度有的，和你说的bing的蜘蛛一样反查再ping反查后的域名。

淅沥 · 发表于 2025-4-14 09:07:34

wawos 发表于 2025-4-13 11:18
不是那种一大串固定IP段来判断那种, 这样肯定是不靠谱的蜘蛛IP段会变动更新 ...

220.181和116.179永远是百分之百准确的

hxuf · 发表于 2025-4-14 09:29:34

百度不止公开的蜘蛛。还有非公开的。

不能通过nslookup判断。

lanmin · 发表于 2025-4-14 10:13:15

很难呀，他官方公开的是有User-Agent 信息，可是有时候当你禁用了User-Agent信息 baidu 他还是会爬过来。

		自动登录	找回密码
密码			注册

[疑问] 百度有没有提供100%可靠的方法来判断访问IP确实属于蜘蛛?