全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 444|回复: 8

[疑问] 请教个PHP_URL douyin页面返回Please wait...的问题

[复制链接]
发表于 2025-7-10 16:56:08 | 显示全部楼层 |阅读模式
本帖最后由 Telegramr 于 2025-7-14 18:01 编辑

先说谢谢了,谢谢各位大佬的指点

在本地用curl带User-Agent、Referer、cookies可以正常获取到网页内容

本地虚拟机中搭建的php可以正常获取到内容,但是服务器上不行,返回 Please wait... 并且一直在转圈

在服务器上curl也不行。

通过检测返回的错误源代码中,kimi和ds说源码中包含了检测浏览器环境的js代码,但具体检测哪些,不知道

2025年7月14日补充
我刚才在另外一台服务器上用curl执行了一下命令,发现返回的还是简短的文本!
curl -H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36" -H "Referer: https://www.douyin.com/" -H "Cookie: douyin.com;  __ac_nonce=*****2e0a007d0c41aea3; __ac_signature=_******wo00f01FnSyCAAAIDDx7Zost7MsCBZ8syAAH4icf; x-web-secsdk-uid=******fa-8226-4d36-8b66-61c9f80e8b83; s_v_web_id=verify_mcvq1zqz_******_4uOt_4o9y_8mro_*****BHlrV0T;ttwid=**********QJCPlMAxOdrBY8sZuvzQjjyCUGjQn_Rzfk%7C1752051215%7C633d7fcd332cc51523d0febf61**********63f1a6a837191b0a2f4d8126ad08;" -o webpage.html https://www.douyin.com/video/7524573309149760820


我问了kimi,它说:

服务器端被抖音风控降级:返回 1 357 B 的空白骨架页 + X-TT-System-Error: 3。
这不是 UA、TLS、Cookie 的问题,而是出口 IP(IDC 段)被列入了风控黑名单。
为什么本地 VMware 里的 CentOS 6.9 能拿到整页?
家用宽带 IP 不在黑名单,所以同一份请求就能返回 SSR 完整 HTML。



微信图片_2025-07-14_175356_453.png (54.03 KB, 下载次数: 0)

发表于 2025-7-10 21:49:50 | 显示全部楼层
把服务器做个代理,本地走这个代理试试,如果还是不行就是ip问题了
发表于 2025-7-10 22:03:32 | 显示全部楼层
waf拦截爬虫,你必须得破解这个算法才能不受影响的爬数据。就算是你本地也会弹的。



------------低能儿@wcn aff乞丐@zhuwo 专属灵位------------
 楼主| 发表于 2025-7-11 09:06:34 | 显示全部楼层
zrlhk 发表于 2025-7-10 21:49
把服务器做个代理,本地走这个代理试试,如果还是不行就是ip问题了

douyin后台会有算法自动封IP的吗?我的脚本调试的量不算大
 楼主| 发表于 2025-7-14 11:40:17 | 显示全部楼层
zrlhk 发表于 2025-7-10 21:49
把服务器做个代理,本地走这个代理试试,如果还是不行就是ip问题了

因为是业务环境,所以不能做代理
 楼主| 发表于 2025-7-14 18:02:24 | 显示全部楼层
zrlhk 发表于 2025-7-10 21:49
把服务器做个代理,本地走这个代理试试,如果还是不行就是ip问题了

听说是IP问题,kimi说

服务器端被抖音风控降级:返回 1 357 B 的空白骨架页 + X-TT-System-Error: 3。
这不是 UA、TLS、Cookie 的问题,而是出口 IP(IDC 段)被列入了风控黑名单。
为什么本地 VMware 里的 CentOS 6.9 能拿到整页?
家用宽带 IP 不在黑名单,所以同一份请求就能返回 SSR 完整 HTML。
发表于 2025-7-14 18:07:31 | 显示全部楼层
大概率是Ip列入黑名单了
 楼主| 发表于 2025-7-15 08:19:18 | 显示全部楼层
H2○ 发表于 2025-7-14 18:07
大概率是Ip列入黑名单了

ai说可能是douyin把所有服务器IP列入风控了,我用了aws和阿里的服务器都无**常curl
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-9-9 20:11 , Processed in 0.065181 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表