都2020年了搜索引擎还无法抓取动态页面？

1204927751

楼主说动态第一个想到的js动态生成的页面，而不是php这种动态

wangjianjilei

开腥小站长 发表于 2020-10-17 11:41
他没骗你，动态确实抓不了。
楼上说的“动态”估计是指动态程序，地址后缀?p=123那种，输出页面还是html带 ...

不是的，你说的是类似spa这种吧，全程ajax，其实是可以抓的，但是效果确实不好，原因我也不说了，跟你想的差不多，大部分蜘蛛不会因为你是单页站专门给你做优化，大部分情况下还是传统爬取的，所以那个人没有说错
其实也可以优化的，看discuzq就知道了，这类的优化方法相当复杂，而且就算做了优化效果也不好

suwubee

js这类抓取不完整，所以效果很差。如果只是?说成是动态的话那不存在，都可以抓。
即便是js，一般也会通过其他锚元素来进行提交，例如页面内标识，或者sitemap。和本身页面关系不大，对蜘蛛是额外提供内容的。