抓取网站失败是因为javascript没有启用

Crawling a website fails because javascript isn't enabled

本文关键字:启用 javascript 是因为 网站 失败 抓取      更新时间:2023-09-26

我使用Abot进行爬行,

我想爬一个网站,似乎阻止任何请求,没有启用javascript这是一个php页面,我得到一个"请激活javascript来查看这个网站",而不是真正的网站

页面如何知道是否启用了javascript ?(在你看来——你认为我能克服吗?)

谢谢

除非您使用支持javascript的客户端来抓取站点,否则您就不走运了。