如何使用javascript创建站点地图

How to create a site map using javascript

本文关键字:站点 地图 创建 javascript 何使用      更新时间:2023-11-21

我正在寻找关于如何创建一个javascript的文档,该javascript将跟随页面或网站上的所有链接,并创建它们的地图或列表。或者,如果有更好的方法,那也太好了。我只是想得到一个3000多页的网站上所有页面的综合列表。我也不知道该在这个问题上贴上什么标签,所以这方面的提示会很酷。

您要查找的内容被称为:

  1. 网络爬网
  2. 筛网刮除

使用谷歌,你将能够在你喜欢的技术中找到解决方案。

我个人喜欢python包的剪贴

UPDATE:例如,只需搜索"javascript屏幕抓取教程",就可以获得:pjScrape一个用javascript 编写的web抓取框架