如何使用javascript創建站點地圖

我正在尋找關於如何創建JavaScript的文檔，該文檔將遵循頁面或網站上的所有鏈接，並創建它們的地圖或列表。或者，如果有更好的方法來做到這一點，那也會很棒。我只是試圖獲得一個包含3000多頁的網站上的所有頁面的完整列表。我也不知道在這個問題上貼什麼標籤，所以這方面的提示會很冷。如何使用javascript創建站點地圖

來源

2012-07-19 dezman

它看起來對我來說，您正試圖實施某種履帶式 – 2012-07-19 16:02:19

什麼你正在尋找被稱爲：

網頁抓取
屏幕抓取

使用谷歌，你就能夠找到的技術解決方案，您喜歡。

我個人喜歡Python包scrapy

更新：例如，只搜索「JavaScript的屏幕抓取教程」爲您提供：pjScrape網絡刮框架用JavaScript編寫的

來源

2012-07-19 16:09:11 ryuusenshi

或使用sphider。 – Panagiotis 2012-07-19 16:13:24

如何使用javascript創建站點地圖

回答

相關問題