我正在將一堆網站移動到一臺新服務器上,並確保我不會錯過任何內容,希望能夠爲程序提供一個網站列表,併爲其下載每個網頁/圖像。有沒有可以做到這一點的軟件?我也可以用它來下載一些WordPress的網站的副本,所以我可以上傳靜態文件(我的一些WP網站永遠不會更新,所以很難設置新的數據庫等)最佳網站蜘蛛?
Q
最佳網站蜘蛛?
0
A
回答
2
您可能會收到很多的意見。這裏是一個:http://www.httrack.com/
0
wget是你的工具。
在unix/linux系統上,它可能已經安裝。對於Windows系統,請從http://gnuwin32.sourceforge.net/packages/wget.htm下載。
它是一個命令行工具,有一堆命令行選項用於控制它抓取目標網站的方式。使用「wget --help」列出所有可用的選項。
相關問題
- 1. asp.net(網絡蜘蛛)
- 2. 阻止網絡蜘蛛
- 3. 蜘蛛不爬行網頁
- 4. 如何繪製蜘蛛網
- 5. 減慢蜘蛛網址
- 6. 蜘蛛是否只抓取站點地圖中的網址
- 7. 爲幾個網站使用一個Scrapy蜘蛛
- 8. 處理內存時使用節點和jsdom蜘蛛網站
- 9. 獲取scrapy蜘蛛抓取整個網站
- 10. 防止scrapy蜘蛛爬行網站的一部分太長
- 11. 如何更改Scrapy蜘蛛網站的訂單?
- 12. Python的scrapy蜘蛛
- 13. 佈局像蜘蛛
- 14. Scrapy DOMAIN_NAME的蜘蛛
- 15. Scrapy與Scrapy蜘蛛
- 16. 未知的ZAP蜘蛛網結果
- 17. 網絡蜘蛛需要的幫助
- 18. Scrapy - 蜘蛛抓取重複網址
- 19. 從蜘蛛(Scrapy)無法獲取網址
- 20. 製作網絡爬蟲/蜘蛛
- 21. JQuery中的蜘蛛網圖表
- 22. 在「蜘蛛網」內獲取矩形?
- 23. Highcharts蜘蛛網圖表調用series.setData
- 24. Python網絡蜘蛛:如何解決captcha?
- 25. 建議想:網絡蜘蛛用Perl
- 26. 附表scrapyd蜘蛛和蜘蛛通過配置選項
- 27. Web蜘蛛與Wget的蜘蛛有什麼不同?
- 28. Scrapy從主蜘蛛運行多個蜘蛛?
- 29. 使用Scrapy創建蜘蛛,蜘蛛生成錯誤
- 30. 如何喂蜘蛛蜘蛛爬行內的鏈接?
屬於superuser.com – 2009-10-24 15:39:58
您是否無法通過FTP連接到該站點並下載文件?如果你能做到這一點,它會容易得多,而且你不必擔心文件被遺漏,因爲當前沒有鏈接到它們。 – David 2009-10-25 06:14:00