wget

9熱度

1回答

我試圖使用wget遞歸地從特定網站抓取.jpg文件，以期爲我自己創建一個有趣的屏幕保護程序。真的不是這樣一個崇高的目標。問題是，圖片託管在其他地方（mfrost.typepad.com），而不是網站的主域（www.cuteoverload.com）。我曾嘗試使用「-D」來指定允許的域名，但可悲的是沒有可愛的jpgs即將出現。我怎麼能改變下面的線來完成這項工作？ wget -r -l2 -np

1熱度

2回答

如何在Wget中爲未完成的下載設置臨時目錄？

我試圖在FTP服務器上鏡像文件。這些文件可能非常大，因此下載可能會中斷。我想保留原始文件，同時將部分文件下載到臨時文件夾，並且一旦完成覆蓋本地舊版本。我可以這樣做嗎？怎麼樣？是否有另一個易於使用（命令行）的工具，我可以使用？

0熱度

7回答

通過ssh通過wget從bash文件下載超過100,000個文件有多可靠？

我有一個bash文件，其中包含wget命令以下載總計大約20GB數據的100,000個文件。 bash的文件看起來像： wget的http://something.com/path/to/file.data wget的http://something.com/path/to/file2.data wget的http://something.com/path/to/file3.data wget的h

421熱度

12回答

使用wget遞歸獲取一個包含任意文件的目錄

我有一個Web目錄，我在其中存儲一些配置文件。我想使用wget來拉下這些文件並保持其當前結構。例如，遠程目錄如下所示： http://mysite.com/configs/.vim/ .vim保存多個文件和目錄。我想用wget在客戶端複製它。似乎無法找到正確的組合wget標誌來完成這件事。有任何想法嗎？

3熱度

3回答

刮多框架網站

我正在審計我們現有的網絡應用程序，這使得大量使用HTML frames。我想在每個框架中下載所有的HTML，有沒有一種方法可以用wget或者一些腳本來做到這一點？

1熱度

1回答

如何讓Wget處理HTTP 100-繼續響應？

我想發佈一個HTML（包含在文件中）使用Wget這樣的URL： wget -O- --debug --header=Content-Type:text/html --post-file=index.html http://localhost/www/encoder.ashx 到的HTML被髮布的URL是用ASP實現的Web應用程序的終點。淨。服務器回覆100 (C

8熱度

5回答

從wget解析http響應標頭

我試圖從wget的結果中提取一行，但遇到問題。這是我的wget電話： $ wget -SO- -T 1 -t 1 http://myurl.com:15000/myhtml.html 輸出： --18:24:12-- http://xxx.xxxx.xxxx:15000/myhtml.html => `-' Resolving xxx.xxxx.xxxx... xxx.x

0熱度

4回答

以編程方式登錄論壇，然後屏幕截圖

我想登錄到社區服務器的論壇部分（例如http://forums.timesnapper.com/login.aspx?ReturnUrl=/forums/default.aspx），然後下載特定頁面並執行正則表達式（查看是否有任何帖子在等待審覈）。如果有，我想發一封電子郵件。我想從Linux服務器上執行此操作。當前我知道如何下載一個頁面（例如使用wget），但登錄時出現問題。任何明智的想法如何