抓取圖像，整個網頁並緩存它們

Question

我開始一個項目，並想知道圖像中的字符與圖像所在的整個網頁之間的關係。

我想抓取一些圖像及其網頁。我需要將抓取結果保存在本地磁盤中以供進一步分析。我想知道這個問題是否有開放源代碼？

Answer 1

這裏的開源爬蟲 http://www.google.co.uk/#hl=en&source=hp&q=open+source+web+crawler&aq=f&aqi=g9g-m1&aql=&oq=&gs_rfai=&fp=77130048d7e0701a

靠近列表頂部的列表是Java爬蟲，和維基百科的文章有一些更多的，以及

Answer 2

您可以使用crawler4j用於此目的。這是一個簡單的Java爬蟲程序，可以在幾分鐘內配置，並且您還可以將它用於爬取圖像。您還可以在源代碼中找到ImageCrawler示例。