Q

用Java編寫的最好的開源Web爬蟲工具是什麼？

2011-12-12 64 views 12 likes

12

用Java編寫的最佳開源Web爬蟲工具是什麼？用Java編寫的最好的開源Web爬蟲工具是什麼？

2011-12-12 cuneytykaya

+2

嘗試crawler4j。它的開源和易於使用。您可以參考本指南設置crawler4j - http://www.buggybread.com/2013/01/create-your-own-email-and-image.html –

A

回答

9

嘗試crawler4j。您只需實現一個簡單的界面，該界面控制要訪問哪些URL以及如何處理每個已爬網頁。

2011-12-12 12:20:46 Andy

+0

我在使用此爬網程序（「site沒有迴應「，而在瀏覽器中打開罰款等） – ed22

5

在java我認爲它歸結爲Nutch與Heritrix。您應該指定您的需求以獲得更好的答案。

2011-12-12 12:20:03 riffraff

相關問題