使用谷歌自定義搜索作爲圖像刮板？

Question

我想抓取與特定文本相符的圖像。我希望它能夠過濾這些內容，定期檢查新圖像，並將結果上傳到程序中。

我必須建立一個網站來做到這一點嗎？有更好的工具嗎？哪種方法最簡單？我有點不知所措的文件。

Answer 1

我建議您使用谷歌搜索刮圖像與特定文本重合。 請記住，谷歌是敏感的網頁抓取，特別是頻繁請求其服務器的搜索頁面。閱讀this post進入它（搜索結果頁在某種程度上類似於查詢business directories）。

我必須建立一個網站來做到這一點嗎？

Absiolutely not（for google regular search）。如果你想使用谷歌自定義搜索，你需要建立一個網站。

有更好的工具嗎？

最好的方法，我認爲是一個自定義刮板（python，php）。但是，再次以一種緩和的速度刮擦，以免谷歌禁止你或放棄CAPTCHA。

哪種方法最簡單？

如果您缺乏編程技巧，請轉至the web scraping software。