web-scraping

3熱度

3回答

說你必須要麼應用功能，個人DOM元素的選項或它們的列表：個人： $('#element1').click(function() { $(this).hide(); return false; }); $('#element2').click(function() { $(this).hide(); return false; }); $('#ele

2熱度

3回答

如何在java應用程序的文本區域顯示html格式的文本？

我正在使用我的Java應用程序從網站上刪除數據，並且想要在Swing中創建的文本區域中解析HTML頁面代碼後顯示結果。文本如：hello <b>every</b>one應顯示爲：'hello 每 one'在文本區域中。謝謝！

-3熱度

1回答

刮多個IP，在java

基本上，我有一個應用程序刮。它每分鐘刮n件物品。目前我只有一個IP。我正在抓取的網站允許我爲每個IP 3個連接。我在考慮獲得另一個IP。所以我將能夠獲得6個連接。理論上我應該可以在40秒內或多或少地獲得n個物品。目前我使用java（commons-httpcore）來完成工作。我不確定這是java問題還是操作系統問題。我的機器有IP 1和IP 2 我該如何連接到使用IP 1和使用

24熱度

2回答

如何使用scrapy中的CrawlSpider點擊javascript onclick鏈接？

我想scrapy抓取網頁，去到下一個環節是這樣的： <a href="#" onclick="return gotoPage('2');"> Next </a> 將scrapy能夠解釋的是JavaScript代碼？隨着的LiveHTTPHeaders擴展，我發現，點擊下一步生成POST請求並提供一個真正的那塊巨大的「垃圾」的開始是這樣的： encoded_session_hidden_map

2熱度

2回答

HTML Agility Pack屏幕抓取XPATH不返回數據

我試圖爲Digikey編寫一個屏幕抓取工具，該工具將允許我們公司在零件停產時保持定價，零件可用性和產品更換的準確跟蹤。我在Chrome Devtools中看到的XPATH與Firefox上的Firebug以及我的C＃程序看到的差異似乎存在差異。說我刮目前的頁面是http://search.digikey.com/scripts/DkSearch/dksus.dll?Detail&name=296

3熱度

1回答

刮谷歌搜索SEARCH

問：關於編程工具/腳本以自動從Google代碼搜索結果中提取所有項目文件的建議？注意：這個問題是專門爲代碼搜索： http://www.google.com/codesearch 而不是「谷歌代碼」已經有repositary訪問。動機：一個開源項目的官方網站早已沒有任何聯繫導致追趕它。項目文件仍然可用，但僅限於谷歌代碼搜索結果（目前）。不幸的是，有太多的文件可以通過手工一個一個地剪切和刪除。

2熱度

2回答

那裏有一個jQuery的webscraper嗎？

我想從使用jQuery和Adobe AIR的外部網站抽出一些信息。現在，我使用隱藏的div和jQuery的加載函數來加載外部網站的片段，一旦信息加載我用選擇器解析一些信息。這很好，但它有點骯髒，我需要執行幾次（不想需要很多隱藏的div）。如果有人知道寫在jQuery的一個好webscrapper也許另一種方法我錯過

1熱度

1回答

如何在窗體中指定控制器和動作以創建新資源

我有QuestionsController和TrueFalseQuestionsController。我建了一個表單創建問題真/假，這是我的表格： <%= simple_form_for @question, defaults: { error: false } do |question_form| %> <fieldset> <legend>Question</legend>

3熱度

2回答

可可：當我有一個「id按鈕」變量時如何得到按鈕的類型

我正在研究一些代碼，我需要能夠根據「id按鈕」變量獲得按鈕的類型。該按鈕可以是收音機，複選框或簡單的按鈕。 NSButton類具有setButtonType成員，但沒有獲取按鈕類型的功能。

0熱度

1回答

序列化多個列表<T>對象到相同的XML文件C＃

大家好我有三個列表包含來自同一類的對象。例如，這裏是我的清單： List<Course> courselvl4 = new List<Course>(); List<Course> courselvl5 = new List<Course>(); List<Course> courselvl6 = new List<Course>(); 我在想，如果有可能，序列化每個列表