Bing Web Search API和黑名單（python）

Question

我正在使用Bing Web Search API來獲取與特定查詢匹配的URL。不幸的是，API結果中也有很多垃圾。

現在我創建了一個廣泛的黑名單，這個「垃圾」的70％。

什麼是最有效的方法來排除URL列表被附加到我的「結果」數組？

代碼的有趣的部分：

results = [] 
try: 
    conn = http.client.HTTPSConnection('api.cognitive.microsoft.com') 
    conn.request("GET", "/bing/v5.0/search?%s" % params, "{body}", headers) 
    response = conn.getresponse() 
    data = response.read() 
    json_file = json.loads(data) 
    for i in range(len(json_file['webPages']['value'])): 
     results.append([count, json_file['webPages']['value'][i]['displayUrl']]) 
    conn.close() 
except Exception as e: 
    print(e) 

Answer 1

您可以嘗試兵爲此，自定義搜索。它允許您將結果與阻止功能一起限制到特定域/子網站/網頁。您可以查看customsearch.ai的詳細信息。免費鑰匙可以從這裏獲得：https://azure.microsoft.com/en-us/try/cognitive-services/?api=bing-custom-search。