urllib3連接管理

Question

我使用urllib3通過HTTP數千次（特別是超過40,000）一個接一個地查詢在線API。
我注意到，在開始時，來自API的HTTP GET非常快（< 500ms）。
隨着越來越多的HTTP請求被製作，響應時間減慢到幾秒鐘。

我的代碼如下所示：

http = urllib3.PoolManager() 
req = http.request(u'GET', URL) 
doc = xml.dom.minidom.parseString(req.data) 
nodes = doc.getElementsByTagName(ELEMENT_NAME) 
for node in nodes: 
    #process the node, this happens very very fast. 

我失去了什麼？謝謝！

Answer 1

也許你打的API會限制你？