Python 3.6：如何從動態頁面獲取內容？

Question

我想從這個網頁「http://www.fibalivestats.com/u/ACBS/333409/pbp.html」這段代碼的內容：

r = requests.get("http://www.fibalivestats.com/u/ACBS/333409/pbp.html") 
if r.status_code != 200: 
    print("Error!!!") 

html = r.content 
soup = BeautifulSoup(html, "html.parser") 
print(soup) 

我也得到了頁面的模板，但沒有關聯到每個標籤的數據。

如何獲取數據？我是Python新手。

Answer 1

在這種情況下，您的JavaScript沒有被觸發，因此它沒有填充元素。我建議你使用像Selenium這樣的webdriver，如here所示。

它會模仿瀏覽器並執行Javascript。下面是一個例子。

from selenium import webdriver 
browser = webdriver.Firefox() 
browser.get("http://www.fibalivestats.com/u/ACBS/333409/pbp.html") 
html_source = browser.page_source 
soup = BeautifulSoup(html_source, "html.parser")