將HTML表提取爲R

我一直在嘗試從網頁中提取表格。該數據是來自實時航班跟蹤網站（https://flightaware.com/live/flight/WJA1508/history/20150814/1720Z/CYYC/KSFO/tracklog）的航班航跡數據。將HTML表提取爲R

我試過XML，RCurl和Curl包，但是我沒有工作。我認爲很可能是因爲我無法弄清楚如何避免SSL以及包含關於航班狀態的註釋的列（即，從頂部的前兩個和從底部的第三個）。

任何人都可以知道如何提取此表int R嗎？

來源

2015-08-15 Emad

，如果你分享你有什麼到目前爲止已經試過它工作得更好。 –

他們有一個[API]（http://flightaware.com/commercial/flightxml/pricing_class.rvt）（是）是付費的事情，但這可能是他們在http第6項中明確告訴你的原因：//flightaware.com/about/termsofuse刮取是違反ToS的。 – hrbrmstr

正如@hrbrmstr在上述評論中指出的那樣，這違反了FlightAware的TOS，但是您對您的代碼所做的事情就是您的業務。 :)這應該讓你最那裏的方式使用rvest包：

library(rvest) 

u <- "https://flightaware.com/live/flight/WJA1508/history/20150814/1720Z/CYYC/KSFO/tracklog" 

html_read <- html(u) 
tbl <- html_table(
    html_nodes(html_read, "table"), 
    fill=TRUE, 
    header=FALSE, 
    trim=TRUE 
)[[2]] 

## Subset to the first row of data and remove all extra 
## columns: 
tbl_o <- tbl[6:nrow(tbl), ] 
tbl_o <- tbl_o[,colSums(is.na(tbl_o))!=nrow(tbl_o)] 

names(tbl_o) <- c(
    "Time", "Lat", "Lon", 
    "Course", "Direction", 
    "KTS", "MPH", "Alt", 
    "Rate", "Location" 
) 

str(tbl_o)

其中產量：

'data.frame': 292 obs. of 10 variables: 
$ Time  : chr "Fri 01:41:34 PM" "Fri 01:48:59 PM" "Fri 01:49:14 PM" "Fri 01:50:05 PM" ... 
$ Lat  : chr "51.0833" "51.1551" "51.1683" "51.2235" ... 
$ Lon  : chr "-113.9667" "-114.0209" "-114.0209" "-114.0220" ... 
$ Course : chr "335°" "0°" "0°" "358°" ... 
$ Direction: chr "Northwest" "North" "North" "North" ... 
$ KTS  : chr "20" "201" "219" "149" ... 
$ MPH  : chr "23" "231" "252" "171" ... 
$ Alt  : chr "3,500" "4,900" "5,200" "6,800" ... 
$ Rate  : chr "" "222" "1,727" "1,701" ... 
$ Location : chr "Edmonton Center" "FlightAware ADS-B (CYYC)" "FlightAware ADS-B (CYYC)" "FlightAware ADS-B (CEG2)" ...

來源

2015-08-15 03:34:27

非常感謝你，Forrest！這正是我想要做的:) – Emad

非常歡迎，我已經在過去與這些細節作鬥爭，很高興有一個良好的起點工作。 :) –

將HTML表提取爲R

回答

相關問題