2016-08-03 52 views
6

我有一個數據表和一個可擬合係數數據表。我想計算每行的擬合值。具有匹配列名稱的R data.table點積(對於每個組)

dt = data.table(a = rep(c("x","y"), each = 5), b = rnorm(10), c = rnorm(10), d = rnorm(10)) 
coefs = data.table(a = c("x","y"), b = c(0, 1), d = c(2,3)) 
dt 
# a   b   c   d 
# 1: x -0.25174915 -0.2130797 -0.67909764 
# 2: x -0.35569766 0.6014930 0.35201386 
# 3: x -0.31600957 0.4398968 -1.15475814 
# 4: x -0.54113762 -2.3497952 0.64503654 
# 5: x 0.11227873 0.0233775 -0.96891456 
# 6: y 1.24077566 -1.2843439 1.98883516 
# 7: y -0.23819626 0.9950835 -0.17279980 
# 8: y 1.49353589 0.3067897 -0.02592004 
# 9: y 0.01033722 -0.5967766 -0.28536224 
#10: y 0.69882444 0.8702424 1.24131062 

coefs # NB no "c" column 
# a b d 
#1: x 0 2 
#2: y 1 3 

對於DT每個a=="x"行,我想0*b+2*d;並且對於dt中的每個a=="y"行,我想要1*b+3*d

是否有一個數據表的方式來做到這一點沒有硬編碼的列名?我很高興將列名放在變量cols = colnames(coefs)[-1]中。

很容易將組和rbind一起循環,因此如果分組導致麻煩,請忽略該部分。

+0

我的相似問題:http://stackoverflow.com/q/19279075/對於它的價值,我認爲人們會關心動態匹配名稱是很自然的事情,並且這不會使這個問題成爲「移動目標「完全可以。 – Frank

回答

8

加入data.tables:

dt[coefs, res := b * i.b + d * i.d, on = "a"] 
# a   b   c   d  res 
#1: x 0.09901786 -0.362080111 -0.5108862 -1.0217723 
#2: x -0.16128422 0.169655945 0.3199648 0.6399295 
#3: x -0.79648896 -0.502279345 1.3828633 2.7657266 
#4: x -0.26121421 0.480548972 -1.1559392 -2.3118783 
#5: x 0.54085591 -0.601323442 1.3833795 2.7667590 
#6: y 0.83662761 0.607666970 0.6320762 2.7328562 
#7: y -1.92510391 -0.050515610 -0.3176544 -2.8780671 
#8: y 1.65639926 -0.167090105 0.6830158 3.7054466 
#9: y 1.48772354 -0.349713539 -1.2736467 -2.3332166 
#10: y 1.49065993 0.008198885 -0.1923361 0.9136516 

通常你會在這裏使用的矩陣產品,但是這將意味着你不得不相應子集強制到矩陣。這會導致複製,並且由於data.tables主要用於較大的數據,因此您希望避免複製。

如果你需要動態的列名,我想到的最簡單的解決方案實際上是一個eval/parse結構:

cols = colnames(coefs)[-1] 
expr <- parse(text = paste(paste(cols, paste0("i.", cols), sep = "*"), collapse = "+")) 
#expression(b*i.b+d*i.d) 

dt[coefs, res := eval(expr), on = "a"] 

也許別人可以提出一個更好的解決方案。

這裏是一個使用溶液矩陣乘法:

dt[, res := as.matrix(.SD) %*% unlist(coefs[a == .BY, .SD, .SDcols = cols]), 
    by = "a", .SDcols = cols] 

當然這使得副本,這是潛在的效率較低,則eval溶液。

+0

謝謝。有沒有可能不硬編碼列名?我很樂意把它們放入一個像'cols = colnames(coefs)[ - 1]'這樣的變量,然後怎麼去? – jf328

+3

請不要讓您的問題成爲移動目標。提出問題時提供所有規格。 – Roland

0

我發現所有數值類型列的data.table可以做算術運算(+, - ,*,/),但沒有名稱匹配 - 只是順序匹配。

> coefs 
    a b d 
1: x 0 2 
2: y 1 3 
> coefs[, .(b,d)] * coefs[, .(b,d)] 
    b d 
1: 0 4 
2: 1 9 
> coefs[, .(b,d)] * coefs[, .(d,b)] 
    b d 
1: 0 0 
2: 3 3 

所以基於該

> cols = colnames(coefs)[-1] 
> zz = rowSums(coefs[dt[,.(a)], .SD, on = 'a', .SDcols = cols] * dt[, .SD, .SDcols = cols]) 
> dt[, newcol := zz] 
+0

如果您不介意副本(通過將data.table強制爲一個矩陣而產生'rowSums'),​​您應該使用我最後的建議,即矩陣乘法。 – Roland

0

另一種替代的解決方案(但速度較慢)的做法是:

dt$res <- unsplit(Map(function(x,y){x$b*y$b + x$d*y$d}, split(dt, dt$a=="x"), 
       split(coefs,coefs$a=="x")),dt$a=="x") 

    dt 
    a   b   c   d  res 
1: x 0.47859729 1.3479271 0.5691897 1.1383794 
2: x 0.28491505 -0.3291934 1.8621365 3.7242730 
3: x -1.43894695 1.5555413 0.3685772 0.7371544 
4: x 0.04360066 0.1358920 0.5240700 1.0481400 
5: x -1.39897890 -0.0175886 -0.6876451 -1.3752901 
6: y -0.60952146 1.2331907 -0.3582176 -1.6841742 
7: y 0.31777772 1.4090295 -0.4053615 -0.8983067 
8: y 0.42758431 -0.3746061 2.1208417 6.7901094 
9: y -0.60701063 -0.9232092 1.9386482 5.2089341 
10: y -1.52042316 -0.8871454 -0.9314232 -4.3146927 

此相同的代碼將在基礎R工作,以及如果數據是已經data.frames

+0

這對大數據當然是無效的。 – Roland

+0

對,只是想表現出一種不同的做法。 –