Hadoop中

Question

從稀疏矩陣中讀特定的行塊我有一個矩陣店如下

ROWID，ColumnID的，價值

我想只讀行的塊併發送它映射到一個映射器。例如，對於映射器，id = 1,2,3,4的行，5,6,7,8到另一個，... 是否可以這樣做？

Answer 1

不，這可能是不可能的，除非你跳過一些嚴重的箍。這是減少階段的目的！讓rowid成爲縮小鍵（或者基於它的一些計算......例如(rowid-1)/4），那些塊將被髮送到同一個縮減器。