在hadoop之上的專賣店？

Question

是否有一個類似於構建在Hadoop之上的Vertica的列存儲庫。我不是在談論HBase，因爲它是稀疏矩陣存儲，並且無法獲得可以通過類似Vertica之類的方法實現的壓縮級別？

謝謝

Answer 1

你在找什麼類似RCFile？它是一種內部使用柱狀存儲的文件類型。

Answer 2

我還沒有使用Hadoop，但我知道Vertica一直在試圖與Hadoop集成。

http://www.vertica.com/the-analytics-platform/native-bi-etl-and-hadoop-mapreduce-integration/

Answer 3

RCFile是一個良好的開端。 RCFile將數據存儲在PAX佈局中 - 列內的塊可能與HDFS的塊大小一樣大。 VLDB 2011上有一篇論文，描述了另一種列式存儲格式here和一篇博文，簡短地比較了RCFile here。

Answer 4

看待Hadapt http://hadapt.com/

這是HadoopDB http://db.cs.yale.edu/hadoopdb/hadoopdb.html 的商業版本在耶魯大學開發的。它可以與面向列的DB（安裝在計算機集羣的每個節點上）一起工作，同時利用Hadoop進行容錯執行。