2013-03-08 44 views
1

Couchbase + Hadoop串聯用於日誌文件處理的安靜流行示例。用於存儲大量記錄的Couchbase模式

Hadoop用於MapReduce作業和存儲日誌文件,Couchbase用於存儲和查詢(Hadoop作業的)結果。

如果我想查詢特定的日誌文件怎麼辦? Hadoop不擅長這一點。
什麼是最佳選擇? Couchbase是否適合某種用例或者是否有更好的選擇? Couchbase中這個目標是否有任何限制?

回答

0

這可能是一個不錯的選擇,但你要記住,Couchbase在內存中保存的密鑰(這允許服務器是非常快的所有設置操作/獲取/刪除...)

所以取決於您在全球範圍內的許多條目。

我們經常看到這對Hadoop + Couchbase的原因是爲了讓Hadoop處理「BigData」本身,使用Couchbase來快速訪問這些數據的子集(可能非常大)。