2015-10-15 69 views
0

我需要將數據批量加載到具有用戶定義類型的表中,但請參閱批量加載程序中不支持用戶定義的類型。我在想,如果我將每行都作爲插入語句(5000萬)寫入文本文件,我可以並行加載插入語句的文本文件嗎?在cassandra中並行運行插入的文本文件

現在我只是使用複製命令來加載數據,但獲得約2500行/秒,因此加載6000萬條記錄相當緩慢。

試圖找出如果我無法使用bulkload實用程序,加載數據的最快方式是數據。

回答

1

您可以通過使用Cassandras asynchronous queries來編寫自己的程序,Datastax爲幾乎所有流行語言提供驅動程序。

+0

謝謝@威爾!只是做了編輯,因爲我試圖使用python來做到這一點,但我遇到了一些問題,因爲這是我第一次使用python ... – user2061886