我是SnappyData的新手,我試圖將大量數據導入到它中。因此,數據是從不同的來源創建的,並作爲csv文件存儲在每個位置的zip文件中。可以說,拉鍊的結構是zip1,zip2 ... zipn,每個zip包含完全相同的(header.csv,detail1.csv,detail2.csv,... detail15.csv)每個.csv具有相同的結構,這意味着zip1中的detail5.csv與zipn中的detail5.csv具有相同的列。所以我的問題是如何自動輸入?是否有這樣一組數據的導入命令?第一次很容易,因爲我使用創建外部表,但我如何導入其餘的idata?或者,更好的辦法是,如何將所有數據導入列(因爲我們有很多數據)或行(因爲我們可以根據它所來自的位置來劃分數據)表?SnappyData將多個csv文件中的數據導入到列表或行表中
1
A
回答
0
導入CSV的最快方法是在DataframeReader中對CSV使用內置的火花支持。 Afaik,不支持您需要的定製級別。但是,您可以輕鬆地運行快速工作來選擇具有相同架構的這些存檔文件中的文件,並使用org.apache.spark.sql.DataFrameReader.csv
相關問題
- 1. 根據列表將多個.csv文件導入到R中
- 2. 將單個CSV文件導入到MySQL中的多個表中
- 3. 根據不同表中的列將表導出到csv到多個文件
- 4. 將csv數據導入到mysql表中
- 5. 將多個.csv文件中的數據導入到單個數據框中
- 6. 使用Python將CSV文件導入到sqlite3數據庫表中
- 7. 如何將數據從csv文件導入到mysql表中?
- 8. 將CSV導入到列表Python中
- 9. 如何從數據框列表中寫入多個CSV文件?
- 10. VBA將多個CSV文件導入到excel中的多個工作表
- 11. 將表單數據插入到csv文件中逐行php
- 12. 將表格數據寫入到java中的多個CSV文件中
- 13. 如何將數據從.csv文件中導入到postgres數據庫表中?
- 14. 將多個文本文件導入到mysql數據庫中的不同表中
- 15. 將CSV數據導入到mySQL數據庫的表中
- 16. 將多個.csv文件導入到R
- 17. Python不會將數據寫入多個列表中的csv文件
- 18. 將多個文本/ csv文件導入到單個Excel工作表中
- 19. 將.csv文件導入到QT上的sqlite3數據庫表gui
- 20. 如何將CSV數據加載到比csv文件列多的Oracle表中?
- 21. 將150個csv文件導入到一個數據源中
- 22. 將csv輸入文件打印到列/行的表中
- 23. 將C#列表導出到Csv文件
- 24. 創建從csv文件一個新表,將數據導入到SQL Server 2005中
- 25. 將數據導入csv文件到mysql
- 26. 無法從csv文件導入多個行到sqlite數據庫
- 27. 如何將多個txt文件的數據導入到一個excel表單中?
- 28. 將csv文件導入到每個新數據庫中
- 29. 如何在Python中將數據列表寫入.csv文件?
- 30. 將數據插入到多個表中
並行讀取我將盡快爲您解答 – plambre