Cloudconnect CSV緩衝區大小

Question

當我嘗試從一個zip文件中加載一個大的CSV，執行日誌給我下面的錯誤：

----------------------------------------- Error details ------------------------------------------ 
    Component [Clientes:CLIENTES1] finished with status ERROR. 
    The size of data buffer is only 100663296. Set appropriate parameter in defaultProperties file. 
-------------------------------------------------------------------------------------------------- 

我如何可以設置默認屬性相應的參數文件？

我想這link，但我cloudconnect運行配置頁是從鏈接不同：

我創建的參數文件，並用正確的價值觀充滿了更多的參數，如說教程（代碼波紋管）並在屏幕上出現相同的錯誤。

Name: -config; Value: new_buffer_size.txt 

的new_buffer_size.txt內容剛剛這一行：DEFAULT_INTERNAL_IO_BUFFER_SIZE = 200000000

我怎樣才能解決這個問題？我需要在世界爆發之前解決這個問題。

Answer 1

CloudConnect旨在開發可在GoodData雲工作人員上運行的ETL，因此在這種情況下會超出一些較低級別的設置。唯一合法的方法是按照當前設置處理數據的方式修改ETL。關於文檔，引用的文章已過時。 GoodData docs團隊知道它是否正在準備文檔重構。

注意：您可能注意到，CloudConnect由Javlin的Clover ETL提供支持，因此您可以隨時查看他們的論壇，因爲您會發現如何在較低級別（無UI）上解決問題，但它會僅適用於本地機器上的數據處理。