bq加載錯誤「無法將值轉換爲字符串」

Question

我試圖通過bq命令 將日誌從Google Cloud Storage加載到BigQuery，並且出現了「無法將值轉換爲字符串」的錯誤。

我的例子中數據

{"ids":"1234,5678"} 
{"ids":1234} 

我的例子架構

[ 
    { "name":"ids", "type":"string" } 
] 

似乎ID不能由無報價單在轉換ID。 數據由fluent-plugin-s3製作，但由逗號連接的多個ID可以用引號綁定，而不是單個id。

如何將這些數據加載到BigQuery？

在此先感謝

Answer 1

好檢查不同fluentd的插件，可以幫助你，也許

• https://github.com/lob/fluent-plugin-json-transform
• https://github.com/tarom/fluent-plugin-typecast