將Google表格加載到Big Query

Question

我已經能夠按照此處列出的說明將Google表格加載到大查詢中。

https://cloud.google.com/blog/big-data/2016/05/bigquery-integrates-with-google-drive

說我被難住了唯一的一點是，我要字段添加到架構。 因此，假設我在Google表格中有100列，所有這些列都需要加載到BQ中。這是否意味着我必須手動輸入100個模式名稱並選擇它們的字段類型？我做了一個，但我認爲有一種方法可以將Google表格中的所有內容自動加載到BQ中。

難道有人指着我正確的方向嗎？

謝謝！

Answer 1

你必須提供模式！

那麼如何使用常規的電子表格功能，並生成表格的數據在表格中的列標題。您可以首先使用最常用的數據類型，然後手動「修復」不同類型的字段。這可以作爲一個腳本來爲你工作，然後你用它來提供模式

另一方面 - 你可以檢查Table definitions based on Google Sheets source files。它可能有幫助

Answer 2

您可以爲您的Google Sheets文件創建table definition（但您必須使用命令行界面）。默認情況下，它將盡最大努力auto detect來自文件的表格模式。