1

我正在努力估算我的Google雲計劃的每月總成本。谷歌雲存儲/大查詢成本估算

我的程序的功能是將來自Amazon S3服務器的輸入文件加載到Google的雲存儲平臺中。然後,它使用此導入的數據在Google BigQuery中創建一個表格,然後將創建的表格以JSON格式導回到雲存儲中。

假設我有一個大小爲50 GB的文件,它駐留在Amazon S3中。

我的程序會將這個50 GB的數據文件導入到雲存儲中,將它加載到BigQuery中的一個表中,最後將其導回到雲存儲。

我估計50GB文件包含600,000,000(600M)行。

Google Price Calculator雲存儲:

我已經把 '存儲數據' 領域的100 GB(50 GB輸入文件,50 GB導出的文件)。

我已經設置了「實體讀取」字段(假設每個實體是在我的表中的行)600,000,000(A讀操作必須執行將數據加載至BigQuery)

最後,我已將「實體寫入」字段設置爲1,200,000,000(當從S3導入數據到雲存儲時一次寫入操作,另一次從BigQuery中導出數據時寫入數據)

這給我2,530.52美元的月度費用估計,我發現對於50 GB的數據文件來說相當高。

我想知道的是我是否有估計值?

除了雲存儲成本外,我還會爲我的項目付出哪些其他成本? (因爲我也在使用Google Cloud Transfer服務)

+0

感謝您的信息。 – noobcoder

回答

3

不確定您填寫了哪個頁面,但在BigQuery頁面上沒有字段Entity Reads

下面是計算:

Storage 100 GB 
Streaming Inserts 0 MB 
Queries 10 TB 
Total Estimated Cost: $47.00 per 1 month 

https://cloud.google.com/products/calculator/#id=b395df1a-1fa8-4e7d-9dce-8a1a578916a8

請注意,負載/導出從/到文件是免費的,你只需要支付文件的存儲。

+0

即使我用於填充BigQuery表的50 GB數據文件駐留在Google Cloud Storage上,當數據導入到表中時,BigQuery是否還存在單獨的存儲成本? 而且我已將計算值存儲在雲端存儲計算器中。 – noobcoder

+0

是的,還有BigQuery表的存儲+ GCS存儲 – Pentium10

+0

因此,如果我將數據存儲在GCS中並將其導入BigQuery,那麼我將不得不爲GCS和BigQuery中的數據存儲付費? – noobcoder