datalab＆谷歌bigQuery客戶端 - 試圖在數據幀中執行BQ更新命令

Question

我有一個表與許多（數百）&後來將成千上萬的更新查詢，我想從數據實驗室執行。

的代碼如下： 與命令讀取表：

%%sql --module std_sql_table 
WITH q1 as (
    SELECT * FROM `speedy-emissary-167213.pgp_orielresearch.update_queries` 
) 
select * from q1 

import datalab.bigquery as bq 
#uses panda for the dataframe 
query_table_df = bq.Query(std_sql_table).to_dataframe(dialect='standard',use_cache=True) 
print(query_table_df.head(10)) 
col_name = list(query_table_df) # the name of the column 
print(col_name) 
#THIS LOOP IS FOR THE UPDATE COMMAND ROWS THAT I WANT TO EXECUTE 

#for index, row in query_table_df.iterrows(): 
    #print "running " + row[col_name] 
    #row_query = row[col_name] 
    #query_result_row_df = bq.Query(row_query).to_dataframe(dialect='standard',use_cache=True) 

的輸出是下面，我想在表中執行的每一行： 0 UPDATE speedy-emissary-167213.pgp_orielresear... 1 UPDATE speedy-emissary-167213.pgp_orielresear ... 2 UPDATE speedy-emissary-167213.pgp_orielresear... 3 UPDATE speedy-emissary-167213.pgp_orielresear ... 4 UPDATE speedy-emissary-167213.pgp_orielresear... 5 UPDATE speedy-emissary-167213.pgp_orielresear ... 6 UPDATE speedy-emissary-167213.pgp_orielresear... 7 UPDATE快速-使者 - 167213.pgp_orielresear ... 8 UPDATE speedy-emissary-167213.pgp_orielresear... 9 UPDATE迅速-使者 - 167213.pgp_orielresear ... [u'f0_']

任何想法非常歡迎！

Answer 1

請閱讀以下文檔： https://cloud.google.com/bigquery/docs/reference/standard-sql/data-manipulation-language

基本上你需要合併更新語句，否則你會打的配額問題，付出比需要更多的和得到更差的性能。 Bigquery適用於分析，但不應將其視爲通用數據庫。