amazon-athena

1熱度

2回答

您好我剛剛創建的AWS ATHENA架構如下 Create table test (BATCHJOBID bigint, CONFIGRECID bigint, ENDDATETIME string, ENDDATETIMETZID int, INTJNLID string, INTJNLTBLRECID bigint, PROCESSINGSTATUS int, STARTDATE

0熱度

1回答

紅移COPY或快照？

我正在使用AWS Redshift來讓用戶針對我的網頁中不存在的舊歸檔數據提交查詢。我所處理的所有用戶的總數據量都是幾TB。數據已經在s3桶中，按周分割成文件。大多數請求不會處理總共100GB以上的幾個文件。如果我在不使用時使用快照並刪除我們的羣集，或者我應該有一個較小的羣集，它不包含所有數據，並且只有在運行查詢時將S3中的數據複製到臨時表中？

0熱度

1回答

AWS Athena如何對S3文件中的模式更改做出反應？

當在S3上的文件在AWS Athena中創建表後，S3上的文件結構會發生什麼變化？對於如：如果文件以前有當表創建5列以及後來的新文件開始越來越多1列：一）在結束？ b）在兩者之間？當一些列不是在新文件中可用，會發生什麼？當列保持不變，但列順序的變化，會發生什麼？我們可以改變雅典娜表，以適應這些變化？

-1熱度

1回答

雅典娜（普雷斯托）SQL窗口功能

說我有雅典娜以下數據： id ts uid1 1499672134268 uid1 1499672134292 uid1 1499672136189 uid1 1499672136212 uid1 1499719927907 uid1 1499719927940 uid1 1499719927975 uid1 1499719927999 uid2 1499670000000

1熱度

1回答

Amazon Athena：如何在跳過列標題後查詢結果？

我對格式爲csv的數據使用Athena儀表板進行了簡單查詢。結果是帶有列標題的csv。當存儲結果，與s3.How列標題雅典娜店我可以跳過存儲標題列名，因爲我必須從結果使得新表，這是重複

2熱度

1回答

AWS Athena MSCK REPAIR TABLE對於一個小數據集來說需要很長的時間

我遇到了亞馬遜雅典娜的問題，我有一個小桶（36430對象，9.7 mb）和4個級別的分區（my-bucket/p1 = ab/p2 = CD/P3 = EF/P4 = GH/FILE.CSV），但是當我運行命令 MSCK REPAIR TABLE db.table 接管25分鐘，我有計劃把結核病的雅典娜大小的數據我不會這樣做，如果這個問題仍然存在有誰知道爲什麼要花太長時間？在此先感謝

0熱度

1回答

如何查詢Amazon S3中的數據

我正在創建一個Tableau Dashboard，其中包含源自Amazon DynamoDB的數據。現在，我使用Amazon LAMBDA將數據發送到亞馬遜S3水桶和我得到這個文件的S3桶， { "Items": [ { "payload": { "phase": "T", "tms_event": "2017-03-16 18:19:50"

2熱度

1回答

AWS上的OFFSET Athena

我想在AWS Athena上運行LIMIT和OFFSET子句的查詢。我以前支持，而the latter is not。有沒有使用其他方法來模擬此功能的方法？

0熱度

1回答

Hive使用逗號和時間戳加載csv

我嘗試將csv文件加載到Hive中。我有datetime列和包含逗號的列的問題。分隔符和逗號一樣。 CMBk7Y,HM - PEUVP,promo,11066,FRA,1401445,Asegment_DLBD,1,imp,2017-05-31 22:52:30,"U=dsp=mmh,bid=0000002,adv=189,cpg=3449,str=2117,cre=41836,exc=apn,p

0熱度

3回答

查詢Athena表的問題源存儲桶來自不同的帳戶

我爲S3存儲桶中不屬於我的帳戶的文件創建了Athena表。表被分區，當我運行MSCK REPAIR TABLE命令時，它成功並顯示不在Metastore中的分區。但是，當我查詢表它給下面的錯誤「您所查詢的有如下錯誤（S）：沒有足夠的權限來執行查詢此查詢運行反對」 .... ..「數據庫，除非查詢資格請張貼錯誤消息對我們的詢問ID論壇或聯繫客戶支持：...........」這可能是什麼問題