amazon-athena

0熱度

1回答

我們的s3桶通常有許多子目錄，這樣一個桶的路徑類似s3：functional-group/service/org-tenant-company-id/entity-id/actual-data 我們正在研究Athena，以便能夠在該/實際數據級別上查詢數據，但在org-tenant-company-id中查詢。因此，我們似乎需要一種方法爲該org-tenant-company-id創建一個列或分區

2熱度

2回答

雅典娜JDBC輸出格式

當您在雅典娜執行查詢時，結果通常以CSV格式提供。我正在尋找其他可能的輸出格式，如TSV或其他，因爲我的一列已經有CSV值。我的數據 A a,b,c 123 B a,b 123 當我給下面的查詢： select * from table ; 我得到的結果以CSV像 """A""","""a","b","c" , 123 我需要它是TSV。謝謝

0熱度

1回答

數據彙總和200億記錄平均值

記錄始於每天使用以下模式創建的AVRO文件。「attribute_key」和「attribute_value」記錄中存儲了20種不同的屬性類型，每個測量中也包含時間戳和device_id。 "fields" : [ {"type":"string", "name":"device_id"}, {"type":"string", "name":"record_date"}, {"type":

3熱度

1回答

在輸入無可行的替代「創建外部」，而在這樣的配置單元格式使用在S3中雅典娜

我已存儲分區數據創建分區。 /bucket/date=2017-02-20 /bucket/date=2017-20-25 現在我從雅典娜運行下面的查詢來創建分區 CREATE EXTERNAL TABLE hive3( battery double, longitude double, application string, latitude double, device_id string,

1熱度

1回答

使用Amazon Athena創建表並查詢json數據？

我想查詢使用Amazon雅典娜格式的JSON數據： [{"id":"0581b7c92be", "key":"0581b7c92be", "value":{"rev":"1-ceeeecaa040"}, "doc":{"_id":"0581b7c92be497d19e5ab51e577ada12","_rev":"1ceeeecaa04","node":"belt",

2熱度

1回答

AWS雅典娜：使用「文件夾」的名稱作爲分區

我有成千上萬的存儲在S3與以下路徑個人JSON文件（對應於一個錶行）：s3://my-bucket/<date>/dataXX.json 當我在DDL創建我的表，是它可以通過S3路徑中的當前數據進行分區？（或者至少在一個新列中添加值）感謝

2熱度

1回答

R連接到AWS Athena

我試圖根據我在線閱讀的內容連接到AWS Athena，但我遇到了問題。步驟採取更新的Java 替換用戶/與ACCESSKEY /祕密密鑰通ACCESSKEY通/祕密密鑰使用用戶名/密碼以及任何想法？錯誤消息：錯誤.jcall（DRV @ jdrv，「Ljava/SQL /連接;」，「連接」，as.character（URL）[1]，：的java.sql .SQLException

6熱度

5回答

亞馬遜雅典娜不解析雲端日誌

我遵循Athena getting started guide並嘗試解析我自己的Cloudfront日誌。但是，這些字段沒有被解析。我用一個小測試文件，內容如下： #Version: 1.0 #Fields: date time x-edge-location sc-bytes c-ip cs-method cs(Host) cs-uri-stem sc-status cs(Referer)

0熱度

1回答

亞馬遜雅典娜表創建失敗，「輸入沒有可行的選擇」創建外部「

這是我第一次嘗試在雅典娜製作我自己的表，所以請溫柔:)我有幾個其他表基於AWS示例運行在此數據庫沒有問題，所以我相信數據庫安裝正確。此外，我敢肯定我的正則表達式非常殘酷，請嘗試忽略它！我有存儲在S3有些VPC流量日誌，日誌文件的格式是： 2 123456654321 eni-ae343be4 100.75.233.178 172.31.26.162 49178 80 6 6 270 14888

1熱度

1回答

通過R連接到雅典娜

我指的是連接R到雅典娜的this article。當定義司機，我收到以下錯誤：錯誤.jfindClass（as.character（driverClass）[1]）：找不到類我做了一些研究和我抵達this page。接受的答案有一個評論說明了同樣的問題。但是，提供的解決方案（即重新啓動R）不起作用。我寫了下面的代碼，直到現在。 library("pacman") pacman::p_lo