apache-tez

    0熱度

    2回答

    感謝您在屏幕截圖中詳細發佈此內容。我遵循了您提到的相同步驟,但我無法正確安裝。我遇到的錯誤是 錯誤:無法找到或加載主類org.apache.tez.dag.app.DAGAppMaster 我已經下載了tez的構建版本。 Apache Tez版本:0.8.4,Hadoop版本:2.6.0。 我TEZ-site.xml中是 <?xml version="1.0" encoding="UTF-8"?>

    1熱度

    1回答

    我已經安裝了Apache Tez 0.8.1,Hadoop 2.7.0版和Hive 2.01版。我能夠成功運行Map Reduce Jobs.But,當我配置配置單元並試圖運行一個簡單的計數查詢,它返回下面的錯誤。從錯誤它試圖尋找一個jar,我已經把jar放在classpath中,但仍然沒有解決錯誤。 請幫我解決這個問題。 hive> select count(*) from sample1;

    0熱度

    1回答

    我想在Hive v1.2.1中執行以下查詢,其中field_3是從另一個表中查詢的。 select user_id, start_date, field_3 as stop_date from some_table; 對於返回的每個記錄,field_3的值是相同的。問題是它存儲在另一個表中。爲了得到這個價值,我可以得到它如下。 select max(some_field) as stop_d

    8熱度

    1回答

    問題 - 我在AWS EMR運行1個查詢。它通過拋出異常失敗 - java.io.FileNotFoundException: File s3://xxx/yyy/internal_test_automation/2016/09/17/17156/data/feed/commerce_feed_redshift_dedup/.hive-staging_hive_2016-09-17_10-24-2

    3熱度

    1回答

    我有一個查詢及其關聯的query and query plan(請參閱要點)的模擬數據。 在表lte_data_tenmillion行數是千萬 表中的用戶數據的行數是100000 對於兩個表沒有行具有在subscriber_id列中的空值。 我發現很難理解爲什麼查詢計劃顯示掃描的行數(應用謂詞後:subscriber_id不是null(類型:布爾值))恰好爲原始行數的一半。 類似的情況是用戶表的過

    2熱度

    1回答

    我得到的Hadoop集羣LeaseExpiredException - 尾-f /無功/日誌/ Hadoop的HDFS/Hadoop的HDFS-的NameNode-IP-172-30 -2-148.log 2016年9月21日11:54:14533 INFO BlockStateChange(在8020 IPC服務器處理器10 ):BLOCK * InvalidateBlocks:添加blk_10

    0熱度

    1回答

    我已經試過幾個選擇,但我只看到配置設置合併小文件能像下面大文件蜂巢ORC表,但反之versa.I正在尋找創建的文件大小150kb。 set hive.merge.tezfiles=true; set hive.merge.smallfiles.avgsize=128000; set hive.merge.size.per.task=128000;

    0熱度

    1回答

    我有一個奇怪的問題蜂巢殼。我使用Apache原始包創建了一個Hadoop系統。我用tez。 爲了測試系統,我將NY出租車數據加載到蜂巢中沒有任何問題。數據集有大約1100萬行。如果我在蜂巢外殼中選擇Stages,它正在工作。如果我使用的功能,如本 select count(*) from yellow; 或 select sum(trip_distance) from yellow where

    2熱度

    1回答

    我使用Hive2與TEZ。當我運行查詢它給出瞭如下圖所示執行錯誤。 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask ERROR [432a4475-d246-4596-ad4c-54de6fea86c8 main] exec.Task: Failed to execut

    2熱度

    1回答

    我想在Hive-Tez上運行查詢後獲取Map-Reduce日誌的解釋? INFO之後的內容:傳達的是什麼? 這裏我附上一個樣本 INFO : Session is already open INFO : Dag name: SELECT a.Model...) INFO : Tez session was closed. Reopening... INFO : Session re-esta