hortonworks-data-platform

    0熱度

    1回答

    我有一個hadoop工作,我試圖在8節點Windows HDP羣集上運行。該作業擁有超過137000個輸入,並在大約3.5小時內處理84%至92%的地圖任務。然後減速器重新啓動,重新運行地圖任務。這項工作永遠不會結束。 我的問題是,reducer是否有超時讀取地圖輸出或從dfs導致reducer重新啓動塊?或者如果減速器遇到某種限制,它是否會產生一個錯誤消息,幫助我確定原因。我的第一個障礙是默認隊

    2熱度

    3回答

    我已經能夠連接到 hive --service hiveserver -v -p 10001 使用下面的Java與創建hiveserver(1): TSocket transport = new TSocket("hive.example.com", 10001); transport.setTimeout(999999999); TBinaryProtocol protocol = n