2016-04-24 73 views
0

我們正在測試公司希望在不久的將來將其部署到生產環境中的CDH 5.6,但我們仍然遇到了一個沒有答案的問題。通過cloudera manager爲多個集羣配置交叉服務

目前我們正在與兩個由Cloudera Manager管理的集羣進行合作:Central和Ingestion。我們的目標是在服務集羣中分離諸如HDFS,Hive,Spark,Hue以及Central Flux,Sqoop,Kafka等服務。

當我們嘗試將一個羣集與另一個羣集連接時,我們希望能夠配置Sqoop2-2或Flume-2服務(Ingestion cluster)與HDFS服務直接對話(位於中央羣集)。但是,就我們所知,我們無法在Cloudera Manager中執行此操作,導致它在配置中顯示的唯一服務位於中央羣集中。例如,如果我們嘗試配置色相服務(中央集羣)與Sqoop2-2服務(攝入),我們不能在順化服務配置選擇Sqoop2-2服務:

Hue service configuration for Central Cluster, only shows Sqoop2 service, not Sqoop2-2

我們想連接這個的:

Sqoop2-2 service in Ingestion cluster

是否有通過的Cloudera Manager配置在多個集羣跨服務的方式,或者我們需要手動修改HDFS-site.xml中連接Sqoop2-2服務(攝入)與HDFS服務(中央)?

在此先感謝您的答案。

此致敬禮。

回答

0

我不相信有一種方法可以在cloudera經理中做到這一點。通過將/etc/hadoop/conf/hdfs-site.xml中的大部分數據從存儲羣集用於提取羣集,您可能會完成這些工作。

無論如何將這些分開的原因是什麼?通常情況下,您會希望守護進程儘可能靠近存儲,以獲得最佳性能。