摘要:監(jiān)控?cái)?shù)據(jù)查看監(jiān)控?cái)?shù)據(jù)查看用戶可于產(chǎn)品界面右側(cè)彈框中查看集群監(jiān)控?cái)?shù)據(jù),也可進(jìn)入監(jiān)控視圖中進(jìn)行詳細(xì)查看集群及各節(jié)點(diǎn)監(jiān)控?cái)?shù)據(jù)信息。
通過(guò)UHadoop集群列表頁(yè)面進(jìn)入集群管理頁(yè)面:
2、獲取當(dāng)前節(jié)點(diǎn)配置信息本例中,Master 節(jié)點(diǎn)數(shù)量 2,機(jī)型為 C1-large;Core 節(jié)點(diǎn)數(shù)量為 2,機(jī)型為 F1-large。
3、添加節(jié)點(diǎn)點(diǎn)擊添加節(jié)點(diǎn)后彈窗如下:
輸入節(jié)點(diǎn)初始密碼,點(diǎn)擊確定,等待節(jié)點(diǎn)創(chuàng)建。
4、刪除節(jié)點(diǎn)選中需要下線的節(jié)點(diǎn),先點(diǎn)擊下線,待節(jié)點(diǎn)狀態(tài)變?yōu)椤安豢捎谩睍r(shí),點(diǎn)擊刪除。
如果節(jié)點(diǎn)長(zhǎng)時(shí)間處于下線狀態(tài),可提工單處理。
5、集群登錄a) 通過(guò)控制臺(tái)登錄。如果節(jié)點(diǎn)機(jī)型是物理機(jī),那么由于不同服務(wù)器廠商標(biāo)準(zhǔn)不同,暫不能通過(guò)控制臺(tái)登錄集群。
b) 綁定外網(wǎng)eip,本地可通過(guò)外網(wǎng)ssh連接登錄。目前僅master節(jié)點(diǎn)支持綁定。Eip使用詳情請(qǐng)見(jiàn) EIP說(shuō)明文檔 本例中可通過(guò)”ssh root@106.75.135.10 -p22”進(jìn)行登錄。
c) 通過(guò)云主機(jī)(uhost)內(nèi)網(wǎng)ssh進(jìn)行登錄。本例中可在云主機(jī)上通過(guò)”ssh root@10.13.186.23 -p22”進(jìn)行登錄。 登錄密碼為集群創(chuàng)建時(shí)設(shè)置的密碼
6、節(jié)點(diǎn)密碼重置可在【節(jié)點(diǎn)管理】頁(yè)面,對(duì)節(jié)點(diǎn)密碼重置。
7、節(jié)點(diǎn)重啟目前節(jié)點(diǎn)的重啟是通過(guò)【關(guān)機(jī)】【開(kāi)機(jī)】實(shí)現(xiàn)的。
如有重啟需求,請(qǐng)?jiān)凇竟?jié)點(diǎn)管理】頁(yè)面中,先對(duì)節(jié)點(diǎn)【關(guān)機(jī)】,再對(duì)節(jié)點(diǎn)做【開(kāi)機(jī)】。
通過(guò)右側(cè)彈出框點(diǎn)擊進(jìn)入
2、應(yīng)用開(kāi)啟若創(chuàng)建時(shí)未選擇部署該服務(wù),可在控制臺(tái)點(diǎn)擊開(kāi)啟并選擇所需版本。
3、服務(wù)關(guān)閉、重啟頁(yè)面可進(jìn)行相應(yīng)服務(wù)關(guān)閉,以及服務(wù)重啟
4、參數(shù)調(diào)整4.1 點(diǎn)擊參數(shù)配置可進(jìn)行參數(shù)調(diào)整
4.2 在界面修改已有參數(shù),修改后確認(rèn)重啟生效
4.3 新參數(shù)的配置添加
參數(shù)名稱: 您需要添加的參數(shù)名稱。
使用范圍: 該參數(shù)所要應(yīng)用的范圍。目前支持cluster(整個(gè)集群)、master(所有master節(jié)點(diǎn))、core(所有core節(jié)點(diǎn))、task(所有task節(jié)點(diǎn))。
文件: 參數(shù)應(yīng)存在位置。
參數(shù)值: 您設(shè)置的參數(shù)值。
4.4 參數(shù)刪除
一些非必要參數(shù)可在控制臺(tái)進(jìn)行刪除操作。
5、配置隊(duì)列5.1 選擇 應(yīng)用-hadoop-隊(duì)列配置 進(jìn)行隊(duì)列配置
5.2 選擇 創(chuàng)建隊(duì)列
5.3 輸入隊(duì)列名稱,點(diǎn)擊確定
5.4 修改隊(duì)列配置
5.5 隊(duì)列歷史配置回退
若用戶對(duì)隊(duì)列配置進(jìn)行修改后想要回退到歷史配置,可使用此功能
更多關(guān)于隊(duì)列配置內(nèi)容可參考隊(duì)列配置及Apache官網(wǎng)介紹。
監(jiān)控視圖中修改相應(yīng)集群和集群節(jié)點(diǎn)的告警模板。
也可到監(jiān)控頁(yè)面進(jìn)行對(duì)應(yīng)產(chǎn)品的告警設(shè)置與告警模板修改。
2、監(jiān)控?cái)?shù)據(jù)查看用戶可于產(chǎn)品界面右側(cè)彈框中查看集群監(jiān)控?cái)?shù)據(jù),也可進(jìn)入監(jiān)控視圖中進(jìn)行詳細(xì)查看集群及各節(jié)點(diǎn)監(jiān)控?cái)?shù)據(jù)信息。
===== 外網(wǎng)訪問(wèn)配置 =====
綁定外網(wǎng)IP:
目前只支持對(duì)master節(jié)點(diǎn)配置外網(wǎng)IP,可以配置防火墻限制訪問(wèn)IP。
1.申請(qǐng)彈性IP
2.為Master節(jié)點(diǎn)綁定IP
3.設(shè)置防火墻策略
請(qǐng)參考:防火墻操作指南
4.為綁定外網(wǎng)IP的主機(jī)配置防火墻
選中數(shù)集群,在右側(cè)的管理界面選中均衡數(shù)據(jù)按鈕,均衡數(shù)據(jù)的過(guò)程會(huì)對(duì)集群的性能產(chǎn)生一定影響,持續(xù)時(shí)間根據(jù)集群內(nèi)數(shù)據(jù)量,以及均衡程度而不同。
控制臺(tái)【Yarn Application跟蹤】頁(yè)面的信息來(lái)自集群中的 Yarn 服務(wù)。可查最近15天內(nèi)提交的 Application 情況。
對(duì)于 MapReduce、Spark 類型 Application,可查子任務(wù)日志、以及 Application Master 日志詳情。
暫不支持查看其他類型的 Application 詳情。
Yarn Application 狀態(tài)說(shuō)明:
狀態(tài)說(shuō)明NEWApplication請(qǐng)求到ID和可用資源后,狀態(tài)為NEWNEWSAVINGResourceManager接收到Application的詳細(xì)資源請(qǐng)求后,狀態(tài)為NEWSAVINGSUBMITTEDResourceManager存儲(chǔ)Job信息后,狀態(tài)為SUBMITTEDACCEPTEDResourceManager的Scheduler做資源、用戶權(quán)限等驗(yàn)證,驗(yàn)證通過(guò)后,狀態(tài)為ACCEPTEDRUNNING資源就緒,開(kāi)始執(zhí)行ApplicationFINISHEDJob如期執(zhí)行完畢,狀態(tài)為FINISHEDFAILED執(zhí)行失敗KILLED由用戶終止了Job文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://m.specialneedsforspecialkids.com/yun/126819.html
摘要:也可以將托管集群設(shè)置為快捷方式,通過(guò)左側(cè)快捷方式菜單欄點(diǎn)擊進(jìn)入。框架集群中僅部署。用于做存儲(chǔ)集群,有專屬的節(jié)點(diǎn)機(jī)型。節(jié)點(diǎn)管理節(jié)點(diǎn),負(fù)責(zé)協(xié)調(diào)整個(gè)集群服務(wù)。目前僅節(jié)點(diǎn)支持綁定。通過(guò)云主機(jī)內(nèi)網(wǎng)進(jìn)行登錄。登錄密碼為集群創(chuàng)建時(shí)設(shè)置的密碼。 快速上手本篇目錄創(chuàng)建集群提交任務(wù)本文檔將帶領(lǐng)您如何創(chuàng)建UHadoop集群,并使用UHadoop集群完成數(shù)據(jù)處理任務(wù)。創(chuàng)建集群本章簡(jiǎn)單介紹了用戶使用UHadoop服務(wù)...
摘要:查看上的歷史日志查看上的歷史日志任務(wù)的日志在任務(wù)運(yùn)行結(jié)束之后會(huì)上傳到上,當(dāng)日志文件過(guò)大無(wú)法通過(guò)來(lái)查看時(shí),可以通過(guò)將日志文件從上下載下來(lái)查看。掛載在允許的主機(jī)上執(zhí)行 常用操作本篇目錄應(yīng)用的Web接口查看日志配置NFS掛載hdfs到本地應(yīng)用的Web接口Hadoop 提供了基于 Web 的用戶界面,可通過(guò)它查看您的 Hadoop 集群。Web 服務(wù)會(huì)在主節(jié)點(diǎn)上運(yùn)行(Active NameNode或...
摘要:架構(gòu)架構(gòu)元數(shù)據(jù)管理元數(shù)據(jù)管理元數(shù)據(jù)管理創(chuàng)建集群時(shí)可在控制臺(tái)開(kāi)啟元數(shù)據(jù)獨(dú)立管理。若項(xiàng)目中已開(kāi)啟過(guò)元數(shù)據(jù)獨(dú)立管理,則新集群開(kāi)啟該功能時(shí),不再創(chuàng)建新的,而是將新集群的元數(shù)據(jù)存儲(chǔ)于已有的中。 元數(shù)據(jù)管理本篇目錄介紹產(chǎn)品架構(gòu)元數(shù)據(jù)管理介紹UHadoop 支持將 Hive-Metastore 的數(shù)據(jù)庫(kù)獨(dú)立于 Hadoop 集群部署,也支持多個(gè)集群訪問(wèn)同一個(gè) Hive 元數(shù)據(jù)庫(kù),可在控制臺(tái)對(duì)其做管理。產(chǎn)品...
摘要:設(shè)置,如果選擇默認(rèn),可以直接回車設(shè)置,如果選擇默認(rèn),可以直接回車創(chuàng)建的同時(shí),也會(huì)給創(chuàng)建一個(gè)客戶端文件,輸入客戶端文件名這里測(cè)試生成一個(gè)的文件一路回車下去,會(huì)生成文件客戶端客戶端客戶端把部署時(shí)生成的客戶端用戶文件,拷貝到本地。 配置openvpn本篇目錄1.服務(wù)端2.客戶端3. 配置hosts按以下步驟,可以在綁定EIP的uhost安裝openvpn,下面以centos7操作系統(tǒng)示例:1.服務(wù)...
摘要:集群運(yùn)行慢時(shí),通常會(huì)在日志中可以查找到明顯的異常,或者花費(fèi)時(shí)間長(zhǎng)的操作。檢查集群節(jié)點(diǎn)的運(yùn)行狀態(tài)檢查集群節(jié)點(diǎn)的運(yùn)行狀態(tài)管理群集上部署的各種服務(wù)。如果主節(jié)點(diǎn)遇到性能問(wèn)題,整個(gè)群集都會(huì)受到影響。工作的不均衡分配可能會(huì)導(dǎo)致處理速度較慢。 故障排查本篇目錄任務(wù)執(zhí)行失敗排查工具故障描述集群運(yùn)行速度慢任務(wù)執(zhí)行失敗1.查看console輸出日志查看任務(wù)執(zhí)行時(shí)控制臺(tái)輸出的log,檢查是否有ERROR2.查看任...
閱讀 430·2024-11-07 18:25
閱讀 130684·2024-02-01 10:43
閱讀 923·2024-01-31 14:58
閱讀 893·2024-01-31 14:54
閱讀 82948·2024-01-29 17:11
閱讀 3224·2024-01-25 14:55
閱讀 2036·2023-06-02 13:36
閱讀 3133·2023-05-23 10:26