摘要:點擊創(chuàng)建集群按鈕開始創(chuàng)建集群資源點擊創(chuàng)建集群按鈕開始創(chuàng)建集群資源創(chuàng)建集群創(chuàng)建集群設置地域和可用區(qū)信息設置地域和可用區(qū)信息請根據您的需要,在創(chuàng)建集群向導中設置新集群所歸屬的地域及可用區(qū)信息。
智能大數據平臺USDP集群的創(chuàng)建過程,分為兩個部分,即在公有云控制臺中,創(chuàng)建USDP的集群資源,待創(chuàng)建完成后,進入您獨享的USDP管理服務開始規(guī)劃并創(chuàng)建大數據集群。
通過本篇指南,您可以了解到:
開始創(chuàng)建集群資源開始部署集群服務和組件參考本篇指南,開始創(chuàng)建并部署您的第一個USDP集群吧。
登陸UCloud云控制臺。
1 進入產品頁面進入公有云控制臺首頁后,點擊左上角“全部產品”,在“數據分析”類目中點擊“智能大數據平臺USDP”,進入USDP集群管理頁面。
2 點擊 創(chuàng)建集群 按鈕開始創(chuàng)建USDP集群資源3 設置地域和可用區(qū)信息請根據您的需要,在創(chuàng)建集群向導中設置新集群所歸屬的地域及可用區(qū)信息。
4 集群和軟件設置在此模塊需要您設置并完善新集群所屬VPC和子網信息、集群名稱填寫、框架及版本信息。
集群名稱也是高可用NameNode的Namespace名稱,需要字母和數字的組合,首位必須是字母
5 節(jié)點設置Master節(jié)點
管理節(jié)點,主要適合用于部署zookeeper、Journalnode、NameNode、Resourcemanager、Hmaster、Hive等管理服務,可視化組件如Hue、oozie也建議部署在Master節(jié)點上。
core節(jié)點
核心節(jié)點,適合用于存儲數據(HDFS)與運行任務。建議部署datanode、nodemanager、regionserver等服務。
Task節(jié)點
適合用于補充計算資源,建議只部署Nodemanager
Monitor節(jié)點
適合用于部署AlterManager、Grafana、InfluxDB、NodeExporter、Prometheus、USDPMonitor等監(jiān)控服務
6 訪問設置在此處填寫該集群資源的所有節(jié)點root用戶統(tǒng)一的密碼。
7 等待集群部署根據集群節(jié)點資源規(guī)模不同,可能需要的部署時間會有所差異,一般情況下,創(chuàng)建大約會在30分鐘左右完成。如下圖所示,狀態(tài)為正在部署中。
當狀態(tài)處于“運行”狀態(tài)的時,即可點擊 訪問USDP 按鈕,進入USDP管理頁面進行集群服務規(guī)劃及部署操作。
在已創(chuàng)建的USDP集群條目右側,點擊 訪問USDP 按鈕,進入USDP自有管理控制臺。
1 進入登錄頁面登錄到USDP管理控制臺第一次登錄需要設置admin用戶名的登錄密碼。如下所示:
2 添加服務和組件在右上角“當前集群”右側點擊集群名稱,點擊選擇"添加服務或組件",開始部署集群服務。
3 選擇服務USDP支持大數據生態(tài)服務較多,在集群安裝時,用戶根據業(yè)務需要,靈活選擇所需安裝的組件。
您可以在“服務組合方案”出從推薦方案ABC中進行選擇,或“自定義”您需要的服務,其中“監(jiān)控”服務是默認必須選擇的,您無法取消。如下圖所示:
4 選擇組件安裝大數據生態(tài)各服務,均由不同的組件構成,安裝集群時,用戶可根據業(yè)務需求規(guī)劃,將不同的服務及組件分別都安裝到集群的那些節(jié)點上。
若用戶選擇安裝的服務較多或如上圖中用戶選擇推薦方案A(全量部署方案),由于組件選項非常多,建議采用“智能推薦”的方式進行選擇,或者在“智能推薦”的基礎上進行修改。如下圖所示:
以下,USDP建議,請您參考: NameNode建議安裝在usdp-xxx-masster的節(jié)點上,否則NameNode出現(xiàn)異常時,主從切換會失敗。節(jié)點名稱為usdp-xxx-masster的節(jié)點,建議用于部署zookeeper、Journalnode、NameNode、Resourcemanager、Hmaster、Hive等服務和組件的master節(jié)點,可視化和調度組件如Hue、oozie、kibana、zkui也建議部署在Master節(jié)點上。節(jié)點名稱usdp-xxx-core核心節(jié)點,建議用于存儲數據(HDFS)與運行任務。建議部署datanode、nodemanager、regionserver、presto work、impala。節(jié)點名稱usdp-xxx-task的節(jié)點,建議用于部署計算資源,建議用來部署Nodemanager、Client。節(jié)點名稱usdp-xxx-monitor的節(jié)點,建議用于部署AlterManager、Grafana、InfluxDB、NodeExporter、Prometheus、USDPMonitor等監(jiān)控服務。
您也可根據您的需要,進行靈活規(guī)劃并實時部署。
5 服務配置USDP默認將自身管理元信息、集群中大數據服務的相關元信息,統(tǒng)一配置至Master1節(jié)點的MySQL數據庫中,默認開啟“元信息數據庫統(tǒng)一配置”、默認填充該MySQL的相關連接信息,點擊 測試連接 按鈕即可測試是否正常,如下圖所示:
元信息數據庫配置涉及的服務有:HIVE、HUE、OOZIE、RANGER、UDS等五個服務。 MySQL版本:5.7.30
在此,請?zhí)顚懫渌嚓P服務的配置信息,其中“ELASTICSEARCH”、“HDFS”、“KAFKA”、“KUDU”等相關數據存儲目錄信息。如下圖所示:
“UDS”郵件服務器配置信息,可默認不填,并在集群安裝完成后進入USDP控制臺后,即可進入向導“下一步”。
元信息數據庫獨立配置若用戶計劃將“HIVE”、“HUE”、“OOZIE”、“RANGER”、“UDS”等服務的元信息數據庫獨立管理,此時,可點擊取消 “元信息數據庫統(tǒng)一配置” 右側的滑塊,同時,下方頁面即會顯示這些服務所需的數據庫連接填寫的表單,按要求填寫,并分別點擊下方的 測試連接 按鈕,按鈕變?yōu)榫G色,即為測試連接成功。此后,即可進入向導下一步中。如下圖所示:
6 部署信息總覽至此,為您總覽以上向導步驟中完成的所有選擇及配置信息匯總展示,請確認無誤后點擊“開始部署”按鈕開始集群的服務組件部署工作。如下圖所示:
7 安裝并啟動服務當服務安裝發(fā)生錯誤時,您可以點擊查看報錯節(jié)點“失敗”詳情,參考詳情提示信息,進行手動修復錯誤操作,之后點擊“全部重試”按鈕,重新進行服務組件部署工作。
部署過程中,各個節(jié)點正在進行的部署進展,均可通過進度條實時展示,可點擊 “詳情” 欄中的各個鏈接,查看當前進展詳情,如下圖所示:
點擊對話框 - “安裝任務欄” 的各個鏈接,幾個查看其單個安裝任務的執(zhí)行日志,這將在安裝過程中出錯時變得很有用。如下圖所示:
當安裝過程中出現(xiàn)任務失敗的情況,USDP會在左上角顯示 全部重試 按鈕,可點擊重試安裝。
待所有節(jié)點正常安裝成功后,即可點擊 完成 按鈕,退出集群服務安裝向導。此時新集群服務已安裝完成。
其他更多操作,請參考本文檔 “操作指南” 和 “開發(fā)指南” 相關章節(jié)文檔內容。
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉載請注明本文地址:http://m.specialneedsforspecialkids.com/yun/126931.html
摘要:進入首頁后,點擊左上角全部產品,在數據分析類目中點擊智能大數據平臺,進入集群管理頁面。 服務管理本篇目錄在公有云端USDP集群查看服務管理在USDP控制臺查看集群服務管理在智能大數據平臺USDP中,為便于用戶對集群及相關服務的管理,USDP提供較為友好的服務管理功能,譬如集群資源管理與服務管理的分離管理、大數據服務的基本監(jiān)控信息查看、服務配置文件修改、服務的組件啟停及管理、服務的Web UI...
摘要:進入首頁后,點擊左上角全部產品,在數據分析類目中點擊智能大數據平臺,進入集群管理頁面。控制臺集群節(jié)點管理詳情關于大數據集群中各個節(jié)點管理功能配置修改等操作,均可參考此處完成。 節(jié)點管理本篇目錄在公有云端USDP集群資源節(jié)點管理在USDP控制臺查看集群節(jié)點管理在智能大數據平臺USDP中,在云端實現(xiàn)了兩層管理能力,即公有云端的集群資源管理控制,和USDP自身控制臺的管理控制。為便于用戶對集群資源...
摘要:產品概述產品概述本篇目錄產品特點產品特點功能簡介功能簡介操作指南操作指南開發(fā)指南開發(fā)指南任務調度任務調度產品價格產品價格簡稱,是推出的云上智能化輕量級的大數據基礎服務平臺,能夠幫您快速構建起大數據的分析處理能力。 產品概述本篇目錄產品特點功能簡介操作指南開發(fā)指南任務調度產品價格UCloud Smart Data Platform(簡稱 USDP),是 UCloud 推出的云上智能化、輕量級的...
摘要:產品概述產品概述產品概述本篇目錄產品特點產品特點功能簡介功能簡介操作指南操作指南開發(fā)指南開發(fā)指南任務調度任務調度產品價格產品價格簡稱,是推出的云上智能化輕量級的大數據基礎服務平臺,能夠幫您快速構建起大數據的分析處理能力。 產品概述本篇目錄產品特點功能簡介操作指南開發(fā)指南任務調度產品價格UCloud Smart Data Platform(簡稱 USDP),是 UCloud 推出的云上智能化、...
摘要:產品概述產品概述本篇目錄產品特點產品特點功能簡介功能簡介操作指南操作指南開發(fā)指南開發(fā)指南任務調度任務調度產品價格產品價格簡稱,是推出的云上智能化輕量級的大數據基礎服務平臺,能夠幫您快速構建起大數據的分析處理能力。 產品概述本篇目錄產品特點功能簡介操作指南開發(fā)指南任務調度產品價格UCloud Smart Data Platform(簡稱 USDP),是 UCloud 推出的云上智能化、輕量級的...
閱讀 475·2024-11-07 18:25
閱讀 130815·2024-02-01 10:43
閱讀 951·2024-01-31 14:58
閱讀 916·2024-01-31 14:54
閱讀 83027·2024-01-29 17:11
閱讀 3287·2024-01-25 14:55
閱讀 2076·2023-06-02 13:36
閱讀 3189·2023-05-23 10:26