摘要:服務配置文件修改服務配置文件修改參考服務配置文件管理方式。其他存儲類服務管理其他存儲類服務管理其他存儲類服務管理其他存儲服務還有等,對這些存儲服務的管理方式,均與本篇指南中服務管理的管理方式類似,此處不再過多贅述。
在USDP1.0.0.0版本中,集群存儲類服務組件主要有Elasticsearch、HBase、HDFS、Kafka、KUDU、Zookeeper在內的6個服務組件,下面將以Zookeeper及HDFS為代表展示存儲類組件的管理操作方式。
通過本篇指南,您可以了解到:
Zookeeper服務管理HDFS服務管理其他存儲類服務管理點擊選擇左邊菜單導航欄-“服務管理”-“存儲類”,在展開的子類中點擊“ZOOKEEPER”,即可在右側窗口打開Zookeeper的管理頁面,如下圖:
Zookeeper 服務詳情概覽USDP會對支持的單個組件服務實現監控,并在USDP控制臺進行相關監控指標的可視化展示。
Zookeeper服務管理首頁展示了Zookeeper服務的監控指標(Leader數量、Followers數量、未同步的Followers數量、等待同步的數量、臨時節點數、數據大小、Znode數量,以及該服務不同角色對應的一些更細致的指標情況)如下圖所示:
控制臺監控指標可視化支持按時間進行查看,USDP預置了一些時間周期(默認為“1小時內”,還有“6小時內”、“12小時內”、“1天內”、“7天內”、“15天內”、“30天內”),也支持時間周期“自定義”,如下圖所示:
Zookeeper服務相關組件管理在Zookeeper組件管理頁面種,點擊“組件管理”選項卡,打開Zookeeper相關組件管理列表,如下圖所示:
在該管理頁面中,支持對Zookeeper分布的多臺節點上的QuarumPeermain組件進行單一/批量節點操作(服務的啟動、停止、重啟、刪除等),如下圖所示:
例如,對所有節點上的QuarumPeermain組件進行“停止”運行狀態操作時,管理平臺將自動檢測所選組件當前的工作狀態,如下圖所示:
例如,對所有節點上的QuarumPeermain組件進行“刪除”操作時,管理平臺將給您做出警示提醒,請您仔細閱讀提示信息,確保此次操作不是誤操作。如下圖所示:
點擊“確認”刪除按鈕,管理平臺將自動檢測所選組件當前的工作狀態,QuarumPeermain組件正在運行(“已啟動”狀態)時,是不允許直接刪除的。如下圖所示:
若確認需要刪除所選QuarumPeermain組件,請先“停止”運行,并再次執行“刪除”操作。
Zookeeper 服務組件擴展USDP管理控制臺支持對當前Zookeeper服務擴展更多節點。如下圖所示:
點擊“新增組件”按鈕,進入“新增組件或服務”向導,如下圖所示:
選擇QuarumPeermain組件需要擴展的節點主機,如下對話框截圖所示:
管理平臺檢測出,已加入該平臺的所有節點主機中,udp02節點上暫未運行QuarumPeermain組件,“勾選”udp02左側的復選框,點擊“確定”按鈕,進入“部署信息總覽”向導頁,如下圖所示:
經瀏覽確認無誤,點擊“開始部署”按鈕,管理平臺將為udp02節點安全QuarumPeermain組件,安裝無誤,將顯示安裝成功狀態,平臺會自動啟動該組件,如下圖所示:
安裝進度完成后,點擊“完成”按鈕。如下圖所示:
此時,可根據向導中表單要求,選擇需要擴展的新集群節點及服務預覽等,點擊“開始部署”即可完成服務擴展操作。
Zookeeper服務配置文件修改參考 服務配置文件管理 方式。
點擊選擇左邊菜單導航欄-“服務管理”-“存儲類”,在展開的子類中點擊“HDFS”,即可在右側窗口打開Hdfs的管理頁面,如下圖:
HDFS 服務詳情概覽HDFS服務管理首頁展示了HDFS服務的監控指標(NameNode是否存活、NameNode Active正常、JournalNode是否存活、ZKFC是否存活、Datanode死亡數、Datanode存活數、Datanode心跳超時數、HDFS空間使用率、HDFS塊丟失數、Block副本損壞個數、壞盤數量、Block個數、HDFS文件及目錄個數、HDFS已用容量、HDFS副本不足的Block數、未分配給HDFS的磁盤大小、可用堆內存、初始堆內存等)如下圖所示:
對HDFS GC相關監控(GC5分鐘內的頻率、GC耗時、GC MarkSweep標記耗時、GC MarkSweep 5分鐘標記頻率)如下圖所示:
對HDFS “堆內存使用大小”的監控,如下圖所示:
HDFS 服務相關組件管理參考 Zookeeper 服務相關組件管理 方式
HDFS 服務Web UIs便捷訪問USDP管理系統,根據HDFS 自身支持相關Web UI的特性,在集群管理頁面提供快速打開其相關的UI的能力。
鼠標懸停/點擊HDFS 服務管理頁面中“Web UIs”選項卡時,自動下拉展開HDFS 相關的頁面選項鏈接,如下圖所示:
點擊“[udp08] NameNode1 Web UI”/“[udp09] NameNode2 Web UI”,會自動在瀏覽器中打開新的標簽頁,并顯示udp08/udp09節點上的HDFS管理頁面,如下圖所示:
HDFS 服務配置文件修改參考 服務配置文件管理 方式。
其他存儲服務還有HBase、Kafka、Elasticsearch、KUDU等,對這些存儲服務的管理方式,均與本篇指南中 Zookeeper、HDFS 服務管理 的管理方式類似,此處不再過多贅述。
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/127207.html
摘要:進入首頁后,點擊左上角全部產品,在數據分析類目中點擊智能大數據平臺,進入集群管理頁面。 服務管理本篇目錄在公有云端USDP集群查看服務管理在USDP控制臺查看集群服務管理在智能大數據平臺USDP中,為便于用戶對集群及相關服務的管理,USDP提供較為友好的服務管理功能,譬如集群資源管理與服務管理的分離管理、大數據服務的基本監控信息查看、服務配置文件修改、服務的組件啟停及管理、服務的Web UI...
摘要:機器學習機器學習通過算法對大量數據進行分析,挖掘出其中蘊含的規律,并用于事物預測或者分類,有大量的計算需求。通過一站式智能大數據平臺支持的等分布式運算框架,可以高效的進行機器學習應用開發。在大數據業務系統中,所有技術棧生態均是圍繞著存儲進行擴展的,目前開源的主流存儲技術棧主要包含如下 3 種類型:· HDFS:Hadoop 系列套件,包含 Hive、Hbase、Phoenix 等;· Ela...
摘要:企業微信截圖企業微信截圖兼容最廣的一站式智能大數據平臺涵蓋了等眾多開源大數據組件,支持對這些組件進行運維中臺建設數據開發業務可視化等全棧式大數據開發運維管理。通過一站式智能大數據平臺支持的等分布式運算框架,可以高效的進行機器學習應用開發。背景在大數據業務系統中,所有技術棧生態均是圍繞著存儲進行擴展的,目前開源的主流存儲技術棧主要包含如下 3 種類型:· HDFS:Hadoop 系列套件,包含...
在互聯網市場的頭部效應下,企業所面臨的競爭壓力越來越大,如何有效解決獲客成本高、用戶黏性低、變現能力弱等問題,正是越來越多的企業開始構建大數據平臺的初衷。但由于大數據解決方案所涉及的組件錯綜復雜、技術門檻較高,且初期投入的資源和后期的維護成本較大,十分考驗企業的大數據平臺組建和運維能力。因此,UCloud大數據團隊于近期上線了大數據智能平臺(UCloud Smart Data Platform,下...
摘要:產品概述產品概述本篇目錄產品特點產品特點功能簡介功能簡介操作指南操作指南開發指南開發指南任務調度任務調度產品價格產品價格簡稱,是推出的云上智能化輕量級的大數據基礎服務平臺,能夠幫您快速構建起大數據的分析處理能力。 產品概述本篇目錄產品特點功能簡介操作指南開發指南任務調度產品價格UCloud Smart Data Platform(簡稱 USDP),是 UCloud 推出的云上智能化、輕量級的...
閱讀 284·2024-11-07 18:25
閱讀 130363·2024-02-01 10:43
閱讀 868·2024-01-31 14:58
閱讀 828·2024-01-31 14:54
閱讀 82766·2024-01-29 17:11
閱讀 3047·2024-01-25 14:55
閱讀 1985·2023-06-02 13:36
閱讀 3032·2023-05-23 10:26