摘要:集群管理集群管理集群管理本篇目錄創建集群創建集群調整集群參數調整集群參數創建集群創建集群創建集群點擊控制臺左上角全部產品選擇消息隊列也可鎖定到左側菜單欄。選擇完畢后,進入集群設置頁面,可對集群參數進行配置。
1. 點擊控制臺左上角“全部產品”選擇“Kafka消息隊列 UKafka”,也可鎖定到左側菜單欄。
2. 進入UKafka操作界面,點擊“創建集群”進行UKafka集群創建。
3. 選擇相應Kafka版本和業務需求量,以及節點機型與數量,集群最小規模至少3個節點。選擇完畢后,進入集群設置頁面,可對集群參數進行配置。
集群可選機型可參考:機型列表
集群可配置參數見下表(集群已有默認配置,以下配置請您在確認實際需求后再更改):
參數名稱參數類型參數范圍釋義auto.create.topics.enablebooltrue/false是否允許自動創建Topicauto.leader.rebalance.enablebooltrue/false是否開啟節點間數據均衡default.replication.factorint1-10默認復制因子數量delete.topic.enablebooltrue/false是否允許刪除topic信息log.cleaner.delete.retention.msint1-2147483646壓縮日志最長保留時間log.cleaner.enablebooltrue/false是否開啟壓縮日志清理log.cleanup.policystringdelete/compact日志清理策略,刪除/壓縮log.retention.hoursint1-10000日志最小保留時間log.segment.bytesint1-2147483646每個segment文件的大小message.max.bytesint1-2147483646消息體的最大大小num.io.threadsint1-32處理磁盤IO的線程數num.network.threadsint1-32處理網絡請求的線程數num.partitionsint1-1000分區數量replica.fetch.max.bytesint1-2147483646副本同步時消息的最大尺寸zookeeper.session.timeout.msint1-2147483646zksession超時時間zookeeper.connection.timeout.msint1-2147483646客戶端連接zk超時時間zookeeper.sync.time.msint1-2147483646zk信息同步間隔replica.fetch.max.bytes須大于等于message.max.bytes;
num.io.threads與num.network.threads可控制節點負載與集群性能均衡。
同創建集群,創建完畢后,也可調整Kafka服務的配置參數。參數內容詳見上表。
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/126898.html
摘要:大量的和分區會嚴重影響集群性能。介紹可參考收到離線分區總數異常告警一般是某個節點宕機或者服務異常導致。若服務卡住,可在評估后在控制臺重啟該節點服務。若想了解當前請求延時情況,建議關注平均請求延時監控項。 FAQs本篇目錄一個UKafka集群可以創建多少個Topic?如何增加Topic的副本數量(ReplicationFactor)?收到離線分區總數>=10.0個告警,離線分區總數是什么,怎么...
摘要:快速開始本例以數據同步到來做說明。創建連接器點擊創建連接器按鈕,打開配置頁面。若下游為,則需配置路徑,若為,則需填寫信息。連接器列表詳情頁數據驗證參考,為集群創建,并寫入消息到其中。快速開始本例以UKafka數據同步到UHadoop來做說明。創建連接器點擊【創建連接器】按鈕,打開配置頁面。配置連接器基本信息配置按需填寫。【上游】意為Kafka連接器上游的Kafka集群,【下游】意為Kafka...
摘要:概覽概覽產品簡介操作指南集群管理節點管理磁盤管理管理管理監控視圖監控項說明開發指南快速開始認證配置與外網訪問客戶端性能測試連接器產品介紹快速開始產品功能性能測試產品價格產品價格 概覽產品簡介操作指南集群管理節點管理磁盤管理Topic管理ConsumerGroup管理監控視圖監控項說明開發指南快速開始認證配置與外網訪問客戶端SDK性能測試FAQsKafka連接器產品介紹快速開始產品功能性能測試...
摘要:監控視圖監控視圖監控視圖集群監控集群監控提供小時至天多個維度的集群流入流出數據量和消息個數監控,生產者消費者監控數據,以及相關監控數據。節點監控節點監控提供每個上的磁盤網卡,服務,以及監控數據 監控視圖集群監控提供1小時至15天多個維度的集群流入、流出數據量和消息個數監控,Kafka生產者、消費者監控數據,以及Zookeeper相關監控數據。節點監控提供每個Broker上的CPU、MEM、磁...
摘要:性能測試性能測試性能測試在不同機型集群默認配置下,利用腳本進行性能基準測試測試結果下載 性能測試在不同機型 ukafka 集群默認配置下,利用 kafka-producer-perf-test.sh 腳本進行性能基準測試測試結果下載
閱讀 284·2024-11-07 18:25
閱讀 130363·2024-02-01 10:43
閱讀 868·2024-01-31 14:58
閱讀 828·2024-01-31 14:54
閱讀 82766·2024-01-29 17:11
閱讀 3047·2024-01-25 14:55
閱讀 1985·2023-06-02 13:36
閱讀 3033·2023-05-23 10:26