測試為單Source以及非共享TaskSlot的單Map操作。Same Host表示兩個TaskManager是否在同一臺機器上運行。 | | | | | | ------------ | -------- | ---------- | --------- | | Message Size | Parallel | Throughput" />
摘要:性能數據吞吐量測試為單以及非共享的單操作。表示兩個是否在同一臺機器上運行。吞吐量測試邏輯為單,后接共享的操作且該為有狀態操作,其狀態為給定大小的數組。
測試為單Source以及非共享TaskSlot的單Map操作。Same Host表示兩個TaskManager是否在同一臺機器上運行。
Message Size | Parallel | Throughput | Same Host |
1024 | 1 | 400 MB/s | True |
1024 | 1 | 360 MB/s | False |
1024 * 1024 | 1 | 345 MB/s | False |
1024 * 1024 | 1 | 278 MB/s | False |
測試為單Source以及非共享TaskSlot的單Map操作。Same Host表示兩個TaskManager是否在同一臺機器上運行。
Message Size | Parallel | 延遲中位數 |
4 byte | 1 | 29 ms |
測試邏輯為單Kafka Source,后接共享TaskSlot的Map操作。
Message Size | Broker Size | Partition Size | Replica Size | Consumer Parallel | Checkpoint Enabled | Throughput |
1024 | 3 | 3 | 3 | 1 | False | 230 MB/s |
1024 | 3 | 3 | 3 | 3 | False | 370 MB/s |
1024 | 3 | 3 | 3 | 1 | True | 230 MB/s |
1024 | 3 | 3 | 3 | 3 | True | 370 MB/s |
測試邏輯為單字符串生成Source,后接共享TaskSlot的Kafka Sink。
Message Size | Broker Size | Partition Size | Replica Size | Ack | Parallel | Throughput |
1024 | 3 | 3 | 3 | -1 | 1 | 75 MB/s |
1024 | 3 | 3 | 3 | 1 | 1 | 80 MB/s |
100 | 3 | 3 | 3 | -1 | 1 | 55 MB/s |
100 | 3 | 3 | 3 | 1 | 1 | 57 MB/s |
測試邏輯為單Source,后接共享TaskSlot的Map操作;且該Source為有狀態操作,其狀態為給定大小的byte數組。
Stated Source Parallel | Checkpoint Interval | Checkpoint state Size | hdfs | rocksdb |
1 | 10000 ms | 200 MB | 133 MB/s | 100 MB/s |
3 | 10000 ms | 200 MB (each) | 200 MB/s | 128 MB/s |
1 | 10000 ms | 100 MB | 133 MB/s | 100 MB/s |
3 | 10000 ms | 100 MB (each) | 150 MB/s | 150 MB/s |
測試邏輯為單Source,后接共享TaskSlot的Map操作;且該Source為有狀態操作,其狀態為給定大小的byte數組。
Stated Source Parallel | Checkpoint Interval | Checkpoint state Size | AVG Checkpoint Time |
1 | 5000 ms | 5kb | 48 ms |
3 | 5000 ms | 5kb (each state) | 100 ms |
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/126206.html
摘要:什么是實時計算實時計算基于構建,為分布式高性能隨時可用以及準確的流處理應用程序提供流處理框架,可用于流式數據處理等應用場景。版本支持當前支持的版本為,,,可以在提交任務時選擇所使用的版本。什么是實時計算實時計算(UFlink)基于ApacheFlink構建,為分布式、高性能、隨時可用以及準確的流處理應用程序提供流處理框架,可用于流式數據處理等應用場景。產品優勢100%開源兼容基于開源社區版本...
摘要:開發注意事項基于托管集群的應用開發,和自建集群類似,但是仍然有幾個地方需要注意。和默認配置托管集群默認指定以及的堆大小為,目前不支持進行更改單個中的數量設置為高可用配置應用的高可用由集群以及共同保證。配置集群的運行時狀態保存在的指定目錄中。UFlink開發注意事項基于UFlink托管集群的Flink應用開發,和自建集群類似,但是仍然有幾個地方需要注意。JobManager和TaskManag...
摘要:開發指南是為簡化計算模型,降低用戶使用實時計算的門檻而設計的一套符合標準語義的開發套件。隨后,將為該表生成字段,用于記錄并表示事件時間。UFlink SQL 開發指南UFlink SQL 是 UCloud 為簡化計算模型,降低用戶使用實時計算的門檻而設計的一套符合標準 SQL 語義的開發套件。接下來,開發者可以根據如下內容,逐漸熟悉并使用 UFlink SQL 組件所提供的便捷功能。1 ...
摘要:基于開發指南本節主要介紹如何創建項目,并開發簡單的應用,從而使該應用可以被提交到平臺運行。如果不設置為,可能會導致的類沖突,產生不可預見的問題。在自動生成的文件中,使用了來更方便的控制依賴的可見性。基于Maven開發指南本節主要介紹如何創建項目,并開發簡單的Flink應用,從而使該Flink應用可以被提交到UFlink平臺運行。==== 自動生成代碼框架 ==== 對于Java開發者,可以使...
摘要:集群管理進入集群管理頁面通過集群列表頁面進入集群管理頁面獲取集群詳情通過集群列表的詳情按鈕進入詳情頁面調整集群大小點擊調整容量調整集群大小查看點擊詳情頁的按鈕查看查看任務歷史點擊詳情頁的按鈕查看歷史任務節點密碼重置點擊集群列表頁的集群管理1. 進入集群管理頁面通過UFlink集群列表頁面進入集群管理頁面:2. 獲取集群詳情通過集群列表的詳情按鈕進入詳情頁面:3. 調整集群大小點擊調整容量調整...
閱讀 3514·2023-04-25 20:09
閱讀 3720·2022-06-28 19:00
閱讀 3035·2022-06-28 19:00
閱讀 3058·2022-06-28 19:00
閱讀 3132·2022-06-28 19:00
閱讀 2859·2022-06-28 19:00
閱讀 3014·2022-06-28 19:00
閱讀 2610·2022-06-28 19:00