摘要:可視化監控爬蟲最近接到新的需求做可視化監控爬蟲,搞了個小時終于成了。。。該端口不應該需要額外的權限。即可啟動,默認登錄名和密碼代碼借用崔慶才老師的代碼鏈接最后結果意外發現的可視化界面也呈現出了監控結果。
可視化監控爬蟲
最近接到新的需求做可視化監控爬蟲,搞了3個小時終于成了。。。
環境搭建
我是在windows下搭建的環境,在這里只說windows
InfluxDb,是目前比較流行的時間序列數據庫;
下載地址:https://dl.influxdata.com/influxdb/releases/influxdb-1.7.6_windows_amd64.zip
安裝:解壓安裝即可,目前的配置文件去掉了admin可視化配置。
可視化配置:要使用web管理需要下載Chronograf,https://portal.influxdata.com...,下載完直接解壓,雙擊exe程序,在瀏覽器輸入http://localhost:8888/,一開始登錄要賬戶密碼,我都用admin就進去了
Grafana,一個可視化面板(Dashboard),有著非常漂亮的圖表和布局展示,功能齊全的度量儀表盤和圖形編輯器,支持Graphite、zabbix、 InfluxDB、Prometheus和OpenTSDB作為數據源
下載地址:Download the zip file
安裝:該zip文件包含一個包含當前Grafana版本的文件夾。將此文件夾解壓縮到您希望Grafana運行的任何位置。進入conf目錄并復制sample.ini到custom.ini。你應該編輯custom.ini,永遠不要defaults.ini。默認的Grafana端口是3000,此端口需要Windows上的額外權限。編輯custom.ini和取消注釋http_port配置選項(;是ini文件中的注釋字符)并將其更改為類似8080或類似的內容。該端口不應該需要額外的Windows權限。http://127.0.0.1:3000即可啟動,默認登錄名和密碼admin/admin
influxdb(pip install influxdb)
Python 3.6
代碼:(借用崔慶才老師的代碼:鏈接:https://cuiqingcai.com/6217.html)
最后結果;
意外發現
influxdb的可視化界面chronograf也呈現出了監控結果。
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/43880.html
摘要:況且,即便使用了插件,也不能實現歷史數據追溯,數據持久化保存等功能。先來說下這套解決方案的原理,在運行過程中,將產生的性能數據寫入到數據庫里,然后定時從數據庫中讀取性能數據,并分類展示到頁面上。而提供了將性能數據寫入到的組件。 前 言 在服務端性能測試工具中,Jmeter毫無疑問是其中的王...
摘要:的展示非常炫酷,絕對是運維提升逼格的一大利器。另外的可視化功能比強得多,而且以上版本將集成報警功能。它由寫成,著力于高性能地查詢與存儲時序型數據。被廣泛應用于存儲系統的監控數據,行業的實時數據等場景。 原有監控系統 showImg(https://segmentfault.com/img/remote/1460000011082384); 整個系統以 Graphite (carbon ...
showImg(https://segmentfault.com/img/remote/1460000014421849); 概述 一個宿主機上可以運行多個容器化應用,容器化應用運行于宿主機上,我們需要知道該容器的運行情況,包括 CPU使用率、內存占用、網絡狀況以及磁盤空間等等一系列信息,而且這些信息隨時間變化,我們稱其為時序數據,本文將實操 如何搭建一個可視化的監控中心 來收集這些承載著具體應...
摘要:是一個時序數據庫,專門用于存儲時序相關數據,很適合存儲的數據。容器監控數據存儲配置和運行是一個開源的分布式時序數據庫,使用語言開發。的特色功能作為時序數據庫,相比傳統數據庫它有很多特色功能,比如獨有的一些特色函數和連續查詢功能。 本文已獲得原作者__七把刀__授權。 隨著線上服務的全面 docker 化,對 docker 容器的監控就很重要了。SA 的監控系統是物理機的監控,在一個物理...
摘要:是一個時序數據庫,專門用于存儲時序相關數據,很適合存儲的數據。容器監控數據存儲配置和運行是一個開源的分布式時序數據庫,使用語言開發。的特色功能作為時序數據庫,相比傳統數據庫它有很多特色功能,比如獨有的一些特色函數和連續查詢功能。 本文已獲得原作者__七把刀__授權。 隨著線上服務的全面 docker 化,對 docker 容器的監控就很重要了。SA 的監控系統是物理機的監控,在一個物理...
閱讀 1355·2021-11-15 11:45
閱讀 3123·2021-09-27 13:36
閱讀 2867·2019-08-30 15:54
閱讀 984·2019-08-29 12:38
閱讀 2905·2019-08-29 11:22
閱讀 2983·2019-08-26 13:52
閱讀 2025·2019-08-26 13:30
閱讀 584·2019-08-26 10:37