資訊專欄INFORMATION COLUMN
摘要：找了不少使用搭建的博客英文的閱讀吃力不說鏡像源也是慢的讓人頭皮發麻因此重新編排了一個源都是從上找的即使拉的國內鏡像源應該也能很好的支持了吧環境給每個容器最少分配的內存軟件版本啟動前的配置在各個目錄下都有對應的配置根據各自的情況自行處
找了不少使用 docker-elk 搭建的博客, 英文的閱讀吃力不說, 鏡像源也是慢的讓人頭皮發麻, 因此重新編排了一個docker-compose,源都是從 https://hub.docker.com/ 上找的, 即使拉的國內鏡像源應該也能很好的支持了吧?環境
Docker 18.06.0-ce
docker-compose 1.22.0
給每個容器最少分配 1G 的內存
軟件版本logstash: 5.*
elasticsearch: 5.*
kibana: 5.*
啟動前的配置在各個目錄下都有對應的 config 配置, 根據各自的情況自行處理
拿默認的 logstash/confg/test.conf 中的配置舉例:
input {
file {
#這里的路徑指的是 logstash 容器中的路徑, 外部接入需要使用 volume 進行目錄映射
path => "/logs/input/*"
}
# 在 logstash 容器中的輸入
stdin {}
# 因為做了本地5000端口和容器5000端口進行綁定, 所以可以用 nc 工具測試一下
# echo "Test Logstash TCP Input Plugin" | nc localhost 5000
tcp {
type => "tcp"
port => 5000
mode => "server"
}
}
output {
file {
#這里的路徑指的是 logstash 容器中的路徑, 外部接入需要使用 volume 進行目錄映射
path => "/logs/output/%{+yyyy-MM-dd-HH}/%{host}.log"
}
stdout {
codec => rubydebug
}
elasticsearch {
hosts => "elasticsearch:9200"
# 這里設置的 index 在 kibana 中會用到
index => "file-log-%{+YYYY.MM}"
}
}
啟動容器
執行
git clone https://github.com/gaopengfei123123/docker-elk.git && cd docker-elk docker-compose up -d --build
等一會看到執行成功的提示
Creating docker-elk_elasticsearch_1 ... done Creating docker-elk_logstash_1 ... done Creating docker-elk_kibana_1 ... done
在本地瀏覽器輸入 http://localhost:5601/ 進入 kibana 界面
注意, 第一次啟動時有可能會出現提示 elasticsearch not found 這類的問題, 可以先等個一兩分鐘刷新一下就好了, 如果還是不行就谷歌或者提 issue 解決一下
同目錄下輸入
docker-compose stop
則停止所有服務
測試一下在 logs/input/ 目錄下新增個 test.log 文件, 然后輸入點東西驗證一下, 或者命令行執行echo "Test Logstash TCP Input Plugin" | nc localhost 5000 通過 tcp 發送日志
docker-compose logs -f
查看各容器日志輸出
TODO引入 kafka 做緩沖
搭建 es 集群
github 地址
文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。
轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/27422.html
摘要：之前在上嘗試過搭建環境，并將或中的數據導入到中。現在用提供的鏡像可以快速的完成這一操作。需要注意的是的需要設置為，如下圖否則，連接數據庫時會被拒絕連接。另外記得創建一個測試庫和表，用于測試的導入功能。 之前在Windows上嘗試過搭建ELK環境，并將MySQL或SQLServer中的數據導入到Elasticsearch中。現在用Docker提供的鏡像可以快速的完成這一操作。 環境說明...
摘要：譯者按實踐中會發現，生產環境中使用單個節點是遠遠不夠的，搭建集群勢在必行。集群的網絡通信服務發現，負載均衡以及容器間通信非常可靠。負載均衡也是由提供的。 譯者按: 實踐中會發現，生產環境中使用單個Docker節點是遠遠不夠的，搭建Docker集群勢在必行。然而，面對Kubernetes, Mesos以及Swarm等眾多容器集群系統，我們該如何選擇呢？它們之中，Swarm是Docker原...
摘要：但有一個問題就是對于一個初學者如此潔凈的環境，我完全不知道從何入手，也弄不清這個框架的優勢是什么連個樣本都沒有。還有的配置，的接入都踩過不少坑，才部署成一個像樣的學習環境。之后在寫腳本的時候又是各種踩雷，終于實現了快速一鍵部署。 引言 剛接觸Elk的時候，我用https://github.com/deviantony/docker-elk，部署了第一個測試環境，這是一個很優秀的項目，幾...
閱讀 1654·2019-08-30 15:55
閱讀 976·2019-08-30 15:44
閱讀 870·2019-08-30 10:48
閱讀 2039·2019-08-29 13:42
閱讀 3187·2019-08-29 11:16
閱讀 1253·2019-08-29 11:09
閱讀 2058·2019-08-26 11:46
閱讀 617·2019-08-26 11:44
