国产xxxx99真实实拍_久久不雅视频_高清韩国a级特黄毛片_嗯老师别我我受不了了小说

資訊專欄INFORMATION COLUMN

redis 集群搭建以及redislive監(jiān)測部署

mmy123456 / 3436人閱讀

摘要:集群搭建以及監(jiān)測環(huán)境實(shí)現(xiàn)主從的集群虛擬機(jī)單機(jī)集群基本搭建簡單下載通過解壓縮指定安裝路徑,切換用戶執(zhí)行,可能出現(xiàn)權(quán)限不夠的問題,同樣會(huì)報(bào)錯(cuò),直接使用進(jìn)行操作。分為兩部分,其中一部分為監(jiān)控腳本,另一部分為服務(wù),所以需要分別啟動(dòng)。

redis 集群搭建以及監(jiān)測環(huán)境

實(shí)現(xiàn)3主3從的集群 虛擬機(jī)單機(jī)ip:192.168.40.128

集群基本搭建 簡單下載

通過 wget http://download.redis.io/releases/redis-4.0.10.tar.gz

解壓縮 tar zxvf redis-4.0.10.tar.gz

指定安裝路徑,切換root用戶執(zhí)行make && make PREFIX=/usr/local/redis install,可能出現(xiàn)權(quán)限不夠的問題,sudo同樣會(huì)報(bào)錯(cuò),直接使用root進(jìn)行操作。

安裝編譯工具

sudo apt-get update

sudo apt-get install gcc

sudo apt-get install make

sudo apt-get install tcl

創(chuàng)建redis集群文件夾

因?yàn)槭?usr,所以始終都是在root權(quán)限下進(jìn)行操作

cd /usr/local/redis

mkdir cluster

cd cluster

mkdir 7000 7001 7002 7003 7004 7005

修改配置文件

復(fù)制redis conf內(nèi)的config文件復(fù)制到六個(gè)文件夾中,并且修改以下內(nèi)容

# 端口號(hào)  
port 7000  
# 后臺(tái)啟動(dòng)  
daemonize yes  
# 開啟集群  
cluster-enabled yes  
#集群節(jié)點(diǎn)配置文件  
cluster-config-file nodes-7000.conf  
# 集群連接超時(shí)時(shí)間  
cluster-node-timeout 5000  
# 進(jìn)程pid的文件位置  
pidfile /home/ubuntu/redis-4.0.10/pid/redis-7000.pid
#工作文件夾
dir "/home/ubuntu/redis-4.0.10/working"
# 開啟aof  
appendonly yes  
# aof文件路徑  
appendfilename "appendonly-7005.aof"  
# rdb文件路徑  
dbfilename dump-7000.rdb  

redis 的配置文件中的bind指定的是redis服務(wù)器的網(wǎng)卡ip,也就是redis服務(wù)器的ip

啟動(dòng)腳本

cd /home/ubuntu/redis-4.0.10/

touch start.link.sh為了操作簡單,創(chuàng)建腳本

修改啟動(dòng)腳本,為

#!/bin/bash
export BASE_FLOD="/usr/local/redis"
{BASE_FLOD}/bin/redis-server /usr/local/redis/cluster/7000/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7001/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7002/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7003/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7004/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7005/redis.conf
#cd src
#./redis-trib.rb create --replicas 1 192.168.40.128:7000 192.168.40.128:7001 192.168.40.128:7002 192.168.40.128:7003 192.168.40.128:7004 192.168.40.128:7005

其中注釋的是為了簡化初始啟動(dòng)的,ip需要跟每個(gè)節(jié)點(diǎn)配置的redis.conf 中bind 屬性綁定的一致,啟動(dòng)后可以通過ps -ef | grep redis命令查詢對(duì)應(yīng)的線程是否啟動(dòng)

集群啟動(dòng)

關(guān)聯(lián)程序使用的ruby寫的,所以要搭建rudy的運(yùn)行環(huán)境,需要安裝rudbygem

sudo apt-get install ruby rubygems -y

gem install redis,運(yùn)行到這里會(huì)感覺十分慢,需要耐心等待,在redis安裝目錄下,src文件夾redis-trib.rb

運(yùn)行redis-trib.rb create --replicas 1 192.168.40.128:7000 192.168.40.128:7001 192.168.40.128:7002 192.168.40.128:7003 192.168.40.128:7004 192.168.40.128:7005,檢查配置的信息是否有錯(cuò)誤,沒有直接yes就可以. [OK] All 16384 slots covered.代表接群啟動(dòng)成功。

節(jié)點(diǎn)查看,重啟

查看集群運(yùn)行狀態(tài):使用命令./redis-trib.rb check 192.168.40.128:7000,進(jìn)行集群的狀態(tài)檢查

性能測試 自帶測試工具redis-benchmark

redis-benchmark -h 192.168.40.128 -p 6379 -c 100 -n 100000100個(gè)并發(fā)連接,100000個(gè)請求,檢測 host 為 localhost 端口為6379的 redis 服務(wù)器性能。

redis-benchmark -h 192.168.40.128 -p 6379 -q -d 100測試存取大小為100字節(jié)的數(shù)據(jù)包的性能。

redis-benchmark -t set,lpush -n 100000 -q只測試某些操作的性能。

redis-benchmark -n 100000 -q script load "redis.call(‘set’,’foo’,’bar’)"只測試某些數(shù)值存取的性能。

集群密碼設(shè)置

集群搭建初始不需要密碼,啟動(dòng)完成后,先看每個(gè)節(jié)點(diǎn)的配置文件是否有讀寫權(quán)限,如果沒有讀寫權(quán)限,需要chmod修改的讀寫權(quán)限,通過

./redis-cli -c -p port
config set masterauth password
config set requirepass password
config rewrite

分別連接每個(gè)節(jié)點(diǎn)進(jìn)行設(shè)置
若要重啟發(fā)現(xiàn)連接不上,修改啟動(dòng)腳本 redis-trib.rb.sh 99行,配置啟動(dòng)腳本密碼啟動(dòng)
@r = Redis.new(:host => @info[:host], :port => @info[:port], :timeout => 60,:password => "password")

代碼測試
/*
 *集群連接測試
 */

@Test
public void testJedisCluster() {
    Set nodes = new LinkedHashSet<>();
    //所有主機(jī)節(jié)點(diǎn)ip和端口
    nodes.add(new HostAndPort("192.168.40.128", 7000));
    nodes.add(new HostAndPort("192.168.40.128", 7001));
    nodes.add(new HostAndPort("192.168.40.128", 7002));
    nodes.add(new HostAndPort("192.168.40.128", 7003));
    nodes.add(new HostAndPort("192.168.40.128", 7004));
    nodes.add(new HostAndPort("192.168.40.128", 7005));
    //沒有密碼
    //JedisCluster cluster = new JedisCluster(nodes);
    //添加密碼調(diào)用
    JedisCluster cluster = new JedisCluster(nodes, 5000, 5000, 10, "password", new GenericObjectPoolConfig());
    //cluster.zadd("test_1", String.valueOf(""),"id_2");
    System.out.println(cluster.zscore("test_1", "id_1"));
    try {
        cluster.close();
    } catch (IOException e) {
        e.printStackTrace();
    }
}
主從模式、哨兵、集群的關(guān)系

主從模式是指定復(fù)制和持久化關(guān)系,指定了主從備份的關(guān)系

哨兵:當(dāng)主數(shù)據(jù)庫遇到異常中斷服務(wù)后,開發(fā)者可以通過手動(dòng)的方式選擇一個(gè)從數(shù)據(jù)庫來升格為主數(shù)據(jù)庫,以使得系統(tǒng)能夠繼續(xù)提供服務(wù)。主要是為了解決主從復(fù)制手動(dòng)切換主從關(guān)系的檢測工具,可以自動(dòng)切換主從。

使用哨兵,redis每個(gè)實(shí)例也是全量存儲(chǔ),每個(gè)redis存儲(chǔ)的內(nèi)容都是完整的數(shù)據(jù),浪費(fèi)內(nèi)存且有木桶效應(yīng)。為了最大化利用內(nèi)存,可以采用集群,就是分布式存儲(chǔ)。即每臺(tái)redis存儲(chǔ)不同的內(nèi)容,共有16384個(gè)slot。每個(gè)redis分得一些slot,hash_slot = crc16(key) mod 16384 找到對(duì)應(yīng)slot,鍵是可用鍵,如果有{}則取{}內(nèi)的作為可用鍵,否則整個(gè)鍵是可用鍵集群至少需要3主3從,且每個(gè)實(shí)例使用不同的配置文件,主從不用配置,集群會(huì)自己選。

監(jiān)控部署 RedisLive搭建部署 運(yùn)行環(huán)境部署

git clone https://github.com/kumarnitin/RedisLive.git
下載redislive,解壓縮unzip -o -d /home/ubuntu/ RedisLive-master.zip

進(jìn)入文件夾 `pip install -r requirements.txt -i
http://pypi.douban.com/simple/ --trusted-host
pypi.douban.com`指定豆瓣源,下載速度更快。

進(jìn)入src文件夾,復(fù)制example文件,編輯

"RedisServers":
[
    {
    "server": "192.168.40.128",
    "port" : 7000,
    "password" : "password"
    },
    //...多個(gè)監(jiān)聽
],

"DataStoreType" : "redis",

"RedisStatsServer": //存儲(chǔ)的redis監(jiān)聽接口
{
    "server" : "127.0.0.1",
    "port" : 6379
},

"SqliteStatsStore" :
{
    "path":  "/home/ubuntu/redis-4.0.10/working/redislive.db" //進(jìn)行存儲(chǔ)的文件
} } 

ubuntu@ubuntu:~/redis-4.0.10$ mkdir pid
ubuntu@ubuntu:~/redis-4.0.10$ mkdir log
ubuntu@ubuntu:~/redis-4.0.10$ mkdir working
//保存aof,rdb,node-config文件。

RedisLive分為兩部分,其中一部分為監(jiān)控腳本,另一部分為web服務(wù),所以需要分別啟動(dòng)。`./redis-monitor.py
--duration=120`./redis-live.py

訪問http://192.168.40.128:8888/index.html

Q&A

redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in cluster redis node的redis.conf 綁定ip設(shè)置為指定的redis節(jié)點(diǎn)ip,啟動(dòng)集群時(shí)只用指定ip啟動(dòng),不使用192.168.40.128

connect refuse 關(guān)閉防火墻

No module named redis

查看python位置 which python

先備份 sudo cp /usr/bin/python /usr/bin/python_cp

刪除 sudo rm /usr/bin/python

默認(rèn)設(shè)置成python3.5,創(chuàng)建鏈接 sudo ln -s /usr/bin/python3.5 /usr/bin/python

文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/76665.html

相關(guān)文章

  • SegmentFault 技術(shù)周刊 Vol.37 - 分布式緩存利器:Redis

    摘要:持久化到中反向代理的負(fù)載均衡基于的集群搭建如何實(shí)現(xiàn)從中訂閱消息轉(zhuǎn)發(fā)到客戶端的擴(kuò)展是阻塞式,使用訂閱發(fā)布模式時(shí),會(huì)導(dǎo)致整個(gè)進(jìn)程進(jìn)入阻塞。緩存是用于解決高并發(fā)場景下系統(tǒng)的性能及穩(wěn)定性問題的銀彈。 showImg(https://segmentfault.com/img/bVYE6k?w=900&h=385); Redis 是由意大利程序員 Salvatore Sanfilippo(昵稱:a...

    binaryTree 評(píng)論0 收藏0
  • 從0-1打造最強(qiáng)性能Scrapy爬蟲集群

    摘要:包括爬蟲編寫爬蟲避禁動(dòng)態(tài)網(wǎng)頁數(shù)據(jù)抓取部署分布式爬蟲系統(tǒng)監(jiān)測共六個(gè)內(nèi)容,結(jié)合實(shí)際定向抓取騰訊新聞數(shù)據(jù),通過測試檢驗(yàn)系統(tǒng)性能。 1 項(xiàng)目介紹 本項(xiàng)目的主要內(nèi)容是分布式網(wǎng)絡(luò)新聞抓取系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)。主要有以下幾個(gè)部分來介紹: (1)深入分析網(wǎng)絡(luò)新聞爬蟲的特點(diǎn),設(shè)計(jì)了分布式網(wǎng)絡(luò)新聞抓取系統(tǒng)爬取策略、抓取字段、動(dòng)態(tài)網(wǎng)頁抓取方法、分布式結(jié)構(gòu)、系統(tǒng)監(jiān)測和數(shù)據(jù)存儲(chǔ)六個(gè)關(guān)鍵功能。 (2)結(jié)合程序代碼分解說...

    vincent_xyb 評(píng)論0 收藏0
  • Redis Cluster 集群搭建

    摘要:任何一條主從線下的服務(wù)全部故障,則導(dǎo)致集群不可用。沒有分配哈希槽的話表示就沒有存儲(chǔ)數(shù)據(jù)的能力。錯(cuò)誤幫助如果過程中出現(xiàn)槽錯(cuò)誤分別登錄和執(zhí)行為添加從節(jié)點(diǎn)部署進(jìn)入目錄執(zhí)行八移除集群節(jié)點(diǎn)刪除從節(jié)點(diǎn),因?yàn)闆]有分配哈希槽,所以直接刪除。 【背景】 2年前在本地電腦上搭建過redis集群。但苦于創(chuàng)業(yè)公司服務(wù)器資源有限(窮),并沒有應(yīng)用到生產(chǎn)環(huán)境。近期換了個(gè)工作環(huán)境,有資源條件了準(zhǔn)備開始搭建使用。雖然...

    levy9527 評(píng)論0 收藏0

發(fā)表評(píng)論

0條評(píng)論

最新活動(dòng)
閱讀需要支付1元查看
<