摘要:我們常說的分表分庫分區(qū)等概念都屬于分片的實際體現(xiàn)。傳統(tǒng)分片做法是手工分表分庫。自動分片技術(shù)是根據(jù)指定的片鍵自動拆分數(shù)據(jù)并維護數(shù)據(jù)請求路由的過程。
1.mongodb特性
</>復制代碼
1)mongo是一個面向文檔的數(shù)據(jù)庫,它集合了nosql和sql數(shù)據(jù)庫兩方面的特性。
2)所有實體都是在首次使用時創(chuàng)建。
3)沒有嚴格的事務(wù)特性,但是它保證任何一次數(shù)據(jù)變更都是原子性的。
4)也沒有固定的數(shù)據(jù)模型
5)mongo以javascript作為命令行執(zhí)行引擎,所以利用shell進行復雜的計算和查詢時會相當?shù)穆?6)mongo本身支持集群和數(shù)據(jù)分片
7)mongo是c++實現(xiàn)的,支持windows mac linux等主流操作系統(tǒng)
8)性能優(yōu)越,速度快
2.mongo常用操作
</>復制代碼
1.增刪操作
db.user.insert({name:"aaaa",age:30});
db.user.save({name:"aaaa",age:30});
db.collection.insertOne({});(3.2新特性)
db.collection.deleteOne(,{});(3.2新特性)
db.collection.remove({name:"aaa"});
db.collection.remove();(刪除全部)
2.更新操作
db.users.update ({ " name" : "joe" }, joe );
db.users.update ({ " name" : "joe" }, joe, true );------upsert模式
db.users.update ({ " name" : "joe" }, joe, true ,true);------MULTI模式
</>復制代碼
update是對文檔替換,而不是局部修改默認情況update更新匹配的第一條文檔,multi模式更新所有匹配的
</>復制代碼
3.查詢操作
-- 普通查詢
db.user.find();
db.user.find({name:"aaa"});
db.user.findOne({name:"aaa"});
-- 模糊查詢
db.UserInfo.find({userName :/A/}) (名稱%A%)
db.UserInfo.find({userName :/^A/}) (名稱A%)
4.操作符
1.$lt, $lte,$gt, $gte(<, <=, >, >= )
2.$all 數(shù)組中的元素是否完全匹配 db.things.find( { a: { $all: [ 2, 3 ] } } );
3.$exists 可選:true,false db.things.find( { a : { $exists : true } } );
4.$mod 取模:a % 10 == 1 db.things.find( { a : { $mod : [ 10 , 1 ] } } );
5.$ne 取反:即not equals db.things.find( { x : { $ne : 3 } } );
6.$in 類似于SQL的IN操作 db.things.find({j:{$in: [2,4,6]}});
7.$nin $in的反操作,即SQL的 NOT IN db.things.find({j:{$nin: [2,4,6]}});
8.$nor $or的反操作,即不匹配(a或b) db.things.find( { name : "bob", $nor : [ { a : 1 },{ b : 2 }]})
9.$or Or子句,注意$or不能嵌套使用 db.things.find( { name : "bob" , $or : [ { a : 1 },{ b : 2 }]})
10.$size 匹配數(shù)組長度 db.things.find( { a : { $size: 1 } } );
11.$type 匹配子鍵的數(shù)據(jù)類型,詳情請看 db.things.find( { a : { $type : 2 } } );
5.數(shù)組查詢
$size 用來匹配數(shù)組長度(即最大下標)
// 返回comments包含5個元素的文檔
db.posts.find({}, {comments:{‘$size’: 5}});
// 使用冗余字段來實現(xiàn)
db.posts.find({}, {‘commentCount’: { ‘$gt’: 5 }});
$slice 操作符類似于子鍵篩選,只不過它篩選的是數(shù)組中的項
// 僅返回數(shù)組中的前5項
db.posts.find({}, {comments:{‘$slice’: 5}});
// 僅返回數(shù)組中的最后5項
db.posts.find({}, {comments:{‘$slice’: -5}});
// 跳過數(shù)組中的前20項,返回接下來的10項
db.posts.find({}, {comments:{‘$slice’: [20, 10]}});
// 跳過數(shù)組中的最后20項,返回接下來的10項
db.posts.find({}, {comments:{‘$slice’: [-20, 10]}});
MongoDB 允許在查詢中指定數(shù)組的下標,以實現(xiàn)更加精確的匹配
// 返回comments中第1項的by子鍵為Abe的所有文檔
db.posts.find( { "comments.0.by" : "Abe" } );
3.索引的使用
</>復制代碼
1.創(chuàng)建索引
db.things.ensureIndex ({"j": 1});
創(chuàng)建子文檔 索引
db.things.ensureIndex ({"user.Name" : - 1});
創(chuàng)建 復合 索引
db.things.ensureIndex ({
"j" : 1 , // 升序
"x" : - 1 // 降序
});
如果 您的 find 操作只用到了一個鍵,那么索引方向是無關(guān)緊要的
當創(chuàng)建復合索引的時候,一定要謹慎斟酌每個鍵的排序方向
2.修改索引
修改索引,只需要重新 運行索引 命令即可
如果索引已經(jīng)存在則會 重建, 不存在的索引會被 添加
db . things . ensureIndex ({
--- 原來的索引會 重建
"user.Name " : - 1 ,
--- 新增一個升序 索引
"user.Name " : 1 ,
--- 為 Age 新建降序 索引
"user.Age " : - 1
},
打開后臺執(zhí)行
{ ‘background" : true}
);
重建索引
things .reIndex();
3.刪除索引
</>復制代碼
刪除集合中的所有 索引
. things . dropIndexes ();
</>復制代碼
刪除指定鍵的索引
db.things.dropIndex ({
x : 1 ,
y : - 1
});
使用 command 刪除指定鍵的 索引
db.runCommand ({
dropIndexes : "foo " ,
index : { y : 1 }
});
使用 command 刪除所有 索引
. runCommand ({dropIndexes : "foo " ,index : "*‘})
</>復制代碼
如果是刪除集合中所有的文檔(remove)則不會影響索引,當有新文檔插入時,索引就會重建。
4.唯一索引
</>復制代碼
創(chuàng)建唯一索引,同時這也是一個符合唯一索引
db.things.ensureIndex (
{
"firstName " : 1 ,
"lastName " : 1
}, {
指定為唯一索引
"unique " : true ,
刪除重復 記錄
"dropDups " : true
});
5、強制使用索引
</>復制代碼
強制使用索引 a 和 b
db.collection.find ({
"a " : 4 ,
"b " : 5 ,
"c " : 6
}). hint ({
"a " : 1 ,
"b " : 1
});
強制不使用任何 索引
db.collection.find ().hint ({
"$ natural" : 1
});
索引總結(jié):
4.mongo數(shù)據(jù)庫管理</>復制代碼
索引可以加速查詢;
單個索引無需在意其索引方向;
多鍵索引需要慎重考慮每個索引的方向;
做海量數(shù)據(jù)更新時應(yīng)當先卸載所有索引,待數(shù)據(jù)更新完成后再重建索引;
不要試圖為每個鍵都創(chuàng)建索引,應(yīng)考慮實際需要,并不是索引越多越好;
唯一索引可以用來消除重復記錄;
地理空間索引是沒有單位的,其內(nèi)部實現(xiàn)是基本的勾股定理算法
安全與認證
1、 默認為無認證,啟動用登錄 shell ;
2、 添加賬號;
3、 關(guān)閉 shell 、關(guān)閉 MongoDB ;
4、 為 MongoDB 增加 — auth 參數(shù);
5、 重 啟 MongoDB ;
6、 登錄 shell ,此時就需要認證了
冷備份
1、關(guān)閉MongoDB引擎
2、拷貝數(shù)據(jù)庫文件夾及文件
3、恢復時反向操作即可
</>復制代碼
-- 優(yōu)點:可以完全保證數(shù)據(jù)完整性;
-- 缺點:需要數(shù)據(jù)庫引擎離線
熱備份
1、 保持MongoDB為運行狀態(tài)
2、使用mongodump備份數(shù)據(jù)
3、使用mongorestore恢復數(shù)據(jù)
</>復制代碼
-- 優(yōu)點:數(shù)據(jù)庫引擎無須離線
--缺點:不能保證數(shù)據(jù)完整性,操作時會降低MongoDB性能
主從復制備份
1、創(chuàng)建主從復制機制
2、配置完成后數(shù)據(jù)會自動同步
3、恢復途徑很多
</>復制代碼
-- 優(yōu)點:可以保持MongoDB處于聯(lián)機狀態(tài),不影響性能
-- 缺點:在數(shù)據(jù)寫入密集的情況下可能無法保證數(shù)據(jù)完整性
修復
db.repairDatabase();
修復數(shù)據(jù)庫還可以起到壓縮數(shù)據(jù)的作用;
修復數(shù)據(jù)庫的操作相當耗時,萬不得已請不要使用;
建議經(jīng)常做數(shù)據(jù)備份;
</>復制代碼
1、主從復制
選項 說明
--only 作用是限定僅復制指定的某個數(shù)據(jù)庫
--slavedelay 為復制設(shè)置操作延遲,單位為秒
--fastsync 以主節(jié)點的數(shù)據(jù)快照為基礎(chǔ)啟動從節(jié)點。
--autoresync 當主從節(jié)點數(shù)據(jù)不一致時,是否自動重新同步
--oplogSize 設(shè)定主節(jié)點中的oplog的容量,單位是MB
2、副本集
與普通主從復制集群相比,具有自動檢測機制
需要使用—replSet 選項指定副本同伴
任何時候,副本集當中最多只允許有1個活躍節(jié)點
3、讀寫分離
將密集的讀取操作分流到從節(jié)點上,降低主節(jié)點的負載
默認情況下,從節(jié)點是不允許處理
客戶端請求的,需要使用—slaveOkay打開
不適用于實時性要求非常高的應(yīng)用
4、工作原理—— OPLOG
oplog保存在local數(shù)據(jù)庫中,oplog就在其中的
oplog.$main集合內(nèi)保存。該集合的每個文檔都記錄了主節(jié)點上執(zhí)行的一個操作,其鍵定義如下:
ts:操作時間戳,占用4字節(jié)
op:操作類型,占用1字節(jié)
ns:操作對象的命名空間(或理解為集合全名)
o:進一步指定所執(zhí)行的操作,例如插入
5、工作原理—— 同步
從節(jié)點首次啟動時,做完整同步
主節(jié)點數(shù)據(jù)發(fā)生變化時,做增量同步
從節(jié)點與主節(jié)點數(shù)據(jù)嚴重不一致時,做完整同步
6、復制管理—— 診斷
db.printReplicationInfo()
在主節(jié)點上使用
返回信息是oplog的大小以及各種操作的耗時、空間占用等數(shù)據(jù)
在從節(jié)點上使用
db.printSlaveReplicationInfo()
返回信息是從節(jié)點的數(shù)據(jù)源列表、同步延遲時間等
7、復制管理—— 變更OPLOG 容量
在主節(jié)點上使用
設(shè)定—oplogSize參數(shù)
重啟MongoDB
8、復制管理—— 復制認證
主從節(jié)點皆須配置
存儲在local.system.users
優(yōu)先嘗試repl用戶
主從節(jié)點的用戶配置必須保持一致
6.MONGODB分片
1、分片與自動分片
</>復制代碼
分片是指將數(shù)據(jù)拆分,分散到不同的實例上進行負載分流的做法。我們常說的“分表”、“分
庫”、“分區(qū)”等概念都屬于分片的實際體現(xiàn)。
傳統(tǒng)分片做法是手工分表、分庫。自動分片技術(shù)是根據(jù)指定的“片鍵”自動拆分數(shù)據(jù)并維護數(shù)據(jù)
請求路由的過程。
遞增片鍵--連續(xù) 不均勻 寫入集中 分流較差
隨機片鍵--不連續(xù) 均勻 寫入分散 分流較好
三個組成部分
--片
保存子集數(shù)據(jù)的容器
--mongos
MongoDB的路由器進程
--配置服務(wù)器
分片集群的配置信息
2、創(chuàng)建分片
</>復制代碼
--啟動配置服務(wù)器
可以創(chuàng)建一個或多個
--添加片
每個片都應(yīng)該是副本集
--物理服務(wù)器
性能、安全和穩(wěn)定性
3、管理分片
</>復制代碼
--查詢分片
db.shards.find();
--數(shù)據(jù)庫
db.databases.find();
--塊
db.chunks.find();
--分片狀態(tài)
db.printShardingStatus();
--刪除片
db.runCommand({ “removeshard” : “ip:port” });
</>復制代碼
如果文章對你有幫助,請去我的博客留個言吧! 我的博客
喜歡就收藏一下,您的支持是我最大的鼓勵!
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/18830.html
摘要:在上安裝有兩種方法下載安裝包安裝使用安裝方式下載安裝包安裝注意在中不支持像方式,只好用方式來下載。再打開一個終端窗口,執(zhí)行以下命令停止在開啟服務(wù)的控制臺,即可停止或者直接關(guān)閉開啟服務(wù)的控制臺。 在Mac上安裝MongoDB有兩種方法: 下載安裝包安裝 使用 brew 安裝 1. curl方式下載安裝包安裝 注意:在mac中不支持像wget方式,只好用curl方式來下載。 可以直接到...
摘要:在上安裝有兩種方法下載安裝包安裝使用安裝方式下載安裝包安裝注意在中不支持像方式,只好用方式來下載。再打開一個終端窗口,執(zhí)行以下命令停止在開啟服務(wù)的控制臺,即可停止或者直接關(guān)閉開啟服務(wù)的控制臺。 在Mac上安裝MongoDB有兩種方法: 下載安裝包安裝 使用 brew 安裝 1. curl方式下載安裝包安裝 注意:在mac中不支持像wget方式,只好用curl方式來下載。 可以直接到...
背景 學習MongoDB,并做筆記整理,以便于用到時查看。 MogoDB NoSQL Database(JS) 使用方便,想存就存,相取就取 是MEAN中的M(數(shù)據(jù)) 安裝 https://www.mongodb.com/downl... 選擇相應(yīng)系統(tǒng)安裝包 安裝mongoose 創(chuàng)建一個文件夾,并npm init --yes,創(chuàng)建package.js npm install mongoos...
摘要:學習筆記一安裝測試配置下載安裝從官網(wǎng)下載對應(yīng)的壓縮包解壓即可。 mongo學習筆記 一 安裝測試配置 1 下載安裝 從mongodb官網(wǎng)下載對應(yīng)的壓縮包,解壓即可。 copy命令到/usr/local/bin目錄 (cp mongod /usr/local/bin;cp mongo /usr/local/bin) 2 創(chuàng)建配置文件 參考官方文檔https:/...
閱讀 2018·2021-09-29 09:35
閱讀 1953·2019-08-30 14:15
閱讀 2977·2019-08-30 10:56
閱讀 962·2019-08-29 16:59
閱讀 575·2019-08-29 14:04
閱讀 1307·2019-08-29 12:30
閱讀 1031·2019-08-28 18:19
閱讀 514·2019-08-26 11:51