| IP地址 | 路由服務(wù)器(Routers) | 配置服務(wù)器(Config Server) | Shard1 | Shard2 | Shard3 |
|---|---|---|---|---|---|
| 192.168.125.119 | 27017 | 27018 | 27001 | 27002 | 27003 |
| 192.168.125.120 | 27017 | 27018 | 27001 | 27002 | 27003 |
| 192.168.125.121 | 27017 | 27018 | 27001 | 27002 | 27003 |
部署分片群集
三臺(tái)物理服務(wù)器安裝及配置
1、下載解壓MongoDB
wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-4.0.0.tgz tar zxvf mongodb-linux-x86_64-4.0.0.tgz -C /opt mv /opt/mongodb-linux-x86_64-4.0.0/ /usr/local/mongodb
2、創(chuàng)建路由、配置、分片服務(wù)器的數(shù)據(jù)存放目錄及日志管理
路由服務(wù)器不存儲(chǔ)數(shù)據(jù)，因此不需要?jiǎng)?chuàng)建數(shù)據(jù)存儲(chǔ)目錄，日志文件創(chuàng)建完成還需給予權(quán)限。
mkdir -p /data/mongodb/config
mkdir -p /data/mongodb/shard{1,2,3}
mkdir -p /data/mongodb/logs
touch /data/mongodb/logs/shard{1,2,3}.log
touch /data/mongodb/logs/mongos.log
touch /data/mongodb/logs/config.log
chmod 777 /data/mongodb/logs/*.log
3、創(chuàng)建管理用戶，修改目錄權(quán)限
useradd -M -s /sbin/nologin mongo chown -R mongo:mongo /usr/local/mongodb chown -R mongo:mongo /data/mongodb
4、添加環(huán)境變量，便于使用
echo 'export MONGODB_HOME=/usr/local/mongodb' >> /etc/profile echo 'export PATH=$PATH:$MONGODB_HOME/bin' >> /etc/profile source /etc/profile
5、系統(tǒng)參數(shù)優(yōu)化
ulimit -n 25000 //可以打開(kāi)的最大文件數(shù)量 ulimit -u 25000 //用戶最大可用的進(jìn)程數(shù) sysctl -w vm.zone_reclaim_mode=0 //內(nèi)存不足時(shí)，從其他節(jié)點(diǎn)分配內(nèi)存 # 從CentOS7開(kāi)始，MongoDB會(huì)建議關(guān)閉系統(tǒng)的THP特性，否則可能會(huì)導(dǎo)致性能下降 echo never > /sys/kernel/mm/transparent_hugepage/enabled echo never > /sys/kernel/mm/transparent_hugepage/defrag //*注意*這些優(yōu)化都是臨時(shí)的，重啟失效
部署配置服務(wù)器（三臺(tái)物理服務(wù)器配置步驟相同）
1、寫(xiě)入配置文件，我們可以用scp命令把配置文件發(fā)到其他兩臺(tái)物理服務(wù)器
# vim config.conf dbpath=/data/mongodb/config //數(shù)據(jù)文件存放位置 logpath=/data/logs/config.log //日志文件 port=27018 //端口號(hào) logappend=true fork=true maxConns=5000 storageEngine=mmapv1 replSet=configs //復(fù)制集名稱(chēng) configsvr=true //設(shè)置參數(shù)為true # mongod -f config.conf //啟動(dòng)config實(shí)例 scp /usr/local/mongodb/bin/config.conf root@192.168.125.120:/usr/local/mongodb/bin scp /usr/local/mongodb/bin/config.conf root@192.168.125.121:/usr/local/mongodb/bin
2、配置復(fù)制集（任意一臺(tái)物理機(jī)上操作即可）
mongo --port 27018
config={_id:"configs",members:[{_id:0,host:"192.168.125.119:27018"},{_id:1,host:"192.168.125.120:27018"},{_id:2,host:"192.168.125.121:27018"}]} //創(chuàng)建復(fù)制集
rs.initiate(config) //初始化復(fù)制集
部署分片服務(wù)器
編輯shard{1,2,3}.conf配置文件，端口分別為27001,27002,27003，設(shè)置shardsvr=true，啟動(dòng)分片服務(wù)器
# vim shard1.conf dbpath=/data/mongodb/shard1 logpath=/data/logs/shard1.log port=27001 logappend=true fork=true maxConns=5000 storageEngine=mmapv1 shardsvr=true # mongod -f shard1.conf # 與另外兩臺(tái)配置實(shí)例配置文件相同，僅端口、數(shù)據(jù)文件存放及日志文件要改，只需配置完成后啟動(dòng)即可
將shard1配置為復(fù)制集(這里需要注意的是，預(yù)先被設(shè)為仲裁節(jié)點(diǎn)的服務(wù)器上創(chuàng)建復(fù)制集會(huì)報(bào)錯(cuò)。)
mongo --port 27001
use admin
config={_id:"shard1",members:[{_id:0,host:"192.168.125.119:27001"},{_id:1,host:"192.168.125.120:27001"},{_id:2,host:"192.168.125.121:27001"}]} //創(chuàng)建復(fù)制集
rs.initiate(config) //初始化復(fù)制集
其余兩臺(tái)分片服務(wù)器shard2、shard3設(shè)置相同，注意端口及仲裁節(jié)點(diǎn)的問(wèn)題即可
部署路由服務(wù)器
創(chuàng)建配置文件，將配置文件發(fā)送到其他物理服務(wù)器。注意，路由服務(wù)器不需要存儲(chǔ)數(shù)據(jù)目錄
# vim mongos.conf logpath=/data/mongodb/logs/mongos.log logappend = true port = 27017 fork = true configdb = configs/192.168.125.119:27018,192.168.125.120:27018,192.168.125.121:27018 maxConns=20000
啟動(dòng)mongos實(shí)例
mongs -f /usr/local/mongodb/bin/mongos.conf # 注意，這邊啟動(dòng)mongos實(shí)例用的是mongos命令
啟動(dòng)分片功能
mongo //默認(rèn)進(jìn)入27017端口
mongos> use admin
mongos> sh.addShard("shard1/192.168.125.119:27001,192.168.125.120:27001,172.16.10.29:27001")
mongos> sh.addShard("shard2/192.168.125.119:27002,192.168.125.120:27002,172.16.10.29:27002")
mongos> sh.status() //查看群集狀態(tài)
# 此處為添加兩臺(tái)分片服務(wù)器，后續(xù)添加的也會(huì)均勻分配分片數(shù)據(jù)
實(shí)現(xiàn)分片功能
設(shè)置分片chunk大小
mongos> use config
mongos> db.settings.save({"_id":"chunksize","value":1})
# 設(shè)置塊大小為1M是方便實(shí)驗(yàn)，不然需要插入海量數(shù)據(jù)
模擬寫(xiě)入數(shù)據(jù)
mongos> use school
mongos> show collections
mongos> for(i=1;i=50000;i++){db.user.insert({"id":i,"name":"jack"+i})}
# 在school庫(kù)的user表中循環(huán)寫(xiě)入五萬(wàn)條數(shù)據(jù)
啟動(dòng)數(shù)據(jù)庫(kù)分片
mongos>sh.enableSharding("school")
# 我們可以自定義需要分片的庫(kù)或表
為school庫(kù)中的user集合創(chuàng)建索引，然后對(duì)表進(jìn)行分片
mongos> db.user.createIndex({"id":1})
# 以"id"作為索引
mongos> sh.shardCollection("school.user",{"id":1})
# 根據(jù)"id"對(duì)user表進(jìn)行分片
mongos> sh.status()
# 查看分片情況
mongos> sh.help()
# 查看分片相關(guān)的命令
以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
標(biāo)簽：玉林 自貢 無(wú)錫 廈門(mén) 興安盟 泰安 遼陽(yáng) 雞西
巨人網(wǎng)絡(luò)通訊聲明：本文標(biāo)題《詳解MongoDB4.0構(gòu)建分布式分片群集》，本文關(guān)鍵詞 詳解,MongoDB4.0,構(gòu)建,分布式,；如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題，煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們，我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò)，涉及言論、版權(quán)與本站無(wú)關(guān)。