首页手记 MongoDB4.0.2集群搭建

MongoDB4.0.2集群搭建

标签：

MongoDB

MongoDB4.0.2集群搭建

根据对象存储平台Django+MongoDB+Ceph的需求，现搭建部署一个十节点的MongoDB集群，主要以下关键点：

根据最新版本MongoDB推荐，配置文件采用yaml方式来配置
一共10台服务器，即10个节点。对数据集进行分片，共分10个shard
每一个shard都进行副本集配置，由于硬件磁盘已进行raid多副本备份，考虑到存储效率，本集群在副本集只需要一个备服务器，故采用1主+1备
+1仲裁（必须有仲裁节点，不然被服务器无法通过心跳机制升级为主服务器）的副本及配置方式

环境准备

系统：CentOS7.0 64bit

十台服务器：mongo00-mongo09

服务器规划：

mongo00	mongo01	mongo02	mongo03	mongo04	mongo05	mongo06	mongo07	mongo08	mongo09
mongos	mongos	mongos	mongos	mongos	mongos	mongos	config	config	config
shard0主	shard1主	shard2主	shard3主	shard4主	shard5主	shard6主	shard7主	shard8主	shard9主
shard9副	shard0副	shard1副	shard2副	shard3副	shard4副	shard5副	shard6副	shard7副	shard8副
shard8仲	shard9仲	shard0仲	shard1仲	shard2仲	shard3仲	shard4仲	shard5仲	shard6仲	shard7仲

端口分配：

mongos:20000config:21000shard0:27000shard1:27001shard2:27002shard3:27003shard4:27004shard5:27005shard6:27006shard7:27007shard8:27008shard9:27009

MongoDB安装

下载、安装MongoDB

#官网下载wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-4.0.2.tgz#解压tar -xzvf mongodb-linux-x86_64-rhel70-4.0.2.tgz -C /usr/local/cd /use/localmv mongodb-linux-x86_64-rhel70-4.0.2 mongodb

#mongo服务通过配置文件启动,存放配置文件目录/usr/local/mongodb/conf#存放日志、进程管理信息的目录/var/log/nginx/mongodb#根据服务器规划，在每台服务器创建该节点所含shard的数据存放目录/mnt/mongodata/shard0-9#同时在mongo07-mongo09三台服务器创建存放config server数据的数据目录/mnt/mongodata/config#mongo00:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard0
mkdir -p /mnt/mongodata/shard9
mkdir -p /mnt/mongodata/shard8#mongo01:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard0
mkdir -p /mnt/mongodata/shard1
mkdir -p /mnt/mongodata/shard9#mongo02:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard0
mkdir -p /mnt/mongodata/shard1
mkdir -p /mnt/mongodata/shard2#mongo03:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard1
mkdir -p /mnt/mongodata/shard2
mkdir -p /mnt/mongodata/shard3#mongo04:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard2
mkdir -p /mnt/mongodata/shard3
mkdir -p /mnt/mongodata/shard4#mongo05:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard3
mkdir -p /mnt/mongodata/shard4
mkdir -p /mnt/mongodata/shard5#mongo06:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard4
mkdir -p /mnt/mongodata/shard5
mkdir -p /mnt/mongodata/shard6#mongo07:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard5
mkdir -p /mnt/mongodata/shard6
mkdir -p /mnt/mongodata/shard7
mkdir -p /mnt/mongodata/config#mongo08:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard6
mkdir -p /mnt/mongodata/shard7
mkdir -p /mnt/mongodata/shard8
mkdir -p /mnt/mongodata/config#mongo09:mkdir -p /usr/local/mongodb/conf
mkdir -p /var/log/nginx/mongodb
mkdir -p /mnt/mongodata/shard7
mkdir -p /mnt/mongodata/shard8
mkdir -p /mnt/mongodata/shard9
mkdir -p /mnt/mongodata/config

环境变量配置

vim /etc/profile#加入以下内容export MONGODB_HOME=/usr/local/mongodbexport PATH=$MONGODB_HOME/bin:$PATH#立即生效source /etc/profile

使用命令mongod -v输出信息版本信息验证环境变量是否配置成功

集群配置

1、config server配置服务器（副本集）

根据服务器规划，在mongo07-mongo09上部署三台config server副本集，在该三台服务器上分别添加以下配置文件：

vim /usr/local/mongodb/conf/config.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/config.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/config
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/configsrv.pid 
# network interfacesnet:
  port: 21000
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: configs       

sharding:
    clusterRole: configsvr

启动这三台服务器的config server

mongod -f /usr/local/mongodb/conf/config.conf

登陆任意一台服务器，初始化副本集

mongo --port 21000#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致）config = {...    _id : "configs",...     members : [...         {_id : 0, host : "mongo07:21000" },...         {_id : 1, host : "mongo08:21000" },...         {_id : 2, host : "mongo09:21000" }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

2、shard server分片服务器（副本集）

配置shard0副本集

在mongo00、mongo01、mongo02服务器上做以下配置：

vim /usr/local/mongodb/conf/shard0.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard0.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard0
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard0.pid 
# network interfacesnet:
  port: 27000
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard0       

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard0 server

mongod -f /usr/local/mongodb/conf/shard0.conf

登陆任意一台服务器，初始化副本集

mongo --port 27000#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard0",...     members : [...         {_id : 0, host : "mongo00:27000", priority : 2 },...         {_id : 1, host : "mongo01:27000", priority : 1 },...         {_id : 2, host : "mongo02:27000", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard1副本集

在mongo01、mongo02、mongo03服务器上做以下配置：

vim /usr/local/mongodb/conf/shard1.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard1.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard1
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard1.pid 
# network interfacesnet:
  port: 27001
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard1

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard1 server

mongod -f /usr/local/mongodb/conf/shard1.conf

登陆任意一台服务器，初始化副本集

mongo --port 27001#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard1",...     members : [...         {_id : 0, host : "mongo01:27001", priority : 2 },...         {_id : 1, host : "mongo02:27001", priority : 1 },...         {_id : 2, host : "mongo03:27001", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard2副本集

在mongo02、mongo03、mongo04服务器上做以下配置：

vim /usr/local/mongodb/conf/shard2.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard2.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard2
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard2.pid 
# network interfacesnet:
  port: 27002
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard2

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard2 server

mongod -f /usr/local/mongodb/conf/shard2.conf

登陆任意一台服务器，初始化副本集

mongo --port 27002#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard2",...     members : [...         {_id : 0, host : "mongo02:27002", priority : 2 },...         {_id : 1, host : "mongo03:27002", priority : 1 },...         {_id : 2, host : "mongo04:27002", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard3副本集

在mongo03、mongo04、mongo05服务器上做以下配置：

vim /usr/local/mongodb/conf/shard3.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard3.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard3
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard3.pid 
# network interfacesnet:
  port: 27003
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard3

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard3 server

mongod -f /usr/local/mongodb/conf/shard3.conf

登陆任意一台服务器，初始化副本集

mongo --port 27003#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard3",...     members : [...         {_id : 0, host : "mongo03:27003", priority : 2 },...         {_id : 1, host : "mongo04:27003", priority : 1 },...         {_id : 2, host : "mongo05:27003", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard4副本集

在mongo04、mongo05、mongo06服务器上做以下配置：

vim /usr/local/mongodb/conf/shard4.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard4.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard4
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard4.pid 
# network interfacesnet:
  port: 27004
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard4

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard4 server

mongod -f /usr/local/mongodb/conf/shard4.conf

登陆任意一台服务器，初始化副本集

mongo --port 27004#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard4",...     members : [...         {_id : 0, host : "mongo04:27004", priority : 2 },...         {_id : 1, host : "mongo05:27004", priority : 1 },...         {_id : 2, host : "mongo06:27004", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard5副本集

在mongo05、mongo06、mongo07服务器上做以下配置：

vim /usr/local/mongodb/conf/shard5.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard5.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard5
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard5.pid 
# network interfacesnet:
  port: 27005
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard5

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard5 server

mongod -f /usr/local/mongodb/conf/shard5.conf

登陆任意一台服务器，初始化副本集

mongo --port 27005#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard5",...     members : [...         {_id : 0, host : "mongo05:27005", priority : 2 },...         {_id : 1, host : "mongo06:27005", priority : 1 },...         {_id : 2, host : "mongo07:27005", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard6副本集

在mongo06、mongo07、mongo08服务器上做以下配置：

vim /usr/local/mongodb/conf/shard6.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard6.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard6
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard6.pid 
# network interfacesnet:
  port: 27006
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard6

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard6 server

mongod -f /usr/local/mongodb/conf/shard6.conf

登陆任意一台服务器，初始化副本集

mongo --port 27006#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard6",...     members : [...         {_id : 0, host : "mongo06:27006", priority : 2 },...         {_id : 1, host : "mongo07:27006", priority : 1 },...         {_id : 2, host : "mongo08:27006", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

配置shard7副本集

在mongo07、mongo08、mongo09服务器上做以下配置：

vim /usr/local/mongodb/conf/shard7.conf# where to write logging data.systemLog:
  destination: file
  logAppend: true
  path: /var/log/nginx/mongodb/shard7.log 
# Where and how to store data.storage:
  dbPath: /mnt/mongodata/shard7
  journal:
    enabled: true# how the process runsprocessManagement:
  fork: true
  pidFilePath: /var/log/nginx/mongodb/shard7.pid 
# network interfacesnet:
  port: 27007
  bindIp: 0.0.0.0 
#operationProfiling:replication:
    replSetName: shard7

sharding:
    clusterRole: shardsvr

启动这三台服务器的shard7 server

mongod -f /usr/local/mongodb/conf/shard7.conf

登陆任意一台服务器，初始化副本集

mongo --port 27007#定义副本集配置（键“_id”对应的值必须与配置文件中的replicaction.replSetName一致,priority代表权重[1,100]，大的被分配为主服务器，0永久不会变为主服务器）config = {...    _id : "shard7",...     members : [...         {_id : 0, host : "mongo07:27007", priority : 2 },...         {_id : 1, host : "mongo08:27007", priority : 1 },...         {_id : 2, host : "mongo09:27007", arbiterOnly :true }...     ]... }#初始化副本集rs.initiate(config)#查看分区状态rs.status();

作者：IIIns
链接：https://www.jianshu.com/p/e1855a1d38b7

点击查看更多内容

为 TA 点赞

若觉得本文不错，就分享一下吧！

评论

评论

共同学习，写下你的评论

评论加载中...

展开查看更多评论

作者其他优质文章

正在加载中

青春有我

JAVA开发工程师

手记
篇

粉丝

205

获赞与收藏

1008

关注作者，订阅最新文章

阅读免费教程

后端通用面试教程

41个小节 30980 346

网络编程入门教程

20个小节 12754 240

Pandas 入门教程

25个小节 18637 343

推荐

评论

收藏

共同学习，写下你的评论



感谢您的支持，我会继续努力的～

扫码打赏，你说多少就多少

赞赏金额会直接到老师账户

支付方式

打开微信扫一扫，即可进行扫码打赏哦

今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与放弃机会

点击
抽奖

慕课手记新用户专享福利

恭喜你，你的运气太好了，居然抽中了 100个积分！

恭喜你，抽中了价值元的专栏！

太棒了，直接落到你账户里！

积分商城里的罗技鼠标、机械键盘、
Kindle 阅读器、小米平衡车
Apple iPad （10.2英寸）、大额优惠券
在等着你去兑换了噢

作者：

免费赠送

兑换码：1111222211 复制

优惠券可用于购买实战课、体系课
无门槛使用

先去看看，有什么好东西马上兑换我爱学习，选课去


热搜

最近搜索清空

MongoDB4.0.2集群搭建

MongoDB4.0.2集群搭建

环境准备

MongoDB安装

集群配置

1、config server配置服务器（副本集）

2、shard server分片服务器（副本集）

配置shard0副本集

配置shard1副本集

配置shard2副本集

配置shard3副本集

配置shard4副本集

配置shard5副本集

配置shard6副本集

配置shard7副本集

阅读免费教程