程序笔记   发布时间:2022-07-21  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了mongodb集群搭建大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。
搭建之前,介绍以下mongodb集群的几种搭建方式:
(1).首先集群方式有三种:Replica Set(副本集)、Sharding(分片集)、Master-Slave(主从)三种方式。
 
(2).三种模式各有优劣,适用于不同的场合,属Replica set(副本集)应用最为广泛,主从模式现在用的较少,sharding模式最为完备,但配置维护较为复杂。
 
(3).Master/Slave(主从)
先说最后一个,是Master/Slave,不是Slaver。这种方式基本上不再推荐使用,只能从Master复制数据到Slave,并不提供高可用,一旦Master结点出故障就比较难处理。具体细节就不说了,反正已经不推荐使用。
 
(4).Replica Set(副本集)
1.即常说的副本集。副本集的主要目标有几个:
2.高可用(主要目标):当一个结点故障时自动切换到其他结点;
3.数据冗余(主要目标):数据复制到n个结点上,增加数据安全性,同时为高可用提供基础;
4.功能隔离(次要目标):使用不同的结点隔离某些有特殊需求的功能,比如使用一个结点进行OLAP运算(大规模资源占用),使用一个结点在远程做灾备(性能要求不如本地高),读写分离等等主节点举有读写权限,而从节点只有读权限;
 
(5).Sharded Cluster(分片集)
1.即分片集。分片集的主要设计目标是:
2.水平扩展:当一台服务器满足不了需求的时候,我们可以选择垂直扩展(增加服务器硬件),它然简单,但很容易达到极限,并且面临成本高等明显缺点。成本更低的方式是使用N台服务器组成集群来满足系统需求。这就是分片集的主要设计目标;
3.缩短响应时间:因为可以把数据分散到多台服务器上,自然每台服务器的处理压力减小,处理时间就会缩短;
4.这里会出现一个问题:假设每台服务器出故障的机率是x%,那么n台服务器有一台出现故障的机率就是x% * n,如果不做高可用设计,集群出现故障的概率就会随机器数量成正比增长,这在工程上是不能接受的。幸运的是我们已经有了解决高可用的方案,也就是复制集。所以MongoDB的分片集群要求每一个片都是复制集(当然测试环境也可以使用单结点,生产环境不推荐)。

mongodb集群搭建

其中Replica Set模式中三类角色有必要知道下:

主节点[PriMary]

接收所有的写请求,然后把修改同步到所有Secondary。一个Replica Set只能有一个PriMary节点,当PriMary挂掉后,其他Secondary或者Arbiter节点会重新选举出来一个主节点。默认读请求也是发到PriMary节点处理的,需要转发到Secondary需要客户端修改一下连接配置。

副本节点[Secondary]

与主节点保持同样的数据集。当主节点挂掉的时候,参与选主。

仲裁者[Arbiter]

不保有数据,不参与选主,只进行选主投票。使用Arbiter可以减轻数据存储的硬件需求,Arbiter跑起来几乎没什么大的硬件资源需求,但重要的一点是,在生产环境下它和其他数据节点不要部署在同一台机器上。

注意,一个自动failover的Replica Set节点数必须为奇数,目的是选主投票的时候要有一个大多数才能进行选主决策。

 

 

搭建集群

了解了基本概念之后,就开始尝试搭建集群,为了更好的理解,特意找了三台测试机进行部署。

前期准备

首先准备三台测试机:

 10.100.1.101 主节点(master) 10.100.1.102 备节点(slavE) 10.100.1.103 仲裁点(arbiter)

然后就是mongo的安装包(由于线上用的是3.4.2的版本,所以保持统一)

1

curl -O https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.2.tgz

 

 

安装mongo

这里统一安装在/usr/local/mongodb下。

首先解压并重命名:

1

2

tar -zxvf mongodb-linux-x86_64-3.0.6.tgz   

@H_273_166@mv @H_273_166@mongodb-linux-x86_64-3.4.2/ /usr/local/mongodb

 

 

 

然后在/mongodb下新建几个文件:

1

2

3

4

5

6

7

8

#存放mongo配置文件

@H_273_166@mkdir -p conf

 

#存放日志文件

@H_273_166@mkdir -p logs

 

#存放数据文件

@H_273_166@mkdir -p data

 

 

 

 

 

 

 

 

 

这里需要注意下,配置文件中配置的文件路径一定要存在,不然在启动mongo时会出错,mongo启动时也不会自动生成。

接着分配创建配置文件:

主节点:mongodb_master.conf

1

2

3

4

5

6

7

8

9

10

11

#master.conf

dbpath=/usr/local/mongodb/data

logpath=/usr/local/mongodb/logs/mongodb.log

pidfilepath=/usr/local/mongodb/master.pid

directoryperdb=true

logappend=true

replSet=testdb

port=27017

oplogSize=100

fork=true

noprealloc=true

 

 

 

 

 

 

 

 

 

 

 

 

备份节点:vi mongodb_slave.conf

1

2

3

4

5

6

7

8

9

10

11

#slave.conf

dbpath=/usr/local/mongodb/data

logpath=/usr/local/mongodb/logs/mongodb.log

pidfilepath=/usr/local/mongodb/master.pid

directoryperdb=true

logappend=true

replSet=testdb

port=27017

oplogSize=100

fork=true

noprealloc=true

 

 

 

 

 

 

 

 

 

 

 

 

仲裁点: vi mongodb_arbiter.conf

1

2

3

4

5

6

7

8

9

10

11

#arbiter.conf

dbpath=/usr/local/mongodb/data

logpath=/usr/local/mongodb/logs/mongodb.log

pidfilepath=/usr/local/mongodb/master.pid

directoryperdb=true

logappend=true

replSet=testdb

port=27017

oplogSize=100

fork=true

noprealloc=true

 

 

 

 

 

 

 

 

 

 

 

 

在使用上只是最基本的配置,实际场景中可以根据自己的业务需求进行配置,其他参数供参

--quiet     # 安静输出--port arg  # 指定服务端口号,默认端口27017--bind_ip arg   # 绑定服务IP,若绑定127.0.0.1,则只能本机访问,不指定默认本地所有IP--logpath arg   # 指定MongoDB日志文件,注意是指定文件不是目录--logappend     # 使用追加的方式写日志--pidfilepath arg   # PID File 的完整路径,如果没有设置,则没有PID文件--keyFile arg   # 集群的私钥的完整路径,只对于Replica Set 架构有效--unixSocketPrefix arg  # UNIX域套接字替代目录,(默认为 /tmp)--fork  # 以守护进程的方式运行MongoDB,创建服务器进程--auth  # 启用验证--cpu   # 定期显示CPU的CPU利用率和iowait--dbpath arg    # 指定数据库路径--diaglog arg   # diaglog选项 0=off 1=W 2=R 3=both 7=W+some reads--directoryperdb    # 设置每个数据库将被保存在一个单独的目录--journal   # 启用日志选项,MongoDB的数据操作将会写入到journal文件夹的文件里--journalOptions arg    # 启用日志诊断选项--ipv6  # 启用IPv6选项--jsonp     # 允许JSONP形式通过http访问(有安全影响)--maxConns arg  # 最大同时连接数 默认2000--noauth    # 不启用验证--nohttpinterface   # 关闭http接口,默认关闭27018端口访问--noprealloc    # 禁用数据文件预分配(往往影响性能)--noscripTing   # 禁用脚本引擎--notablescan   # 不允许表扫描--nounixsocket  # 禁用Unix套接字监听--nssize arg (=16)  # 设置信数据库.ns文件大小(MB)--objcheck  # 在收到客户数据,检查的有效性,--profile arg   # 档案参数 0=off 1=slow, 2=all--quota     # 限制每个数据库的文件数,设置默认为8--quotaFiles arg    # number of files allower per db, requires --quota--rest  # 开启简单的rest API--repair    # 修复所有数据库run repair on all dbs--repairpath arg    # 修复库生成的文件的目录,默认为目录名称dbpath--slowms arg (=100)     # value of slow for profile and console log--smallfiles    # 使用较小的默认文件--syncdelay arg (=60)   # 数据写入磁盘的时间秒数(0=never,不推荐)--sysinfo   # 打印一些诊断系统信息--upgrade   # 如果需要升级数据库--fastsync  # 从一个dbpath里启用从库复制服务,该dbpath的数据库是主库的快照,可用于快速启用同步--autoresync    # 如果从库与主库同步数据差得多,自动重新同步,--oplogSize arg     # 设置oplog的大小(MB)--master    # 主库模式--slave     # 从库模式--source arg    # 从库 端口号--only arg  # 指定单一的数据库复制--slavedelay arg    #设置从库同步主库的延迟时间

--replSet arg   # 设置副本集名称

--configsvr     # 声明这是一个集群的config服务,默认端口27019,默认目录/data/configdb--shardsvr  # 声明这是一个集群的分片,默认端口27018--noMoveParanoia    # 关闭偏执为moveChunk数据保存

节点配置完之后就可以启动mongo了,cd到bin目录下:

1

2

3

./mongod -f /etc/mongodb_master.conf

./mongod -f /etc/mongodb_slave.conf

./mongod -f /etc/mongodb_arbiter.conf

 

 

 

 

配置节点

最后,就需要配置主、备、仲裁节点了。首先我们选择一台服务器进行连接:

1

2

./mongo 10.100.1.101:27017

>use admin

 

 

 

 

mongodb集群搭建

mongodb集群搭建

mongodb集群搭建

 

 

然后进行配置

1

2

cfg={ _id:"testdb", members:[ {_id:0,host:'10.100.1.101:27017',priority:2}, {_id:1,host:'10.100.1.102:27017',priority:1}, {_id:2,host:'10.100.1.103:27017',arbiterOnly:true}] };

rs.initiate(cfg) #生效配置

 

 

 

如果不出意外,配置正常生效,基本也就完成了,可以通过rs.status()命令查看相关信息。

到这里,你可以登录数据库测试下成果了,看下正常的数据库操作,主从是否同步了。测试的话这里就不再多说了。

进入从节点 执行  rs.slaveOk()  从服务器上的数据库是不允许进行读写操作,所以就会报类似于这样的错误,这句是解决方法。

大佬总结

以上是大佬教程为你收集整理的mongodb集群搭建全部内容,希望文章能够帮你解决mongodb集群搭建所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。