2019-12-19 mongodb分片介绍

 mongodb分片介绍2019-12-19 mongodb分片介绍

MongoDB分片架构图                                        2019-12-19 mongodb分片介绍

2019-12-19 mongodb分片介绍

 mongodb分片搭建

2019-12-19 mongodb分片介绍

 

2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

• mongodb3.4版本以后需要对config server创建副本集
• 添加配置文件(三台机器都操作)
• mkdir /etc/mongod/
2019-12-19 mongodb分片介绍
• vim /etc/mongod/config.conf //加入如下内容

pidfilepath = /var/run/mongodb/configsrv.pid

dbpath = /data/mongodb/config/data

logpath = /data/mongodb/config/log/congigsrv.log

logappend = true

bind_ip = 192.168.96.135 # 各自服务器的IP

port = 21000

fork = true

configsvr = true #declare this is a config db of a cluster;

replSet=configs #副本集名称

maxConns=20000 #设置最大连接数

2019-12-19 mongodb分片介绍

2019-12-19 mongodb分片介绍

• 启动三台机器的config server
• mongod -f /etc/mongod/config.conf  //三台机器都要操作

2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

 
• 登录任意一台机器的21000端口,初始化副本集
• mongo --host 192.168.133.130 --port 210002019-12-19 mongodb分片介绍
• config = { _id: "configs", members: [ {_id : 0, host : "192.168.133.130:21000"},{_id : 1, host : "192.168.133.132:21000"},{_id : 2, host : "192.168.133.133:21000"}] }
2019-12-19 mongodb分片介绍
v
• rs.initiate(config)

{ "ok" : 1 }

2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

•添加配置文件(三台机器都操作)
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
• vim /etc/mongod/shard1.conf //加入如下内容

pidfilepath = /var/run/mongodb/shard1.pid 

dbpath = /data/mongodb/shard1/data

logpath = /data/mongodb/shard1/log/shard1.log

logappend = true

bind_ip = 0.0.0.0

port = 27001

fork = true

httpinterface=true #打开web监控

rest=true

replSet=shard1 #副本集名称

shardsvr = true #declare this is a shard db of a cluster;

maxConns=20000 #设置最大连接数

 

机器2
可以使用替换
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
•添加配置文件(三台机器都操作)
• vim /etc/mongod/shard2.conf //加入如下内容

pidfilepath = /var/run/mongodb/shard2.pid

dbpath = /data/mongodb/shard2/data

logpath = /data/mongodb/shard2/log/shard2.log

logappend = true

bind_ip = 0.0.0.0

port = 27002

fork = true

httpinterface=true #打开web监控

rest=true

replSet=shard2 #副本集名称

shardsvr = true #declare this is a shard db of a cluster;

maxConns=20000 #设置最大连接数

 
机器3
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
•添加配置文件(三台机器都操作)
• vim /etc/mongod/shard3.conf //加入如下内容

pidfilepath = /var/run/mongodb/shard3.pid

dbpath = /data/mongodb/shard3/data

logpath = /data/mongodb/shard3/log/shard3.log

logappend = true

bind_ip = 0.0.0.0

port = 27003

fork = true

httpinterface=true #打开web监控

rest=true

replSet=shard3 #副本集名称

shardsvr = true #declare this is a shard db of a cluster;

maxConns=20000 #设置最大连接数

 

2019-12-19 mongodb分片介绍

• 启动shard1
• mongod -f /etc/mongod/shard1.conf //三台机器都要操作
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
• 登录130或者132任何一台机器的27001端口初始化副本集,133之所以不行,是因为shard1我们把133这台机器的27001端口作为了仲裁节点
• mongo --port 27001
• use admin2019-12-19 mongodb分片介绍
• config = { _id: "shard1", members: [ {_id : 0, host : "192.168.133.130:27001"}, {_id: 1,host : "192.168.133.132:27001"},{_id : 2, host : "192.168.133.133:27001",arbiterOnly:true}] }
2019-12-19 mongodb分片介绍
• rs.initiate(config)  初始化2019-12-19 mongodb分片介绍
 
 
 
 
• 启动shard2                 
• mongod -f /etc/mongod/shard2.conf //三台机器都要操作2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍 
• 登录132或者133任何一台机器的27002端口初始化副本集,130之所以不行,是因为shard2我们把130这台机器的27002端口作为了仲裁节点
• mongo --port 270022019-12-19 mongodb分片介绍
• use admin
• config = { _id: "shard2", members: [ {_id : 0, host : "192.168.133.130:27002" ,arbiterOnly:true},{_id : 1, host : "192.168.133.132:27002"},{_id : 2, host : "192.168.133.133:27002"}] }
• rs.initiate(config)2019-12-19 mongodb分片介绍等待更新状态码
 
• 启动shard3
• mongod -f /etc/mongod/shard3.conf //三台机器都要操作2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
• 登录130或者133任何一台机器的27003端口初始化副本集,132之所以不行,是因为shard3我们把132这台机器的27003端口作为了仲裁节点
• mongo --port 27003
• use admin2019-12-19 mongodb分片介绍
• config = { _id: "shard3", members: [ {_id : 0, host : "192.168.133.130:27003"},  {_id : 1, host : "192.168.133.132:27003", arbiterOnly:true}, {_id : 2, host : "192.168.133.133:27003"}] }
• rs.initiate(config)2019-12-19 mongodb分片介绍

 

 
 
2019-12-19 mongodb分片介绍
• 添加配置文件(三台机器都操作)
• vim /etc/mongod/mongos.conf //加入如下内容

pidfilepath = /var/run/mongodb/mongos.pid

logpath = /data/mongodb/mongos/log/mongos.log

logappend = true

bind_ip = 0.0.0.0

port = 20000

fork = true

configdb = configs/192.168.133.130:21000, 192.168.133.132:21000, 192.168.133.133:21000 #监听的配置服务器,只能有1个或者3个,configs为配置服务器的副本集名字

maxConns=20000 #设置最大连接数

2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

复制其他两个机器2019-12-19 mongodb分片介绍

•启动mongos服务,注意命令,前面都是mongod,这里是mongos
• mongos -f /etc/mongod/mongos.conf2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

 

分片搭建–启用分片

• 登录任何一台20000端口 
• mongo --port 20000  2019-12-19 mongodb分片介绍
• 把所有分片和路由器串联
•sh.addShard("shard1/192.168.133.130:27001,192.168.133.132:27001,192.168.133.133:27001")
•sh.addShard("shard2/192.168.133.130:27002,192.168.133.132:27002,192.168.133.133:27002")
•sh.addShard("shard3/192.168.133.130:27003,192.168.133.132:27003,192.168.133.133:27003")2019-12-19 mongodb分片介绍
 
• 查看集群状态
• sh.status()2019-12-19 mongodb分片介绍

 

分片搭建–测试

• 登录任何一台20000端口
• mongo --port 20000  
• use admin
• db.runCommand({ enablesharding : "testdb"}) 或者
• sh.enableSharding("testdb") //指定要分片的数据库
• db.runCommand( { shardcollection : "testdb.table1",key : {id: 1} } ) 或者
• sh.shardCollection("testdb.table1",{"id":1} ) //#指定数据库里需要分片的集合和片键
• use  testdb
• for (var i = 1; i <= 10000; i++) db.table1.save({id:i,"test1":"testval1"})//插入测试数据
• db.table1.stats()//查看table1状态2019-12-19 mongodb分片介绍
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

创建第二个库             2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

2019-12-19 mongodb分片介绍

第三个库2019-12-19 mongodb分片介绍

MongoDB备份

• 备份指定库
• mongodump --host 127.0.0.1 --port 20000  -d mydb -o /tmp/mongobak2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
• 它会在/tmp/目录下面生成一个mydb的目录
• 备份所有库
• mongodump --host 127.0.0.1 --port 20000 -o /tmp/mongobak/alldatabase 2019-12-19 mongodb分片介绍
如指定的目录不存将自动创建2019-12-19 mongodb分片介绍
2019-12-19 mongodb分片介绍
• 指定备份集合
• mongodump --host 127.0.0.1 --port 20000 -d mydb -c c1 -o /tmp/mongobak/2019-12-19 mongodb分片介绍
• 它依然会生成mydb目录,再在这目录下面生成两个文件
• 导出集合为json文件
• mongoexport --host 127.0.0.1 --port 20000 -d mydb -c c1 -o /tmp/mydb2/1.json2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍

 

MongoDB恢复

•恢复所有库
• mongorestore -h 127.0.0.1 --port 20000 --drop dir/ //其中dir是备份所有库的目录名字,其中--drop可选,意思是当恢复之前先把之前的数据删除,不建议使用
• 恢复指定库
• mongorestore -d mydb dir/  //-d跟要恢复的库名字,dir就是该库备份时所在的目录2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
恢复
2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍2019-12-19 mongodb分片介绍
• 恢复集合
•mongorestore -d mydb -c testc dir/mydb/testc.bson // -c后面跟要恢复的集合名字,dir是备份mydb库时生成文件所在路径,这里是一个bson文件的路径
• 导入集合
• mongoimport -d mydb -c testc --file /tmp/testc.json