MongoDB 分片（Cluster）
MongoDB 分片（Cluster）
基本环境：
由于资源紧张，只有3台虚拟机的关系，只做两个replicaSet，每台机器配置分别如下：
10.10.1.55这台机器安装 Primary1，configServer1， Arbiter1
10.10.1.56 安装 Primary2，configServer2, Arbiter2
10.10.1.57 安装 Secondary1,Secondary2,configServer3,mongos
1.55机器的配置文件如下：
Primary1的conf文件：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs0_0
logpath=/data/mongodb/log/rs0_0.log
logappend=true
port=40000
bind_ip=192.168.11.55,10.10.1.55
oplogSize=10000
fork=true
journal = true
#noprealloc = true
replSet=rs0
directoryperdb=true
|
Arbiter1的配置文件：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs0_arbiter
logpath=/data/mongodb/log/rs0_arbiter.log
logappend=true
port=40002
bind_ip=192.168.11.55,10.10.1.55
oplogSize=10000
fork=true
journal = true
#noprealloc = true
replSet=rs0
directoryperdb=true
|
ConfigServer1的配置文件：
| 1 2 3 4 5 6 7 8 9 10 |
dbpath=/data/mongodb/rs0_conf
logpath=/data/mongodb/log/rs0_conf.log
logappend=true
port=40006
bind_ip=192.168.11.55,10.10.1.55
fork=true
journal = true
#noprealloc = true
configsvr=true
directoryperdb=true
|
分别通过mongod --config filename 来启动不同的mongo 进程，成功启动后可以通过netstat 查看在1.55 机器上分别分配了Primary1端口：40000，Arbiter1端口：40002，configureServer1端口：40006
1.56机器的配置：
Primary2的配置文件：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs1_primary
logpath=/data/mongodb/log/rs1_p.log
logappend=true
bind_ip=192.168.11.56,10.10.1.56
directoryperdb=true
port=40003
oplogSize=10000
fork=true
journal = true
noprealloc = true
replSet=rs1
|
Arbiter2配置文件：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs1_arbiter
logpath=/data/mongodb/log/rs1_a.log
logappend=true
bind_ip=192.168.11.56,10.10.1.56
directoryperdb=true
port=40005
oplogSize=10000
fork=true
journal = true
noprealloc = true
replSet=rs1
|
ConfigureServer2配置文件：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs1_conf
logpath=/data/mongodb/log/rs1_conf.log
logappend=true
bind_ip=192.168.11.56,10.10.1.56
directoryperdb=true
port=40007
oplogSize=10000
fork=true
journal = true
noprealloc = true
configsvr=true
|
分别通过mongod --config filename 来启动不同的mongo 进程，成功启动后可以通过netstat 查看在1.55 机器上分别分配了Primary2端口：40003，Arbiter2端口：40005，configureServer2端口：40007
1.56机器的配置：
rs0_Secondary1配置：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs0_secondary1
logpath=/data/mongodb/log/rs0_secondary1.log
logappend=true
port=40001
bind_ip=192.168.11.57,10.10.1.57
oplogSize=10000
fork=true
journal = true
#noprealloc = true
replSet=rs0
directoryperdb=true
|
rs1_Secondary1配置：
| 1 2 3 4 5 6 7 8 9 10 11 |
dbpath=/data/mongodb/rs1_secondary1
logpath=/data/mongodb/log/rs1_secondary1.log
logappend=true
bind_ip=192.168.11.57,10.10.1.57
directoryperdb=true
port=40004
oplogSize=10000
fork=true
journal = true
noprealloc = true
replSet=rs1
|
configureServer3配置：
| 1 2 3 4 5 6 7 8 9 10 |
dbpath=/data/mongodb/confSvr3
logpath=/data/mongodb/log/conf3.log
logappend=true
bind_ip=192.168.11.57,10.10.1.57
directoryperdb=true
port=40008
oplogSize=10000
fork=true
journal = true
configsvr=true
|
mongos 配置：(启动mongos路由器要注意多台服务器时间必须要同步，否则出现错误)
| 1 2 3 4 |
logpath=/data/mongodb/log/mongos.log
port = 40009
configdb=10.10.1.55:40006,10.10.1.56:40007,10.10.1.57:40008
fork = true
|
分别通过mongod --config filename 来启动不同的mongo 进程，成功启动后可以通过netstat 查看在1.55 机器上分别分配了rs0_secondary1端口：40001，rs1_secondary1端口：40004，configureServer3端口：40008，mongos路由端口：40009
现在用mongo shell登录primary1 配置replicaSet0,步骤如下：
cfg={ "_id" : "rs0", "members" : [ { "_id" : 0, "host" : "10.10.1.55:40000" }, { "_id" : 1, "host" : "10.10.1.57:40001" } ] }
rs.initiate(cfg)
rs.status()
rs.addArb("10.10.1.55:40002")
现在用mongo shell登录primary2 配置replicaSet1,步骤如下：
cfg={ "_id" : "rs1", "members" : [ { "_id" : 0, "host" : "10.10.1.56:40003" }, { "_id" : 1, "host" : "10.10.1.57:40004" } ] }
rs.initiate(cfg)
rs.status()
rs.addArb("10.10.1.56:40005")
使用mongo shell登录mongos路由添加分片信息：
| 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 |
mongo --host 10.10.1.57 --port 40009
mongos> sh.addShard("rs0/10.10.1.55:40000,10.10.1.57:40001")
{ "shardAdded" : "rs0", "ok" : 1 }
mongos> sh.addShard("rs1/10.10.1.56:40003,10.10.1.57:40004")
{ "shardAdded" : "rs1", "ok" : 1 }
mongos> sh.status()
--- Sharding Status ---
sharding version: {
"_id" : 1,
"version" : 4,
"minCompatibleVersion" : 4,
"currentVersion" : 5,
"clusterId" : ObjectId("561c7bdd4315b18f9862adb4")
}
shards:
{ "_id" : "rs0", "host" : "rs0/10.10.1.55:40000,10.10.1.57:40001" }
{ "_id" : "rs1", "host" : "rs1/10.10.1.56:40003,10.10.1.57:40004" }
databases:
{ "_id" : "admin", "partitioned" : false, "primary" : "config" }
|
现在创建一个新的数据库来测试一下分片：
mongos> use people
switched to db people
mongos> for(var i=1;i<10;i++) db.customers.insert({name:"jordan"+i,country:"American"})
WriteResult({ "nInserted" : 1 })
mongos> for(var i=1;i<10;i++) db.customers.insert({name:"gaga"+i,country:"American"})
WriteResult({ "nInserted" : 1 })
mongos> for(var i=1;i<10;i++) db.customers.insert({name:"ham"+i,country:"UK"})
WriteResult({ "nInserted" : 1 })
mongos> for(var i=1;i<10;i++) db.customers.insert({name:"brown"+i,country:"UK"})
WriteResult({ "nInserted" : 1 })
mongos> for(var i=1;i<10;i++) db.customers.insert({name:"ramda"+i,country:"Malaysia"})
WriteResult({ "nInserted" : 1 })
开始建立分片：
| 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 |
mongos> db.customers.ensureIndex({country:1,_id:1})
{
"raw" : {
"rs0/10.10.1.55:40000,10.10.1.57:40001" : {
"createdCollectionAutomatically" : false,
"numIndexesBefore" : 1,
"numIndexesAfter" : 2,
"ok" : 1
}
},
"ok" : 1
}
mongos> sh.shardCollection("people.customers",{country:1,_id:1})
{ "collectionsharded" : "people.customers", "ok" : 1 }
mongos> sh.status()
--- Sharding Status ---
sharding version: {
"_id" : 1,
"version" : 4,
"minCompatibleVersion" : 4,
"currentVersion" : 5,
"clusterId" : ObjectId("561c7bdd4315b18f9862adb4")
}
shards:
{ "_id" : "rs0", "host" : "rs0/10.10.1.55:40000,10.10.1.57:40001" }
{ "_id" : "rs1", "host" : "rs1/10.10.1.56:40003,10.10.1.57:40004" }
databases:
{ "_id" : "admin", "partitioned" : false, "primary" : "config" }
{ "_id" : "test", "partitioned" : false, "primary" : "rs0" }
{ "_id" : "people", "partitioned" : true, "primary" : "rs0" }
people.customers
shard key: { "country" : 1, "_id" : 1 }
chunks:
rs0 1
{ "country" : { "$minKey" : 1 }, "_id" : { "$minKey" : 1 } } -->> { "country" : { "$maxKey" : 1 }, "_id" : { "$maxKey" : 1 } } on : rs0 Timestamp(1, 0)
|
现在由于数据量不多只有一个分片在rs0上，可以通过增加数据量来提高分片：
| 1 2 |
for(var i=10;i<10000;i++) db.customers.insert({name:"ham"+i,country:"UK"})
for(var i=10;i<10000;i++) db.customers.insert({name:"ramda"+i,country:"Malaysia"})
|
mongos> sh.status()
--- Sharding Status ---
sharding version: {
"_id" : 1,
"version" : 4,
"minCompatibleVersion" : 4,
"currentVersion" : 5,
"clusterId" : ObjectId("561c7bdd4315b18f9862adb4")
}
shards:
{ "_id" : "rs0", "host" : "rs0/10.10.1.55:40000,10.10.1.57:40001" }
{ "_id" : "rs1", "host" : "rs1/10.10.1.56:40003,10.10.1.57:40004" }
databases:
{ "_id" : "admin", "partitioned" : false, "primary" : "config" }
{ "_id" : "test", "partitioned" : false, "primary" : "rs0" }
{ "_id" : "people", "partitioned" : true, "primary" : "rs0" }
people.customers
shard key: { "country" : 1, "_id" : 1 }
chunks:
rs1 2
rs0 1
{ "country" : { "$minKey" : 1 }, "_id" : { "$minKey" : 1 } } -->> { "country" : "American", "_id" : ObjectId("561c7da73af7c7865defefb1") } on : rs1 Timestamp(2, 0)
{ "country" : "American", "_id" : ObjectId("561c7da73af7c7865defefb1") } -->> { "country" : "UK", "_id" : ObjectId("561c7db63af7c7865defefd4") } on : rs0 Timestamp(3, 1)
{ "country" : "UK", "_id" : ObjectId("561c7db63af7c7865defefd4") } -->> { "country" : { "$maxKey" : 1 }, "_id" : { "$maxKey" : 1 } } on : rs1 Timestamp(3, 0)
现在rs0上有一个分片，rs1上有两个分片
更多MongoDB相关内容可以看看以下的有用链接：
MongoDB 3.0 正式版发布下载
CentOS编译安装MongoDB
CentOS 编译安装 MongoDB与mongoDB的php扩展
CentOS 6 使用 yum 安装MongoDB及服务器端配置
Ubuntu 13.04下安装MongoDB2.4.3
MongoDB入门必读(概念与实战并重)
Ubunu 14.04下MongoDB的安装指南
《MongoDB 权威指南》(MongoDB: The Definitive Guide)英文文字版[PDF]
Nagios监控MongoDB分片集群服务实战
基于CentOS 6.5操作系统搭建MongoDB服务
MongoDB 的详细介绍：请点这里
MongoDB 的下载地址：请点这里
本文永久更新链接地址：
评论暂时关闭