码迷，mamicode.com
首页 > 其他好文 > 详细

Replica Sets+Sharding方案之真枪实弹篇

时间：2014-07-30 10:06:43      阅读：403      评论：0      收藏：0      [点我收藏+]

标签：style   http   color   os   strong   文件   io   数据   

话说在虚拟机中会报各种错误，在真实的环境中就不会那么痛苦了。
想了一下虚拟机中报错的原因有。机器卡，处理的时间长就会抛出错误
还有虚拟机如果给的空间太小，也会报异常。
此处讲讲我的大致思路。
第一，选择三台服务器，最好不是虚拟的
第二，设计三台服务器的IP，端口，和各自的角色
第三，检查防火墙有没有关闭，时间是不是同步
如果上面都可以了，那你就可以操作了。
当然，mongodb版本和mongodb前提搭建就建在前面吧

wget http://fastdl.mongodb.org/linux/mongodb-linux-x86_64-2.0.4.tgz

解压mongodb文件

主机1 版本号不一样。我的是2.0.4

[root@mongodb40 ~]# tar zxvfmongodb-linux-x86_64-2.4.7.tgz

[root@mongodb40 ~]# mvmongodb-linux-x86_64-2.4.7 /home/mongodb

主机2

[root@mongodb41~]# tar zxvfmongodb-linux-x86_64-2.4.7.tgz

[root@mongodb41~]# mvmongodb-linux-x86_64-2.4.7 /home/mongodb

主机3

[root@mongodb250 ~]# tar zxvfmongodb-linux-x86_64-2.4.7.tgz

[root@mongodb250~]# mvmongodb-linux-x86_64-2.4.7 /home/mongodb


mongo集群分片实战

服务器三台

 

 

                主机1（172.16.0.40）                主机2（172.16.0.41）                               主机3（172.16.0.250）

     第一片(11731)                    主                                               副本                                                                             仲裁

 

    第二片(11732)                 仲裁                                              主                                                                                 副本

 

    第三片(11733)                    副本                                       仲裁                                                                                   主

 

                   30000                    configServer                                configServer                                                           config Server

 

                    60000                          RouteProcess                        RouteProcess                                                        Route Process



创建数据库目录

主机1（172.16.0.40）配置文件

[root@mongodb115 ~]# mkdir -p/home/data/shard1_1

[root@mongodb115 ~]# mkdir -p/home/data/shard2_1

[root@mongodb115 ~]# mkdir -p/home/data/shard3_1

[root@mongodb115 ~]# mkdir -p/home/data/config                            #config server目录

[root@mongodb115 ~]# mkdir -p/home/config                                       #放配置文件

[root@mongodb115 ~]# mkdir -p/home/data/logs

这个地方的所有配置目录都放在/home/config目录下，切记切记啊，因为我在这里吃过亏，不知一次。


分片1

[root@mongodb40 config]# catshard1_1.conf

port=11731

dbpath=/home/data/shard1_1

logpath=/home/data/logs/shard1_1.log

directoryperdb=true

logappend=true

replSet=shard1

#bind_ip=172.16.0.40

shardsvr=true

fork=true

pidfilepath=/home/data/shard1_1.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

分片2

[root@mongodb40 config]# catshard2_1.conf

port=11732

dbpath=/home/data/shard2_1

logpath=/home/data/logs/shard2_1.log

directoryperdb=true

logappend=true

replSet=shard2

#bind_ip=172.16.0.40

shardsvr=true

fork=true

pidfilepath=/home/data/shard2_1.pid

maxConns=20000

oplogSize=5000

noprealloc=true 

nohttpinterface=true 

分片3

[root@mongodb40 config]# catshard3_1.conf

port=11733

dbpath=/home/data/shard3_1

logpath=/home/data/logs/shard3_1.log

directoryperdb=true

logappend=true

replSet=shard3

#bind_ip=172.16.0.40

shardsvr=true

fork=true

pidfilepath=/home/data/shard3_1.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

config server 配置文件

[root@mongodb40 config]# catconfig.conf

port=30000

dbpath=/home/data/config

logpath=/home/data/logs/config.log

directoryperdb=true

configsvr=true

logappend=true

#bind_ip=172.16.0.40

fork=true

pidfilepath=/home/data/config.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

RouteProces 配置文件

[root@mongodb40 config]# catmongos.conf

port=60000

logpath=/home/data/logs/mongos.log

logappend=true

configdb=172.16.0.40:30000,172.16.0.41:30000,172.16.0.250:30000

#bind_ip=172.16.0.40

fork=true

pidfilepath=/home/data/mongos.pid

chunkSize=5

maxConns=20000

nohttpinterface=true



主机2（172.16.0.41）配置文件

[root@mongodb114 ~]# mkdir -p/home/data/shard1_2

[root@mongodb114 ~]# mkdir -p/home/data/shard2_2

[root@mongodb114 ~]# mkdir -p/home/data/shard3_2

[root@mongodb114 ~]# mkdir -p/home/data/config                      #config server目录

[root@mongodb114 ~]# mkdir -p/home/config          #放配置文件

[root@mongodb114 ~]# mkdir -p/home/data/logs

 

分片1

[root@mongodb41 config]# catshard1_2.conf

port=11731

dbpath=/home/data/shard1_2

logpath=/home/data/logs/shard1_2.log

directoryperdb=true

logappend=true

replSet=shard1

#bind_ip=172.16.0.41

shardsvr=true

fork=true

pidfilepath=/home/data/shard1_2.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

分片2

[root@mongodb41 config]# catshard2_2.conf

port=11732

dbpath=/home/data/shard2_2

logpath=/home/data/logs/shard2_2.log

directoryperdb=true

logappend=true

replSet=shard2

#bind_ip=172.16.0.41

shardsvr=true

fork=true

pidfilepath=/home/data/shard2_2.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

分片3

[root@mongodb41 config]# catshard3_2.conf

port=11733

dbpath=/home/data/shard3_2

logpath=/home/data/logs/shard3_2.log

directoryperdb=true

logappend=true

replSet=shard3

#bind_ip=172.16.0.41

shardsvr=true

fork=true

pidfilepath=/home/data/shard3_2.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

config server 配置文件

[root@mongodb41 config]# catconfig.conf

port=30000

dbpath=/home/data/config

logpath=/home/data/logs/config.log

directoryperdb=true

configsvr=true

logappend=true

#bind_ip=172.16.0.41

fork=true

pidfilepath=/home/data/config.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

RouteProces 配置文件

[root@mongodb41 config]# catmongos.conf

port=60000

logpath=/home/data/logs/mongos.log

logappend=true

configdb=172.16.0.40:30000,172.16.0.41:30000,172.16.0.250:30000

#bind_ip=172.16.0.41

fork=true

pidfilepath=/home/data/mongos.pid

chunkSize=5

maxConns=20000

nohttpinterface=true



主机3（172.16.0.250）配置文件

[root@mongodb103 ~]# mkdir -p/home/data/shard1_3

[root@mongodb103 ~]# mkdir -p/home/data/shard2_3

[root@mongodb103 ~]# mkdir -p/home/data/shard3_3

[root@mongodb103 ~]# mkdir -p/home/data/config                      #config server目录

[root@mongodb103 ~]# mkdir -p/home/config          #放配置文件

[root@mongodb103 ~]# mkdir -p/home/data/logs

 

分片1

[root@mongodb250 config]# catshard1_3.conf

port=11731

dbpath=/home/data/shard1_3

logpath=/home/data/logs/shard1_3.log

directoryperdb=true

logappend=true

replSet=shard1

#bind_ip=172.16.0.250

shardsvr=true

fork=true

pidfilepath=/home/data/shard1_3.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

分片2

[root@mongodb250 config]# catshard2_3.conf

port=11732

dbpath=/home/data/shard2_3

logpath=/home/data/logs/shard2_3.log

directoryperdb=true

logappend=true

replSet=shard2

#bind_ip=172.16.0.250

shardsvr=true

fork=true

pidfilepath=/home/data/shard2_3.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

分片3

[root@mongodb250 config]# catshard3_3.conf

port=11733

dbpath=/home/data/shard3_3

logpath=/home/data/logs/shard3_3.log

directoryperdb=true

logappend=true

replSet=shard3

#bind_ip=172.16.0.250

shardsvr=true

fork=true

pidfilepath=/home/data/shard3_3.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

config server 配置文件

[root@mongodb250 config]# catconfig.conf

port=30000

dbpath=/home/data/config

logpath=/home/data/logs/config.log

directoryperdb=true

configsvr=true

logappend=true

#bind_ip=172.16.0.250

fork=true

pidfilepath=/home/data/config.pid

maxConns=20000

oplogSize=5000

noprealloc=true

nohttpinterface=true

RouteProces 配置文件

[root@mongodb250 config]# catmongos.conf

port=60000

logpath=/home/data/logs/mongos.log

logappend=true

configdb=172.16.0.40:30000,172.16.0.41:30000,172.16.0.250:30000

#bind_ip=172.16.0.250

fork=true

pidfilepath=/home/data/mongos.pid

chunkSize=5

maxConns=20000

nohttpinterface=true

启动shard1,shard2,shard3

主机1

[root@mongodb115 ~]#/home/mongodb/bin/mongod -f /home/config/shard1_1.conf

[root@mongodb115 ~]#/home/mongodb/bin/mongod -f /home/config/shard2_1.conf

[root@mongodb115 ~]#/home/mongodb/bin/mongod -f /home/config/shard3_1.conf

 

主机2

[root@mongodb114 ~]#/home/mongodb/bin/mongod -f /home/config/shard1_2.conf

[root@mongodb114 ~]#/home/mongodb/bin/mongod -f /home/config/shard2_2.conf

[root@mongodb114 ~]#/home/mongodb/bin/mongod -f /home/config/shard3_2.conf

 

主机3

[root@mongodb103 ~]#/home/mongodb/bin/mongod -f /home/config/shard1_3.conf

[root@mongodb103 ~]#/home/mongodb/bin/mongod -f /home/config/shard2_3.conf

[root@mongodb103 ~]#/home/mongodb/bin/mongod -f /home/config/shard3_3.conf



配置ReplicaSets

配置分片1 在172.16.0.40上配置

[root@mongodb115 ~]# /home/mongodb/bin/mongo--port 11731

MongoDB shell version: 2.0.4

connecting to:127.0.0.1:11731/test

>config={_id:‘shard1‘,members:[{_id:0,host:‘172.16.0.40:11731‘,priority:2},{_id:1,host:‘172.16.0.41:11731‘},{_id:2,host:‘172.16.0.250:11731‘,arbiterOnly:true}]}

 

rs.initiate(config)

 

 

配置分片2 在172.16.0.41上配置

[root@mongodb114 ~]# /home/mongodb/bin/mongo--port 11732

MongoDB shell version: 2.0.4

connecting to:127.0.0.1:11732/test

>config={_id:‘shard2‘,members:[{_id:0,host:‘172.16.0.40:11732‘,arbiterOnly:true},{_id:1,host:‘172.16.0.41:11732‘,priority:2},{_id:2,host:‘172.16.0.250:11732‘}]}

 

rs.initiate(config)

 

 

配置分片3 在172.16.0.250上配置members里面的优先级priority值高的为主节点，对于仲裁点一定要加上arbiterOnly:true

[root@mongodb103 ~]# /home/mongodb/bin/mongo--port 11733

MongoDB shell version: 2.0.4

connecting to:127.0.0.1:11733/test

>config={_id:‘shard3‘,members:[{_id:0,host:‘172.16.0.40:11733‘},{_id:1,host:‘172.16.0.41:11733‘,arbiterOnly:true},{_id:2,host:‘172.16.0.25:11733‘,priority:2}]}

 

rs.initiate(config)

 

启动3台configserver

主机1

[root@mongodb40 ~]#/home/mongodb/bin/mongod  -f/home/config/config.conf

 

主机2

[root@mongodb41 ~]#/home/mongodb/bin/mongod  -f/home/config/config.conf

 

主机3

[root@mongodb250 ~]#/home/mongodb/bin/mongod  -f/home/config/config.conf

 

启动3台Route Process

主机1

[root@mongodb40 ~]# /home/mongodb/bin/mongos-f /home/config/mongos.conf

主机2

[root@mongodb41 ~]# /home/mongodb/bin/mongos-f /home/config/mongos.conf

 

主机3

[root@mongodb250 ~]#/home/mongodb/bin/mongos -f /home/config/mongos.conf


配置shardCluser

[root@mongodb115 ~]# /home/mongodb/bin/mongo--port 60000

MongoDB shell version: 2.0.4

connecting to:127.0.0.1:60000/test

mongos> use admin

switched to db admin

mongos>db.runCommand({addshard:"shard1/172.16.0.40:11731,172.16.0.41:11731, 172.16.0.250:11731"})

 

mongos>db.runCommand({addshard:"shard2/172.16.0.40:11732,172.16.0.41:11732, 172.16.0.250:11732"})

 

mongos> db.runCommand({addshard:"shard3/172.16.0.40:11733,172.16.0.41:11733, 172.16.0.250:11733"})

 

接下来激活分片，如下面的代码所示：   采用hash分片

db.runCommand({enablesharding:"test"})

db.runCommand({shardcollection:"test.users",key:{id:"hashed"}})

上面这个会报错，我这边版本不支持hashed分片，要把id：1

Replica Sets+Sharding方案之真枪实弹篇,布布扣,bubuko.com

Replica Sets+Sharding方案之真枪实弹篇

标签：style   http   color   os   strong   文件   io   数据   

原文地址：http://blog.csdn.net/yelang_110/article/details/38292567
踩
(0)
赞
(0)
   
举报
评论 一句话评论（0）
登录后才能评论！
分享档案
更多>
2021年07月29日 (22)
2021年07月28日 (40)
2021年07月27日 (32)
2021年07月26日 (79)
2021年07月23日 (29)
2021年07月22日 (30)
2021年07月21日 (42)
2021年07月20日 (16)
2021年07月19日 (90)
2021年07月16日 (35)
周排行
mamicode.com排行更多图片
更多
友情链接
兰亭集智   国之画   百度统计   站长统计   阿里云   chrome插件   新版天听网
关于我们 - 联系我们 - 留言反馈
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码！