Linux系统下Mongodb的集群部署

1、mongodb是时下流行的nosql数据库，它的存储方式是文栏式存储，并不是key-value 形式。关于mongodb的特点，这里就不多介绍了，大家可以去看看官方说明： http:/docs.rn on /ma nual/今天主要来说说mongodb的三种集群方式的搭建：replica set / sharding / master-slavero这里只说明最简单的集群搭建方式(生产环境)，如果有多个节点可以此 类推或者查看官方文档。os是ubuntu_x64系统,客八端用的是java客户端。mongodb 版本是 mongodb-linux-x86_64-2.2.2.tgz

2、replica set中文翻译叫做副本集，不过我并不喜欢把英文翻译成中文，总是感觉怪怪的。其实简 单来说就是集群当屮包含了多份数据，保证主节点挂掉了，备节点能继续提供数据服务，提 供的前提就是数据需要和主节点一致。如下图：zmongodb clientmongodb(m)一 mongodb- mongodb(a) i丿v/machinelmachine2machine3mongodb(m)表示主节点，mongodb(s)表示备节点，mongodb(a)表示仲裁节点。主备 节点存储数据，仲裁节点不存储数据。客户端同时连接主节点与备节点，不连接仲裁节点。默认设置下，主节点捉供所有增删查改服务，备节

3、点不提供任何服务。但是可以通过 设置使备节点提供查询服务，这样就可以减少主节点的压力，当客户端进行数据查询时，请 求自动转到备节点上。这个设置叫做read preference modes,同时java客户端提供了简 单的配置方式，可以不必直接对数据库进行操作。仲裁节点是一种特殊的节点，它本身并不存储数据，主要的作用是决定哪一个备节点 在主节点挂掉之后提升为主节点，所以客户端不需要连接此节点。这里虽然只有一个备节点, 但是仍然需要一个仲裁节点來提升备节点级别。我开始也不相信必须要有仲裁节点，但是自 己也试过没仲裁节点的话，主节点挂了备节点还是备节点，所以咱们还是需要它的。 介绍完了集群方案，那

4、么现在就开始搭建了。1.建立数据文件夹一般情况下不会把数据目录建立在mongodb的解压目录下，不过这里方便起见，就建在 mongodb解压目录下吧。plain view plaincopy1- mkdir -p /mongodb/data/master2. mkdir p /mongodb/data/slaver3. mkdir -p /mongodb/data/arbiter4. #三个目录分别对应主，备，仲裁节点2建立配置文件rti于配置比较多，所以我们将配置写到文件里。plain view plaincopy11. #master.conf2. dbpath二/mongodb/data

5、/master3 logpath=/mongodb/log/mastenlog4 pidfilepath=/mongodb/masterpid 15 directoryperdb二true6. logappend=true7. replset=testrs8. bind_ip=1010.1481309.port=2701710. oplogsize=1000011- fork=true12. noprealloc=truelain view plaincopy1.#slaver.conf.8.9.dbpath=/mongodb/data/slaver logpath二/mon

6、godb/log/slaver.log pidfilepath=/mongodb/slaverpid directotyperdb=true logappend=true replset二testrsbind_ip=31 port=2701710. oplogsize=1000011. fork=trueplain view plaincopy1. #arbiter.conf| 2. dbpath=/mongodb/data/arbiter13 logpath二/mongodb/log/arbiterlog| 4. pidfilepath=/mongodb/arbiter

7、pid5 directoryperdb=true6. logappend二true7. replset二testrs8 bind_ip=1010.148.1329. port=2701710. oplogsize=10000111- fork=true12. noprealloc=true参数解释：dbpath：数据存放目录logpath：日志存放路径pidfilepath：进程文件，方便停止mongodbdirectoryperdb：为每一个数据库按照数据库名建立文件夹存放logappend：以追加的方式记录tl志replset： replica set 的名字bindjp： mongodb

8、所绑定的ip地址port： mongodb进程所使用的端口号，默认为27017oplogsize： mongodb操作日志文件的最大大小。单位为mb,默认为硬盘剩余空间的5% fork：以后台方式运行进程noprealloc：不预先分配存储3. 启动 mongodb进入每个mongodb节点的bin目录下java view plaincopy1./monood -f master.conf2./mongod -f slaver.conf3./mongod -f arbiter.conf注意配置文件的路径一定要保证止确，可以是相对路径也可以是绝对路径。4. 配置主，备，仲裁节点可以通过客户端连接

9、mongodb，也可以直接在三个节点屮选择一个连接mongodb。plain view plaincopy|1. ./mongo 30:27017#ip 和 port 是某个节点的地址2. >use admin|3. >cfg= _id:"testrs" members: _id:0,host:'30:27017',priority:2,_id:l,host:'31:27017',priority:1,4. _id:2jhost:'32

10、:27017*,arbiteronly:true ;5. >rs.initiate(cfg)# 使配程生效cfg是可以任意的名字，当然最好不要是mongodb的关键字，conf, config都可以。 最外层的d表示replica set的名字，members里包含的是所有节点的地址以及优先级。 优先级最高的即成为主节点，即这里的30:27017。特别注意的是，对于仲裁节 点，需要有个特别的配置arbiteronly:trueo这个千万不能少了，不然主备模式就不能生 效。配置的生效时间根据不同的机器配置会有长有短，配置不错的话基本上十几秒内就能生 效，有的配置需要一

11、两分钟。如果生效了，执行rs.status()命令会看到如下信息：plain view plaincopy1- 2. hsetn : l,testrs,3. i,date" : isodate("2013-01-05t02:44:43z"),4.ystate'1 : 1,5."members":67.“_id“ : 0,8.“name” : h30:270179."health" : 1,10."state" : 1,11.hstatestrm : "primary

12、”，12."uptime" : 20013."optime" : timestamp(1357285565000, 1),14."optimedate11 : isodate(112013-01-04t07:46:05z'1),15."self" : true16.,17.18.”卫“ :1,19."name11 : "31:27017",20."health" : 1,21."state" : 2,22.f,statestr

13、k : “secondary”,23.'uptime" : 200,24."optime" : timestamp(1357285565000, 1),25.,optimedateh : isodate(,2013-01-04t07:46:05z,)j26.nlastheartbeath : isodate("2013-01-05t02:44:42zn),27.hpingmslf : 028.,2.33.34 353637.38e39 40.pi.h_idh : 2，hnameh : ,32:27017,

14、"health" : 1,tate" : 7,tatestr'1 : "arbiter"，uptime'" : 200,lastheartbeatn : isodate(lf2013-01-05t02:44:42z11),"pingms11 : 0>hokn : 1如果配置正在生效，其中会包含如下信息:plain view plaincopy|1. "statestr" : "recovering"同时可以查看对应节点的日志，发现正在等待别的节点生效或者正在分配数

15、据文件。 现在基本上已经完成了集群的所有搭建工作。至于测试工作，可以留给大家自己试试。一个是往主节点插入数据，能从备节点查到之前插入的数据(查询备节点可能会遇到某个问 题，可以白己去网上查查看)。二是停掉主节点，备节点能变成主节点提供服务。三是恢复 主节点，备节点也能恢复其备的角色，而不是继续充当主的角色。二和三都可以通过 rs.status()命令实时查看集群的变化。sharding和replica set类似，都需要一个仲裁节点，但是sharding还需要配置节点和路由节点。 就三种集群搭建方式来说，这种是最复杂的。部署图如下：xmongodb client-, 丿mongodb(r)mo

16、ngodb(c2)machine3mongodb(m) 丿machine4mongodb (s)mongodb(a)machi ne5machine61.启动数据节点plain view plaincopy卜2.3./mongodfork -dbpath ./data/setl/est #3./mongod fork -dbpath .</data/set2/ est #4./mongod -fork dbpath ./data/set3/1ogpath ./log/setl.log -replset togpath ./log/set2.lo

17、g -replset t-logpath .,/log/set3.1og -replset test #5决策 不存储数据2启动配置节点plain view plaincopy1. ./mongod -configsvr -dbpath ./config/setl/ -port 20001 -fork -logpath./log/confl.log #02. ./mongod -configsvr -dbpath .>/config/set2/ port 20002 -fork -logpath./iog/conf2.1og #192.168.

18、4.313. 启动路由节点plain view plain copy11. ./mongos -configdb 0:20001,1:20002 -port 27017 -fork -logpath ./log/root.log #9这里我们没有用配置文件的方式启动，其中的参数意义大家应该都明白。一般来说一 个数据节点对应一个配置节点,仲裁节点则不需要对应的配置节点。注意在启动路由节点吋, 要将配置节点地址写入到启动命令里。4. 配置 replica set这里可能会有点奇怪为什么sharding会需要配置replica set

19、o其实想想也能明白，多 个节点的数据肯定是相关联的，如果不配一个replica set,怎么标识是同一个集群的呢。 这也是人家mongodb的规定，咱们还是遵守吧。配置方式和之前所说的一样，定一个cfg, 然后初始化配置。plain view plain copy11- ./mongo 3:27017 #ip 和 port 是某个节点的地址2. >use admin13 >cfg= _id: "testrs11 丿 members: _id:0?host: 1192 168.4.43:27017', priority:2， _id:1,hos

20、t:*4:27017',priority:1,4. _id:2$host:'192.168445:27017'arbiteronly:true ;5 >rs.initiate(cfg)#使配置生效5配置 shardingplain view plaincopy111. ./mongo 9:27017#这里必须连接路由节点2. >sh.addshard("test/3:27017") #test 表示 replica set 的名字 当把主节点 添加到shard以后，会白动找

21、到set里的主，备，决策节点p. >db.runcommand(enablesharding:"diameter_test")#diameter_test is database name4. >db.runcommand( shardcollection: "diameter_test.dccadccrtest",key:"_av psessionld":1)第一个命令很容易理解，第二个命令是对需要进行shading的数据库进行配置，第三 个命令是对需要进行sharding的collection进行配置，这里的dcca_dccr_test即为 collection的名字。另外还有个key,这个是比较关键的东西，对于查询效率会有很大的影 响，具体可以查看shard key overview到这里sharding也已经搭建完成了，以上只是最简单的搭建方式，其中某些配置仍然 使用的是默认配置。如果设置不当，会导致效率界常低下，所以建议大家多看看官方文档再 进行默认配置的修改。master-slaver 这个是最简答的集群搭建，不过准确说也不能算是集群，只能说是主备。并且官方