首页 / MONGODB / MongoDB分片集群配置

MongoDB分片集群配置

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了MongoDB分片集群配置，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7169字，纯文字阅读大概需要11分钟。

内容图文

一、环境

mongodb-1 192.168.3.31 mongos

mongodb-2 192.168.3.32 shard1

mongodb-3 192.168.3.33 shard2

mongodb-4 192.168.3.34 config server

二、配置过程清理数据(我这里是之前做过mongodb的其它实验)

[root@mongodb-2 ~]# /etc/init.d/mongod stop
Stopping mongod:                                           [  OK  ]
[root@mongodb-2 ~]# rm -rf /usr/local/mongodb/data/*

1.config server配置

#修改配置文件mongodb.conf
[root@mongodb-4 ~]# cat /usr/local/mongodb/conf/mongodb.conf 
#bind_ip=0.0.0.0
#port=27017
configsvr=true                    #开启config server
dbpath=/usr/local/mongodb/data
logpath=/usr/local/mongodb/log/mongodb.log
pidfilepath=/usr/local/mongodb/log/mongodb.pid
directoryperdb=true
logappend=true
oplogSize=1000
fork=true
rest=true
#noprealloc=true
#master=true

启动服务

[root@mongodb-4 ~]# /etc/init.d/mongodb start
Starting mongod:                                           [  OK  ]

#默认监听在27019,28019上
[root@mongodb-4 ~]# netstat -tunlp |grep mongo
tcp        0      0 0.0.0.0:27019               0.0.0.0:*                   LISTEN      1493/mongod         
tcp        0      0 0.0.0.0:28019               0.0.0.0:*                   LISTEN      1493/mongod

2.mongos配置

[root@mongodb-1 ~]# mongos --configdb=192.168.3.34 --fork --logpath=/tmp/mongos.log
2015-08-07T08:22:56.955+0800 W SHARDING running with 1 config server should be done only for testing purposes and is not recommended for production
about to fork child process, waiting until server is ready for connections.
forked process: 1644
child process started successfully, parent exiting
[root@mongodb-1 ~]# netstat -tunlp |grep mongo
tcp        0      0 0.0.0.0:27017               0.0.0.0:*                   LISTEN      1644/mongos

3.shard1配置

#修改配置文件mongodb.conf
[root@mongodb-2 ~]# cat /usr/local/mongodb/conf/mongodb.conf 
#bind_ip=0.0.0.0
#port=27017
dbpath=/usr/local/mongodb/data
logpath=/usr/local/mongodb/log/mongodb.log
pidfilepath=/usr/local/mongodb/log/mongodb.pid
directoryperdb=true
logappend=true
oplogSize=1000
fork=true
#noprealloc=true
#master=true
#replSet=testrs0

启动服务

[root@mongodb-2 ~]# /etc/init.d/mongod start
Starting mongod:                                           [  OK  ]
[root@mongodb-2 ~]# netstat -tunlp |grep mon
tcp        0      0 0.0.0.0:27017               0.0.0.0:*                   LISTEN      1729/mongod

4.shard2配置

#修改配置文件mongodb.conf
[root@mongodb-3 ~]# cat /usr/local/mongodb/conf/mongodb.conf 
#bind_ip=0.0.0.0
#port=27017
dbpath=/usr/local/mongodb/data
logpath=/usr/local/mongodb/log/mongodb.log
pidfilepath=/usr/local/mongodb/log/mongodb.pid
directoryperdb=true
logappend=true
oplogSize=1000
fork=true
#noprealloc=true
#master=true
#replSet=testrs0

启动服务

[root@mongodb-3 ~]# /etc/init.d/mongod start
Starting mongod:                                           [  OK  ]
[root@mongodb-3 ~]# netstat -tunlp |grep mon
tcp        0      0 0.0.0.0:27017               0.0.0.0:*                   LISTEN      2161/mongod

5.在mongos上添加shard节点

[root@mongodb-1 ~]# mongo --host 192.168.3.31
MongoDB shell version: 3.0.5
connecting to: 192.168.3.31:27017/test
Server has startup warnings:  
mongos> sh.addShard("192.168.3.32")            #添加节点1
{ "shardAdded" : "shard0000", "ok" : 1 }
mongos> sh.addShard("192.168.3.33")            #添加节点2
{ "shardAdded" : "shard0001", "ok" : 1 }
mongos> sh.status()                            #查看状态
--- Sharding Status --- 
  sharding version: {
	"_id" : 1,
	"minCompatibleVersion" : 5,
	"currentVersion" : 6,
	"clusterId" : ObjectId("55c3fa618addd3d263602205")
}
  shards:
	{  "_id" : "shard0000",  "host" : "192.168.3.32:27017" }
	{  "_id" : "shard0001",  "host" : "192.168.3.33:27017" }
  balancer:
	Currently enabled:  yes
	Currently running:  no
	Failed balancer rounds in last 5 attempts:  0
	Migration Results for the last 24 hours: 
		No recent migrations
  databases:
	{  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }

对所需对象启用分片功能

#对数据库启用sharding功能
mongos> sh.enableSharding("testdb")
{ "ok" : 1 }
mongos> sh.status()
--- Sharding Status --- 
  sharding version: {
	"_id" : 1,
	"minCompatibleVersion" : 5,
	"currentVersion" : 6,
	"clusterId" : ObjectId("55c3fa618addd3d263602205")
}
  shards:
	{  "_id" : "shard0000",  "host" : "192.168.3.32:27017" }
	{  "_id" : "shard0001",  "host" : "192.168.3.33:27017" }
  balancer:
	Currently enabled:  yes
	Currently running:  no
	Failed balancer rounds in last 5 attempts:  0
	Migration Results for the last 24 hours: 
		No recent migrations
  databases:
	{  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }
	{  "_id" : "test",  "partitioned" : false,  "primary" : "shard0000" }
	{  "_id" : "testdb",  "partitioned" : true,  "primary" : "shard0000" }    #已生效
	
#指定需要分片的Collection及索引
mongos> sh.shardCollection("testdb.students",{"age":1})
{ "collectionsharded" : "testdb.students", "ok" : 1 }
mongos> sh.status()
--- Sharding Status --- 
  sharding version: {
	"_id" : 1,
	"minCompatibleVersion" : 5,
	"currentVersion" : 6,
	"clusterId" : ObjectId("55c3fa618addd3d263602205")
}
  shards:
	{  "_id" : "shard0000",  "host" : "192.168.3.32:27017" }
	{  "_id" : "shard0001",  "host" : "192.168.3.33:27017" }
  balancer:
	Currently enabled:  yes
	Currently running:  no
	Failed balancer rounds in last 5 attempts:  0
	Migration Results for the last 24 hours: 
		No recent migrations
  databases:
	{  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }
	{  "_id" : "test",  "partitioned" : false,  "primary" : "shard0000" }
	{  "_id" : "testdb",  "partitioned" : true,  "primary" : "shard0000" }
		testdb.students
			shard key: { "age" : 1 }
			chunks:
				shard0000	1
			{ "age" : { "$minKey" : 1 } } -->> { "age" : { "$maxKey" : 1 } } on : shard0000 Timestamp(1, 0)

分片功能已开启，接下来我们手动创建数据来验证是否会分片

mongos> for (i=1;i<=100000;i++) db.students.insert({name:"student"+i,age:(i%120),address:"China"})
WriteResult({ "nInserted" : 1 })
mongos> db.students.find().count()
100000
mongos> sh.status()
--- Sharding Status --- 
  sharding version: {
	"_id" : 1,
	"minCompatibleVersion" : 5,
	"currentVersion" : 6,
	"clusterId" : ObjectId("55c3fa618addd3d263602205")
}
  shards:
	{  "_id" : "shard0000",  "host" : "192.168.3.32:27017" }
	{  "_id" : "shard0001",  "host" : "192.168.3.33:27017" }
  balancer:
	Currently enabled:  yes
	Currently running:  no
	Failed balancer rounds in last 5 attempts:  0
	Migration Results for the last 24 hours: 
		1 : Success
  databases:
	{  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }
	{  "_id" : "test",  "partitioned" : false,  "primary" : "shard0000" }
	{  "_id" : "testdb",  "partitioned" : true,  "primary" : "shard0000" }
		testdb.students
			shard key: { "age" : 1 }
			chunks:
				shard0000	2        #2个分片
				shard0001	1        #1个分片
			{ "age" : { "$minKey" : 1 } } -->> { "age" : 2 } on : shard0000 Timestamp(2, 1) 
			{ "age" : 2 } -->> { "age" : 10 } on : shard0000 Timestamp(1, 2) 
			{ "age" : 10 } -->> { "age" : { "$maxKey" : 1 } } on : shard0001 Timestamp(2, 0)

本文出自 “ly36843运维” 博客，请务必保留此出处http://ly36843.blog.51cto.com/3120113/1682580

MongoDB分片集群配置

标签：mongodb分片集群配置

本文系统来源：http://ly36843.blog.51cto.com/3120113/1682580

内容总结

以上是互联网集市为您收集整理的MongoDB分片集群配置全部内容，希望文章能够帮你解决MongoDB分片集群配置所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/454401.html

来源：【匿名】

【上一篇】Spring Data MongoDB 四：基本文档修改（update）（一）【下一篇】在MongoDB上如何进行数据的导入与导出

更多 ►

【MongoDB分片集群配置】教程文章相关的互联网学习教程文章

mongodb index 的background 及集群的索引建立

在数据库建立索引时，默认时"foreground" 也就是前台建立索引，但是，当你的数据库数据量很大时，在建立索引的时会读取数据文件，大量的文件读写会阻止其他的操作，此时在建立索引的时候用background：true,虽然，background在可以在后台建立索引。在后台建立索引的时候，不能对建立索引的collection进行一些坏灭型的操作，如：运行repairDatabase，drop，compat,当你在建立索引的时候运行这些操作的会报错。Building Indexes on S...

Mongodb3.4.7搭建高可用集群（二）【代码】

部署Mongodb高可用集群准备按照官方说明，至少需要3个config server，2个mongos，2个shard，每个shard至少2个副本，就是4个shard，共需要9个Mongodb实例。这里只虚拟出2个机器节点，将不同的Mongodb实例部署在不同的端口上模拟实现。节点端口关系表config serverleo.zhi.1:10010,leo.zhi.2:10010mongos serverleo.zhi.1:10020,leo.zhi.2:10020shard serverleo.zhi.1:10001,leo.zhi.2:10002leo.zhi.1和leo.zhi.2上分别创建文件夹[ro...

从0开始搭建MongoDB集群【代码】【图】

一、试验环境及准备本次实验用了三台centos7服务器，详情如下表：主机角色系统10.0.0.101PRIMARYcentos710.0.0.102SECONDARYcentos710.0.0.103SECONDARYcentos7下载安装包下载地址：https://www.mongodb.com/download-center/v2/community二、搭建步骤1、上传、解压包[root@test101 ~]# tar xf mongodb-linux-x86_64-4.0.2.tgz [root@test101 ~]# ll 总用量 69364 -rw-------. 1 root root 1502 12月 14 2017 anaconda-ks.cf...

百万级高并发mongodb集群性能数十倍提升优化实践

背景线上某集群峰值TPS超过100万/秒左右(主要为写流量，读流量很低)，峰值tps几乎已经到达集群上限，同时平均时延也超过100ms，随着读写流量的进一步增加，时延抖动严重影响业务可用性。该集群采用mongodb天然的分片模式架构，数据均衡的分布于各个分片中，添加片键启用分片功能后实现完美的负载均衡。集群每个节点流量监控如下图所示: 从上图可以看出集群流量比较大，峰值已经突破120万/秒，其中delete过期删除的流量不算在总流量...

使用YCSB测试mongodb分片集群性能【图】

1. 测试工具本次测试选取YCSB(Yahoo! Cloud System Benchmark)作为测试客户端工具。YCSB是Yahoo开源的一个nosql测试工具，用来测试比较各种nosql的性能，项目地址：https://github.com/brianfrankcooper/YCSB。项目的mongodb目录下有详细的安装和测试方法。 YCSB支持常见的nosql数据库读写，如插入，修改，删除，读取等。它可以使用多线程来提高客户端的性能。可以方便的自定义各种场景，如95%插入5%读，或者90%读5%更新5%插...

MongoDB分布式集群分片【代码】

MongoDB高可用集群搭建一、环境准备# 启动时需要使用非root用户，所有创建一个mongo用户： useradd mongo# 为mongo用户添加密码： echo 123456 | passwd --stdin mongo# 将mongo添加到sudoers echo "mongo ALL = (root) NOPASSWD:ALL" | tee /etc/sudoers.d/mongo chmod 0440 /etc/sudoers.d/mongo #解决sudo: sorry, you must have a tty to run sudo问题，在/etc/sudoer注释掉 Default requiretty 一行 sudo sed -i ‘s/Default...

MongoDB分片存储的集群架构实现【代码】

MongoDB分片存储的集群架构实现如果需要存储大量数据，或者系统的读写吞吐量很大的时候，单个server就很难满足需求了。这个时候我们可以使用MongoDB的分片机制来解决这些问题。分片的基本概念分片（sharding）是一种水平扩展（horizontal scaling）的方式，把一个大的数据集分散到多个片服务器上，所有的片服务器将组成一个逻辑上的数据库来存储这个大的数据集。分片对用户（应用层）是透明的，用户不会知道数据很被存放到哪个片...

MongoDB 集群搭建（主从复制、副本及）（五）

六：架构管理mongodb的主从集群分为两种：1：master-Slave 复制（主从） --从server不会主动变成主server，须要设置才行2：replica Sets 复制（副本集） --假设主server挂掉，会选举出一台从server当主server一：主从复制mongodb支持在多个机器中通过异步复制达到故障转移和实现冗余。多机器中统一时刻仅仅有一台是用于写操作。正是因为这个情况，为mongodb提供了数据一致性的保障。担当primary角色的机器能把读操作分发给...

Replica Set副本集方式的mongodb集群搭建

1.环境：单台服务器上开启四个mongodb实例来实现mongodb的Replica Set副本集方式的集群搭建2.配置文件：master主实例配置文件：[root@localhost ~]# cat /usr/local/mongodb/mongod.cnf logpath=/data/mongodb-master/logs/mongodb.loglogappend = true#fork and run in backgroundfork = trueport = 27017dbpath=/data/mongodb-master/data#location of pidfilepidfilepath=/data/mongodb-master/mongod.pidauth = truekeyFile = ...

MongoDB集群搭建-副本集【代码】

MongoDB集群搭建-副本集概念性的知识，可以参考本人博客地址：http://www.cnblogs.com/zlp520/p/8088169.html一.Replica Set方案（副本集或复制集）：1.搭建副本集有两种办法：其一：在一台服务器上，通过文件的方式及端口号的方式来区分；其二：找最少三台服务器，每台服务器都通过如下的配置；ip规划每台服务器担任的工作：192.168.0.100:27017 主机192.168.0.101:27017 副本集192.168.0.102:27017 仲裁下面以搭建在三台服务器上...

k8s 搭建mongodb多副本集群【代码】

FROM mongo:3.6.4ADD mongodb-keyfile /data/config/mongodb-keyfile RUN chown mongodb:mongodb /data/config/mongodb-keyfile && chmod 600 /data/config/mongodb-keyfile2. 部署yaml，与官方提供不同，此处需要将K8s command改为args ，否则 MONGO_INITDB_ROOT_USERNAME，MONGO_INITDB_ROOT_PASSWORD会被覆盖不能生效sidecar https://github.com/cvallance/mongo-k8s-sidecar 也需要如下相关参数apiVersion: rbac.authorization...

Replica Set副本集方式的mongodb集群搭建

"_id" : "shard1","members" : [{"_id" : 0,"host" : "127.0.0.1:27017","priority" : 3},{"_id" : 1,"host" : "127.0.0.1:27018","priority" : 2},{"_id" : 2,"host" : "127.0.0.1:27019","priority" : 1},{"_id" : 3,"host" : "127.0.0.1:27020","arbiterOnly" : true}]}> rs.initiate(cfg); （初始化配置）{ "ok" : 1 }shard1:PRIMARY> rs.conf(); （查看配置信息）{"_id" : "shard1","version" : 1,"members" : [{"_id" : 0,...

Mongodb4.4.1分片集群搭建【代码】

1、环境规划 3台机，每台机5个实例，分别mongos 1 个，config server 1 个，shard server 3 个IP:192.168.56.107(mongodb01) 实例:mongos:30000 shard1:40001(主节点) shard2:40002(仲裁节点) shard3:40003(副节点) config:27027IP:192.168.56.105(mongodb02) 实例:mongos:30000 shard1:40001(副节点) shard2:40002(主节点) shard3:40003(仲裁节点) config:27028IP:192.168.56.106(mongodb03) 实例:mongos:30000 shard1:4...

Mongodb副本集集群搭建【代码】

一、环境准备 1.1.主机信息（机器配置要求见硬件及开发标准规范文档V1.0）序号主机名IP1DB_0110.202.105.522DB_0210.202.105.533DB_0310.202.105.544DB_0410.202.105.181 服务器52(DB_01)服务器53(DB_02)服务器54(DB_03)服务器55（DB_04）primarysecondrysecondryhidden(阿里云一般都是主备 Hidden三节点) 这里暂时忽略异常情况选举其实和zk选举一样的道理端口分配：(端口可以根据实际情况进行更改) mongos：2000...

【MongoDB】在windows平台下mongodb的分片集群（三）【图】

在上两篇博客中我们分别阐述了分片集群的工作原理以及搭建过程。在本篇博客中我们主要一起分析分片集群的测试结果；首先看分片集群的各个状态，可以看的出复制集A和B都是正常的：一、开启分片集合开启一个数据库上的分片，这是对任何集合进行分片的先决条在上两篇博客中我们分别阐述了分片集群的工作原理以及搭建过程。在本篇博客中我们主要一起分析分片集群的测试结果；首先看分片集群的各个状态，可以看的出复制集A和B都是正...

首页 / MONGODB / MongoDB分片集群配置

MongoDB分片集群配置

内容导读

内容图文

内容总结

内容备注

内容手机端

【MongoDB分片集群配置】教程文章相关的互联网学习教程文章

mongodb index 的background 及集群的索引建立

Mongodb3.4.7搭建高可用集群（二）【代码】

从0开始搭建MongoDB集群【代码】【图】

百万级高并发mongodb集群性能数十倍提升优化实践

使用YCSB测试mongodb分片集群性能【图】

MongoDB分布式集群分片【代码】

MongoDB分片存储的集群架构实现【代码】

MongoDB 集群搭建（主从复制、副本及）（五）

Replica Set副本集方式的mongodb集群搭建

MongoDB集群搭建-副本集【代码】

k8s 搭建mongodb多副本集群【代码】

Replica Set副本集方式的mongodb集群搭建

Mongodb4.4.1分片集群搭建【代码】

Mongodb副本集集群搭建【代码】

【MongoDB】在windows平台下mongodb的分片集群（三）【图】

MONGODB - 相关标签

集群 - 相关标签

配置 - 相关标签

MONGODB - 技术教程分类

MONGODB - 最新教程

MONGODB - 最热教程