面试题十一期-MongoDB分布式集群环境搭建

Posted 城事十则

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了面试题十一期-MongoDB分布式集群环境搭建相关的知识,希望对你有一定的参考价值。

在面试的童鞋,想涨薪的同鞋,想提升巩固的同学,你做好准备了吗?

直接进入正题吧!面试题十一期-MongoDB分布式集群环境搭建面试题十一期-MongoDB分布式集群环境搭建小黄鸡今日推荐>>>MongoDB篇




diligence redeems stupidity

(勤能补拙)





第一节分片的概念


  分片(sharding)是指根据片键,将数据进行拆分,使其落在不同的机器上的过程。如此一来,不需要功能,配置等强大的机器,也能储存大数据量,处理更高的负载。


第二节分片的原理和思想


  MongoDB分片的基本思想就是将集合切分成小块。这些块分散到若干片里面,每个片只负责总数据的一部分。


  对于客户端来说,无需知道数据被拆分了,也无需知道服务端哪个分片对应哪些数据。数据在分片之前需要运行一个路由进程,进程名为mongos。这个路由器知道所有数据的存放位置,知道数据和片的对应关系。对客户端来说,它仅知道连接了一个普通的mongod,在请求数据的过程中,通过路由器上的数据和片的对应关系,路由到目标数据所在的片上,如果请求有了回应,路由器将其收集起来回送给客户端

面试题十一期-MongoDB分布式集群环境搭建



第三节分片的简单实现


1.片键的概念


  设置分片时,需要从集合里面选一个键,用该键的值作为数据拆分的依据。这个键称为片键(shard key)。{department:"IT",name:"zhangsan"},{department:"HR",name:"lisi"},{department:"SUPPORT",name:"zhaowu"}


  以该数据为例,表示的是职员名字以及所在的部门,假若我们设置部门(department)为片键,那么第一片可能存放名称以字母A-F开头的部门,第二片存放名称以G~P开头的部门,第三片存Q~Z,如此类推。随着添加或者删除片,MongoDB会重新平衡数据,使每片的流量都比较均衡,数据量也在合理范围内。


2.本地模拟实现


  a.首先mongod开启服务端3个节点,端口分别为8080,8081,8082


  b.开启config服务器 。mongos要把mongod之间的配置放到config服务器里面,所以首先开启它,这里就使用8083端口。 命令为:mongod --dbpath E:\sharding\config_node --port 8083


  c、开启mongos服务器 。端口8084,同时指定下config服务器。命令为:mongos --port 8084 --configdb=127.0.0.1:8083


  d.路由指定服务端节点。客户端直接跟mongos打交道,也就说明我们要连接mongos服务器,然后将8080,8081,8082的mongod交给mongos,添加分片也就是addshard()。需要进到路由节点的admin数据库进行配置。allowLocal表示该服务端节点,可被客户端直接连接而无需经过路由。

    db.runCommand({"addshard":"127.0.0.1:8080",allowLocal:true})

        db.runCommand({"addshard":"127.0.0.1:8081",allowLocal:true})

        db.runCommand({"addshard":"127.0.0.1:8082",allowLocal:true})


  e.开启数据库分片功能,命令为enablesharding(),并指定数据库名称,如下指定每个mongod都有的test数据库

db.runCommand({"enablesharding":"test"})


  f.指定集合中分片的片键,这里就指定为company.department键.      db.runCommand({"shardcollection":"company.department","key":{"depatment":1}})


  g.通过向mongos节点插入100万条数据,查看各节点保存的数据。


  h.通过向mongos插入一条数据,查看数据被分配到哪个片




招聘信息一条


需求:中级测试工程师>>>

深圳地区 平安银行外包,坐标罗湖大剧院平安银行大厦,

招聘中高级测试,统招本科3年,大专5年以上工验,学历学信网可查。

还有大量java开发和web前端需求,欢迎砸简历作经哈

技能要求:

1.熟悉数据库增删改查操作,对数据库体现结构有一定的了解优先;

2.熟悉性能测试,至少会使用一种性能测试工具(LoadRunner、jmeter或其他);

3.熟悉一门语言(C/C++、java、python等),能编写简单的项目;

4.熟悉接口测试,网络协议;

5.熟练使用linux操作系统

6.熟悉UI自动化测试,能使用selenium+java(或selenium+python)编写UI自动化案例


有意请扫描下方微信私信





面试题十一期-MongoDB分布式集群环境搭建


>>> 个人微信添加进群求职、学习、分享   





Make progress every day

每天进步一点点





GOOG! 看到这里了为自己留个赞吧





以上是关于面试题十一期-MongoDB分布式集群环境搭建的主要内容,如果未能解决你的问题,请参考以下文章

搭建一个分布式MongoDB鉴权集群

kubekey搭建集群环境

Flink1.8 集群搭建完全指南(1):Hadoop伪分布式

MongoDB分片集群搭建

将MongoDB部署到分布式集群(实操)

Linux安装ElasticSearch与MongoDB分布式集群环境下数据同步