数据库怎么支持数据无限增长?(长期更新)

Posted smaritan

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了数据库怎么支持数据无限增长?(长期更新)相关的知识,希望对你有一定的参考价值。

可扩展是服务器开发的一个重要的问题。

一个系统的可扩展包括好几个方面,在我看来,数据库可扩展几乎是其中最重要的一个了。

主要体现在两方面,1. io可扩展,iops要跟得上业务的需求,2.存储可扩展。

 

问题1:假设我有张用户道具表,用户不断增加,每个人有n个道具(n有上限,100个),平均n值为50,db要怎么支持?

如果我用mysql,要怎么做,单表承受不了吧?如果我用mongodb,要怎么做, 单个collection够不够?

答:如果使用mysql,两个方案,如果uid为自增id,那么可直接按号段范围分表,每n个用户一张表,如果uid非自增而是一些字符之类的,那么crc32(uid) % x,x即为分表个数。

 

问题2:如果问题1里面的n是无限的?

答:这个就麻烦了,我首选mongodb,单个文档有16MB的上限,假设我们只使用10MB,单个道具占用空间为id+cnt,共16字节,那么单个文档可以存储655360个道具,

虽然问题里的n是无限,但现实不太可能达到65w这么多。

如果真有这么多,怎么办?手工的分buck,每个文档为一个buck,buck有个id(1,2,..),个数,道具特别多的人,可以有好几个buck。

 

 

-----------------------------------------------------

更新2019.8.21

近来研究db比较多,看了innodb内部实现的文章,

以上是关于数据库怎么支持数据无限增长?(长期更新)的主要内容,如果未能解决你的问题,请参考以下文章

mysql 自增长id可以到多大

如何运行长期(无限)Python 进程?

#yyds干货盘点# RavenDB 文档建模--琐碎的注意事项--处理无限增长的文档

Nosql和RDBMS的比较及解释

两次请求怎么共享变量

MySQL学习笔记(长期更新)