大数据项目(MTDAP)随想

Posted 暗时间&量变

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据项目(MTDAP)随想相关的知识,希望对你有一定的参考价值。

Q:HBase和Solr的不同

hbase 是一个多元KV列存储数据库,可以快速读写,写性能尤为出色,这是一种基于MVCC的方案;

solr是基于lucene的企业级数据索引解决方案,但写入性能跟hbase比起来差个量级。所以一般用hbase存数据,solr作二级索引。

HBase可以通过协处理器Coprocessor的方式向Solr发出请求,Solr对于接收到的数据可以做相关的同步:增、删、改索引的操作,这样就可以同时使用HBase存储量大和Solr检索性能高的优点了,更何况HBase和Solr都可以集群。这对海量数据存储、检索提供了一种方式,将存储与索引放在不同的机器上,是大数据架构的必须品。

 

Q:HBase和Redis的不同

HBase可以通过协处理器Coprocessor的方式向Solr发出请求,Solr对于接收到的数据可以做相关的同步:增、删、改索引的操作,这样就可以同时使用HBase存储量大和Solr检索性能高的优点了,更何况HBase和Solr都可以集群。这对海量数据存储、检索提供了一种方式,将存储与索引放在不同的机器上,是大数据架构的必须品。

 

以上答案来自网络。

以上是关于大数据项目(MTDAP)随想的主要内容,如果未能解决你的问题,请参考以下文章

客快物流大数据项目:大数据项目为什么使用Docker

电商大数据项目-推荐系统实战之推荐算法

电商大数据项目-推荐系统实战之实时分析以及离线分析

大数据项目之dmp用户画像

这个场景是大数据项目吗?

客快物流大数据项目学习框架