在HBase之上的solr中创建索引

Posted 2021-05-04

无论如何，我可以在Solr中创建索引，以便从近期实时HBase执行全文搜索。

我不想将整个文本存储在我的solr索引中。制作"stored=false"

注意： - 请记住，我正在处理大型数据集，并希望进行近实时搜索。我们正在谈论TB / PB数据。

更新

Cloudera Distribution：5.4.x与Cloudera Search组件一起使用。

Solr：4.10.x

HBase：1.0.x

Indexer Service：具有cloudera morphlines的Lily HBase Indexer

是否有任何其他NRT Indexer服务或框架可用于代替Cloudera上的Lily。只是一个想法。

答案

Cloudera：请查看this article和Hbase-Solr using Cloudera-search，其中介绍了如何实现这一目标。见这些文章所描述的屏幕截图。 Have a look at known issues with Cloudera Search

是的，你可以考虑Morphlines。它们可用于近实时应用程序以及批处理应用程序。

我对hortonworks平台以及如何实现这一点了解不多。