扩展 Hue + HiveServer2 设置的可能方法

Posted

技术标签:

【中文标题】扩展 Hue + HiveServer2 设置的可能方法【英文标题】:Possible ways to scale Hue + HiveServer2 setup 【发布时间】:2018-01-20 19:33:58 【问题描述】:

我们在 AWS 上设置了 Hue + HS2(Hive Server 2),在大约 80 个用户之前一直运行良好,但现在我们看到 HS2 方面出现了很多放缓。我们正在考虑通过再添加一个 Hue + HS2 来进行水平缩放。但是,我觉得垂直缩放可能还有一些空间。

有没有人知道一些可以修改的好参数以及每个参数在性能方面的作用?

【问题讨论】:

【参考方案1】:

Hue HA 通常由 HTTPD、Apache 或 nginx 完成:http://gethue.com/automatic-high-availability-with-hue-and-cloudera-manager/

对于 HS2,我们推荐 HAProxy:http://gethue.com/how-to-optimally-configure-your-analytic-database-for-high-availability-with-hue-and-other-sql-clients/

【讨论】:

以上是关于扩展 Hue + HiveServer2 设置的可能方法的主要内容,如果未能解决你的问题,请参考以下文章

HUE配置HIVE

hue查询hive数据一直处理查询状态

hive&hue优化

Hive扩展功能(四)--HiveServer2服务

Hive学习01-快速了解hive以及常见的面试问题

hive表级权限配置以及运行调试