Hive LLAP调优：每个守护程序的内存和堆大小计算

Posted 2021-04-05

我正在调整我的具有Hive LLAP的集群，根据以下链接，https://community.hortonworks.com/articles/215868/hive-llap-deep-dive.html我需要计算heapsize的值，但不确定*的含义是什么？

我还有一个问题，关于如何计算hive.llap.daemon.yarn.container.mb的值，然后是ambari给出的默认值？

我已经尝试通过考虑这个（*为乘法）并将容器值设置为等于yarn.scheduler.maximum.allocation.mb来计算该值，但是HiveServer 2交互式在调优后不会启动。

答案

这是在HDP套件中设置hive llap的优秀wiki文章。 https://community.hortonworks.com/articles/149486/llap-sizing-and-setup.html

你对*的理解是正确的，它用于乘法。

这里的经验法则是将hive.llap.daemon.yarn.container.mb设置为yarn.scheduler.maximum-allocation-mb，但如果您的服务没有提供该值，那么我建议您将llap_heap_size更改为hive.llap.daemon.yarn.container.mb的80％。