Kettle - 负载均衡

Posted 2023-04-18

【中文标题】Kettle - 负载均衡

【英文标题】：Kettle - Load Balancing

【发布时间】：2016-05-04 21:12:31

【问题描述】：

有没有办法在 Pentaho ETL 服务器 中处理负载平衡？一旦内存增加超过设置的目标到新服务器，PDI 应该能够处理服务器切换，而不必失败或重新启动作业。 一个与 Informatica powercenter 非常相似的功能。

我知道我们可以在 PDI 中对数据进行集群，并且服务器的负载平衡通常在服务器端完成。从 PDI 的角度来看，是否可以这样做？

[注意：如果您认为这个问题很笼统，请致歉。]

【问题讨论】：

看看这个答案anotherreeshu.wordpress.com/2016/10/16/…

【参考方案1】：

我在他们的企业版支持中找到了一个文档说，

到目前为止，动态负载平衡和故障转移功能还没有 支持 PDI 服务器。

但我认为您可以进行工作和转换级别的聚类。 我找到了几个可能对您有所帮助的网址。

creating-clustered-transformations

partitioning-data-on-clustered-pentaho

clustering-in-kettle

How to build a simple PDI cluster

Create Carte Clusters

另外，您也可以在数据库服务器端而不是在 PDI 服务器上使用动态负载平衡和故障转移功能。

【讨论】：

对不起@Marlon 我不是在寻找这个答案。我知道如何在 PDI 中构建集群并扩展数据。相反，我想知道如何处理作业和数据的高可用性和负载平衡。