一项流分析作业与多项作业

Posted 2023-05-08

【中文标题】一项流分析作业与多项作业

【英文标题】：One stream analytics job vs multiple jobs

【发布时间】：2018-03-06 08:31:40

【问题描述】：

在性能方面，拥有一个具有多个查询和输出的流分析作业（在我的例子中是 Azure 表）与。将这些查询和输出拆分为多个流分析作业？

如果差异很大，如何确定哪种方案最适合我的需求？

该文档指出：

流分析每秒最多可以处理 1 GB 的传入数据。

但我更关心的是数据的处理。

【参考方案1】：

有两件事将决定您可以扩展一个流分析帐户的范围：

The documented limits 您需要多少个流媒体单元来处理您的工作负载 - 请参阅this page 底部的常见问题解答。

较小的窗口处理较少的卷将消耗较少的单位。与许多其他 PaaS 服务一样，测量单位是深奥的，您的里程可能会有所不同，最好为您的用例构建一个小样本，然后预测它的扩展方式。

我当然不会为每个案例构建单独的流式传输作业，但您可能需要找到一种方法来“划分”您的需求，可能是按用例/功能、业务领域、消费系统等。

【讨论】：

很好的答案。谢谢！与 Azure 一样，事情看起来像一个黑匣子。