深入解析 Flink 细粒度资源管理

Posted 2022-08-21 dhf123

使用相同的slot执行所有task可能会导致非最佳资源利用率。相同slot位的资源必须能够满足最高资源要求，这对于其他要求将是浪费的。当涉及到 GPU 等昂贵的外部资源时，这种浪费会变得更加难以承受。 因此，需要细粒度的资源管理，利用不同资源的slot来提高这种场景下的资源利用率。

使用相同的slot执行所有task可能会导致非最佳资源利用率。相同slot位的资源必须能够满足最高资源要求，这对于其他要求将是浪费的。当涉及到 GPU 等昂贵的外部资源时，这种浪费会变得更加难以承受。 因此，需要细粒度的资源管理，利用不同资源的slot来提高这种场景下的资源利用率。