FlinkFlink on Yarn 翻译使用 hdfs jar yarn.provided.lib.dirs

Posted 2022-09-21 九师兄

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了FlinkFlink on Yarn 翻译使用 hdfs jar yarn.provided.lib.dirs相关的知识，希望对你有一定的参考价值。

1.概述

看这个起源于一个群友的问题。群友写了UDF.jar想放到hdfs上，然后运行的时候，希望指定hdfs jar，希望能加载进去

尝试使用如下方法发现不可以

后面经过网友一起讨论，发现有这个参数 yarn.provided.lib.dirs。然后我在源码中找到如下案例

 ./bin/flink run-application -t yarn-application \\
  -Dyarn.provided.lib.dirs="hdf

以上是关于FlinkFlink on Yarn 翻译使用 hdfs jar yarn.provided.lib.dirs的主要内容，如果未能解决你的问题，请参考以下文章