dolphinscheduler调试问题记录

Posted 九万里_w

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了dolphinscheduler调试问题记录相关的知识,希望对你有一定的参考价值。

  1. 问题: Please make sure that jars for your version of hive and hadoop are included in the paths passed to spark.sql.hive.metastore.jars.


修改配置:
spark.sql.hive.metastore.version=/usr/hdp/current/spark2-client/jars/*

  1. datax-hdfs支持高可用


将hive-site.xml、core-site.xml、hdfs-site.xml集群的配置文件打入到hdfswriter-0.0.1-SNAPSHOT.jar包里

以上是关于dolphinscheduler调试问题记录的主要内容,如果未能解决你的问题,请参考以下文章

DolphinScheduler 传递参数到flink程序中

dolphinscheduler 海豚调度历史版本梳理

数仓工具——DolphinScheduler任务调度工具

一文读懂,硬核 Apache DolphinScheduler3.0 源码解析

Apache DolphinScheduler征稿-DolphinScheduler的入门级教程及案例

Apache DolphinScheduler征稿-DolphinScheduler的入门级教程及案例