HD6.5.1集群问题记录

Posted zhaohz

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HD6.5.1集群问题记录相关的知识,希望对你有一定的参考价值。

1. kinit 某个账户,提示 Clients credentials have been revoked

人机账户输入错误密码次数过多账号被锁的解决方法

1)先判断是否存在账户被锁。

输入kinit 用户名。如果包含如下提示:

kinit: Clients credentials have been revoked while getting initial credentials 可能是账户被锁

2)登陆kadmin后台管理控制台

kadmin -p kadmin/admin 默认密码Admin@123  (第一次会报密码过期,改为Admin@123 )

3)输入命令getprinc 用户名 ,查看用户数据密码错误次数是否超过5次,如果是,证明账户被锁

Failed password attempts 的值是否大于5

 

3、账户被锁

输入命令modprinc -unlock 用户名,进行解锁

 

2. 人机账号修改密码后,调用loader第二次就会报错

原因:客户端配置的密码未同步改过来,需同步修改loader-tools-1.99.3/loader-tool/job-config/login-info.xml 中的密码,无需重启

 

3. spark sql中设置hive.exec.max.dynamic.partitions无效

spark2.3.2

spark sql中执行 set hive.exec.max.dynamic.partitions=100000;

Number of dynamic partitions created is 1465, which is more than 1000.

To solve this try to set hive.exec.max.dynamic.partitions to at least 1465.

这个参数hive.exec.max.dynamic.partitions的默认值是1000,修改没有生效,

解决方法是在启动spark-sql时设置hiveconf

spark-sql --hiveconf hive.exec.max.dynamic.partitions=100000

 

4. loader报sqoop server no found

1) 客户端zookeeper参数未配置

2) 客户端sqoop server ip参数未配置

技术图片

 

以上是关于HD6.5.1集群问题记录的主要内容,如果未能解决你的问题,请参考以下文章

hdp 集群问题解决记录

k8s集群问题记录

k8s集群问题记录

k8s集群问题记录--持续更新

spring websocket集群问题的简单记录

在Flink集群中使用Log4j记录问题?