HD6.5.1集群问题记录
Posted zhaohz
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HD6.5.1集群问题记录相关的知识,希望对你有一定的参考价值。
1. kinit 某个账户,提示 Clients credentials have been revoked
人机账户输入错误密码次数过多账号被锁的解决方法
1)先判断是否存在账户被锁。
输入kinit 用户名。如果包含如下提示:
kinit: Clients credentials have been revoked while getting initial credentials 可能是账户被锁
2)登陆kadmin后台管理控制台
kadmin -p kadmin/admin 默认密码Admin@123 (第一次会报密码过期,改为Admin@123 )
3)输入命令getprinc 用户名 ,查看用户数据密码错误次数是否超过5次,如果是,证明账户被锁
Failed password attempts 的值是否大于5
3、账户被锁
输入命令modprinc -unlock 用户名,进行解锁
2. 人机账号修改密码后,调用loader第二次就会报错
原因:客户端配置的密码未同步改过来,需同步修改loader-tools-1.99.3/loader-tool/job-config/login-info.xml 中的密码,无需重启
3. spark sql中设置hive.exec.max.dynamic.partitions无效
spark2.3.2
spark sql中执行 set hive.exec.max.dynamic.partitions=100000;
Number of dynamic partitions created is 1465, which is more than 1000.
To solve this try to set hive.exec.max.dynamic.partitions to at least 1465.
这个参数hive.exec.max.dynamic.partitions的默认值是1000,修改没有生效,
解决方法是在启动spark-sql时设置hiveconf
spark-sql --hiveconf hive.exec.max.dynamic.partitions=100000
4. loader报sqoop server no found
1) 客户端zookeeper参数未配置
2) 客户端sqoop server ip参数未配置
以上是关于HD6.5.1集群问题记录的主要内容,如果未能解决你的问题,请参考以下文章