hadoop web 端口安全认证

Posted GE12

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop web 端口安全认证相关的知识,希望对你有一定的参考价值。

Hadoop集群配置完成,web监控界面的50070和50030端口不需用户验证即可访问,对生产环境是不容许的,需要加上安全机制。
1、修改core-site.xml,增加如下内容,配置完成后拷贝到其他节点上。
    <property>
    <name>hadoop.http.filter.initializers</name>
    <value>org.apache.hadoop.security.AuthenticationFilterInitializer</value>
  </property>
 <property>
    <name>hadoop.http.authentication.type</name>
    <value>simple</value>
  </property>
 <property>
    <name>hadoop.http.authentication.signature.secret.file</name>
    <value>/home/huser/hadoop/hadoop-http-auth-signature-secret</value>
  </property>
 <property>
    <name>hadoop.http.authentication.simple.anonymous.allowed</name>
    <value>false</value>
  </property>
  <property>
  <name>hadoop.http.authentication.token.validity</name>
  <value>3600</value>
</property>
2、在上述配置的目录/home/huser/hadoop/下生成文件hadoop-http-auth-signature-secret,拷贝到其他节点上。

3、重启集群环境,访问web页面会报错。
HTTP ERROR 401
Problem accessing /dfshealth.jsp. Reason:
org.apache.hadoop.security.authentication.client.AuthenticationException: Anonymous requests are disallowed

在访问地址栏后面加上?user.name=xxx,其中“xxx“为hadoop-http-auth-signature-secret文件写入的内容,页面可以正常访问,由此可以做到安全机制。

以上是关于hadoop web 端口安全认证的主要内容,如果未能解决你的问题,请参考以下文章

spark集群启动命令和Web端口查看

hadoop yarn 配好怎么不能访问 19888端口,8088端口可以。

Spark和Hadoop集群的web可视化界面使用

为阿里云服务器配置端口访问权限

hadoop 2.x VS 3.x 端口对比

关于hadoop无法正常打开8080端口的问题解决