[Hadoop] - Hadoop 3.x版本新特性

Posted 2020-09-01 liuming_1992

仅做记录--->官方说明：http://hadoop.apache.org/docs/r3.0.0-alpha2/index.html

===========================================

1. JDK版本的最低依赖从1.7变成了1.8

2. HDFS支持Erasure Encoding

3. Timeline Server v2版本

4. hadoop-client这个依赖分为hadoop-client-api和hadoop-client-runtime两个依赖

5. 支持随机container和分布式调度

6. MR进行了task级别的本地优化，性能提升30%

7. 支持多个Standby状态的NameNode

8. 多个端口被改动

9. 支持微软的Azure分布式文件系统和阿里的aliyun分布式文件系统

10. datanode内部添加了负载均衡