- 29
- 0
- 约3.46千字
- 约 3页
- 2018-11-18 发布于天津
- 举报
Apache Hadoop 3.0.0-alpha1正式发布及其更新介绍
Spark大数据博客 -
Apache Hadoop 3.0.0-alpha1正式发布及其更新介绍
Apache Hadoop
3.0.0-alpha1相对于hadoop-2.x来说包含了许多重要的改进。这里介绍的是Hadoop 3.0.0的alpha
版本,主要是便于检测和收集应用开发人员和其他用户的使用反馈。因为是alpha版本,所以本版
本的API稳定性和质量没有保证,如果需要在正式开发中使用,请耐心等待稳定版的发布吧。
本文将对Hadoop 3.0.0重要的改进进行介绍。
Java最低版本要求从Java7 更改成Java8
所有的Hadoop JARs都是针对Java 8 编译的。仍在使用Java 7 或更低版本的用户必须升级至Java
8。
HDFS支持纠删码(Erasure Coding)
与副本相比纠删码是一种更节省空间的数据持久化存储方法。标准编码(比如Reed-
Solomon(10,4))会有
1.4 倍的空间开销;然而HDFS副本则会有3倍的空间开销。因为纠删码额外开销主要是在重建和
执行远程读,它传统用于存储冷数据,即不经常访问的数据。当部署这个新特性
原创力文档

文档评论(0)