Hadoop 2.5.0新特性和改进，hadoop2.5.0新特性


Apache Hadoop 2.5.0是一个在2.x.y发布线上的一个小版本，建立在之前稳定的发布版本2.4.1之上。主要特性和改进：

1. Common

a) 使用HTTP代理服务器时认证改进。当通过代理服务器使用WebHDFS时这是非常有用的。

b) 增加了一个新的Hadoop指标监控sink，允许直接写到Graphite。

c) Hadoop文件系统兼容相关的规范工作。

2. HDFS

a) 支持 POSIX风格的扩展文件系统。更多细节查看Extended Attributes in HDFS文档。

b) 支持离线image浏览，客户端现在可以通过WebHDFS的API浏览一个fsimage。

c) NFS网关得到大量可支持性的改进和bug修复。Hadoop portmapper不在需要运行网关，网关现在可以拒绝没有权限的端口的连接。

d) SecondaryNameNode, JournalNode, and DataNode 的web UI已经使用HTML5和JS美化。

3. YARN

a) YARN的REST API现在支持写/修改操作。用户可以用REST API提交和杀死应用程序。

b) 时间线存储到YARN，用来存储一个应用通用的和特殊的信息，支持Kerberos认证。

c) 公平调度器支持动态分层用户队列，运行时，用户队列在任一指定的父队列中被动态的创建。




相关内容