Hadoop v2 时代正式到来
程序员文章站
2022-03-03 18:24:37
...
Apache基金会近日正式发布了Hadoop 2.2版本,该版本是Hadoop 2.x分支中的首个稳定版本(2.0.x为alpha版本,2.1.x为beta版本),标志着Hadoop 2时代的正式到来。
Apache建议用户升级至最新版本,因为这个版本更加稳定,并保持与之前版本API和相关协议条款的兼容。与Hadoop 1.x相比,Hadoop 2的主要亮点如下:
官网:http://hadoop.apache.org/
相关阅读:
Apache建议用户升级至最新版本,因为这个版本更加稳定,并保持与之前版本API和相关协议条款的兼容。与Hadoop 1.x相比,Hadoop 2的主要亮点如下:
- 新的Hadoop MapReduce框架YARN
- HDFS高可用性
- HDFS Federation(HDFS联盟):使得HDFS支持多个命名空间,并且允许在HDFS中同时存在多个Name Node
- HDFS快照
- NFSv3可访问HDFS中的数据
- 支持在Windows平台上运行Hadoop
- 兼容基于Hadoop 1.x构建的MapReduce应用
- 大量针对生态系统中其他项目的集成测试
- HDFS社区建议将symlinks功能从2.3版本中移除,目前该功能已停用
- 在新的YARN/MapReduce中,用户需要更改ShuffleHandler服务名称——需要将mapreduce.shuffle改为mapreduce_shuffle
官网:http://hadoop.apache.org/
相关阅读: