`

Apache Hadoop 2.6.0包含许多重要的改进

 
阅读更多

如果被人问到,为何用到hadoop2.6,而不是2.2或其他版本,你可以这样回答:

官网直接翻译:

 

Apache Hadoop 2.6.0包含许多重要的改进,如:
一、Hadoop Common组件方面
1> 密钥管理服务器(公测版)
2> 证书提供者(测试版)
二、Hadoop的HDFS方面
1> 异构存储层——版本II:
     1) 应用程序异构存储api
     2) 支持SSD存储设备层
     3) 支持内存作为存储层(公测版)
2> 支持存档存储
3> 透明的数据休息加密(公测版)
4> 操作安全的DataNode非root权限
5> 热插拔开:支持添加/删除数据节点数据而不需要重新启动节点(公测版)
6> AES支持快速导线加密
三、Hadoop Yarn
1> 支持在Yarn长时间运行的服务:
     1) 应用程序服务注册
2> 支持滚动更新
     1) ResourceManager重启时,Work防护
     2) NodeManager重启时,Container防护
3> 在调度支持节点的标签
4> 支持基于时间的资源保留能力调度器(公测版)
5> 应用构件可共享全局缓存(公测版)
6> 支持本地运行的应用程序在Docker 容器中运行(内测版本)

 

调理挺多的,需要好的记忆力。

 

分享到:
评论

相关推荐

    hadoop2.6.0插件+64位winutils+hadoop.dll

    hadoop2.6.0插件+64位winutils+hadoop.dll

    apache-carbondata-1.4.0-bin-spark2.1.0-hadoop2.6.0-cdh5.11.1.jar

    carbondata-1.4,spark-2.1,hadoop-2.6.0-cdh5.11.1源码编译

    hadoop.dll & winutils.exe For hadoop-2.6.0

    搬运工,适合不方便连接外网的朋友使用。O(∩_∩)O! 多谢

    hadoop-2.6.0.tar.gz&hadoop-2.6.0-cdh5.16.2.tar.gz

    hadoop-2.6.0版本的apache和cdh版本

    hadoop-utils:Apache Hadoop 2.6.0 安装与配置

    小屋在ubuntu集群上安装和配置Apache Hadoop 2.6.0的Python项目预安装您必须在所有节点上添加名为“hadoop”的新用户,或在集群节点上添加任何用户名,但名称必须相同。 在集群节点之间安装无密码 ssh。 将 Hosts ...

    hadoop-2.6.0-cdh5.14.0 hadoop.dll winutils

    一开始使用的是原生的hadoop2.6.0编译的hadoop.dll,但是一直遇到这个问题Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String...

    hadoop-2.6.0-cdh5.10.0.tar.gz

    Apache Hadoop 2.6.0-cdh5.10.1是2.x.y发行版中的次要发行版,它建立在先前的稳定版本2.4.1的基础上。

    hadoop-2.6.0-hadoop.dll-winutils.exe

    log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j:WARN Please initialize the log4j system properly. log4j:WARN See ...

    hadoop-2.6.0~hadoop3.0.0-winutils.zip

    2021-11-29 16:28:48,544 ERROR [org.apache.hadoop.util....适用于在Windows系统本地运行Mapreduce程序,可以挑选接近所选用的hadoop版本来使用Winutils,例如hadoop2.6.0版本,可以使用资源中的2.6.3版本的winutils.

    Hadoop2.6.0_win64_dll_winutils.exe

    at org.apache.hadoop.util.Shell.getQualifiedBinPath(Shell.java:378) at org.apache.hadoop.util.Shell.getWinUtilsPath(Shell.java:393) at org.apache.hadoop.util.Shell.(Shell.java:386) at org.apache....

    hadoop 2.6.0 eclipse

    "main"java.lang.UnsatisfiedLinkError:org....Hadoop 2.6.0 Windows下eclipse开发hadoop程序会报错,原因是因为hadoop2.6.0没有发布winutils.exe造成的,现编译发布出来. 附件包含 64位winutils.exe,亲测完全可用。

    hadoop-2.6.0-cdh5.15.1.zip

    Hadoop的CDH版本是什么? 基于Apache协议,100%开源。 版本管理清晰 提供了部署、安装、配置工具,大大提高了集群部署的效率 运维简单。提供了管理、监控、诊断、配置修改的工具,管理配置方便,定位问题快速、准确...

    hadoop-hdfs-2.6.5-API文档-中文版.zip

    包含翻译后的API文档:hadoop-hdfs-2.6.5-javadoc-API文档-中文(简体)版.zip; Maven坐标:org.apache.hadoop:hadoop-hdfs:2.6.5; 标签:apache、hdfs、hadoop、jar包、java、中文文档; 使用方法:解压翻译后的API...

    hadoop-2.6.0-cdh5.7.1.tar.gz(编译版)

    编译环境如下: jdk1.7 apache-maven-3 protobuf-2.5.0 findbugs-1.3.9 gcc gcc-c++ make cmake openssl zlib ncurses snappy bzip2 lzo lzop autoconf automake

    64位hadoop-2.6.0 lib/native.tar.gz

    自己在网上下载了一个hadoop-2.6.0-cdh5.15.1版本的hadoop,启动hdfs时报错:WARN org.apache.hadoop.util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java ...

    docker-hadoop-ubuntu:Ubuntu 上的 Hadoop 映像

    #Apache Hadoop 2.6.0 Docker 镜像 几周前,我们发布了一个 Apache Hadoop 2.3 Docker 镜像(使用 CentOS 6.5 作为来宾操作系统)——这很快成为 DockerHadoop 镜像。 在我们基于 CentOS 的 Hadoop 2.3 Docker成功...

    Hadoop-2.0.0-cdh4.3.0安装手册.

    2.2 hadoop 10 2.2.1 第一步:解压 10 2.2.2 第二步:配置core-site.xml 11 2.2.3 第三步:配置hdfs-site.xml 11 2.2.4 第四步:配置mapred-site.xml 13 2.2.5 第五步:配置yarn-site.xml 13 2.2.6 第六步:配置...

    hadoop-2.6.0-cdh5.7.0 64位 native文件库

    解决:Unable to load native-hadoop library for your platform 问题 原因: Apache提供的hadoop本地库是32位的,而在64位的服务器上就会有问题,因此需要自己编译64位的版本。 将准备好的64位的lib包解压到已经...

    hadoop winutils合集,org.apache.hadoop.util.NativeCrc32

    该wintuils合集包含hadoop2.6.0、2.6.3、2.6.4、2.7.1、2.8.0、2.8.3、3.0.0版本,请需要的小伙伴们前来下载,用以解决本地测试报错问题。 (将bin文件放到/hadoop/下,hadoop.dll和wintuils.exe放到/windows/system...

    hadoop-2.6.0-cdh5.14.2.tar _after_compile -src

    Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。

Global site tag (gtag.js) - Google Analytics