- 浏览: 76903 次
- 性别:
- 来自: 杭州
文章分类
- 全部博客 (95)
- Linux(CentOS) (17)
- ubuntu (16)
- linux命令 (13)
- java基础 (8)
- eclipse maven (1)
- ubuntu xen (0)
- samba (1)
- jdk (1)
- linux (1)
- jenkins (1)
- MySQL (4)
- spring (1)
- redis (2)
- zookeeper (3)
- java多线程 (3)
- 线程池 (2)
- 工具类 (1)
- 技术问答 (1)
- 算法 (1)
- eclipse JVM (1)
- hadoop配置 (2)
- hadoop配置 HDFS (0)
- ubuntu svn (1)
- hadoop (5)
- mapReduce (1)
- HDFS (2)
- hive (3)
- flume (1)
- python (6)
- centos (1)
- svn (1)
- sonar (1)
- JVM (1)
- kafka (1)
- zabbix (1)
- python paramiko (1)
- TPS (1)
- docker (4)
- ssh (2)
- Go (1)
最新评论
搭建环境:Centos x 6.6 64bit
前置环境jdk1.7、maven3.0.5
如果是你32bit的机器,可以直接下载官方已经编译好的包,64bit的机子重新编译步骤如下。
安装依赖工具
编译Hadoop
慢慢等着,这个过程会很久,..................................................................................................................................................................真的会很久
编译成功后会打包,放在hadoop-dist/target
# ls
antrun dist-tar-stitching.sh hadoop-2.6.0.tar.gz hadoop-dist-2.6.0-javadoc.jar maven-archiver
dist-layout-stitching.sh hadoop-2.6.0 hadoop-dist-2.6.0.jar javadoc-bundle-options test-dir
前置环境jdk1.7、maven3.0.5
如果是你32bit的机器,可以直接下载官方已经编译好的包,64bit的机子重新编译步骤如下。
安装依赖工具
yum install cmake lzo-devel zlib-devel gcc gcc-c++ autoconf automake libtool ncurses-devel openssl-devel libXtst tar xvf protobuf-2.5.0.tar.gz cd protobuf-2.5.0 ./configure make make install #验证: protoc --version libprotoc 2.5.0 tar -zxvf apache-ant-1.9.5-bin.tar.gz -C /usr/local #配置ant环境变量
编译Hadoop
慢慢等着,这个过程会很久,..................................................................................................................................................................真的会很久
mvn package -DskipTests -Pdist,native
编译成功后会打包,放在hadoop-dist/target
# ls
antrun dist-tar-stitching.sh hadoop-2.6.0.tar.gz hadoop-dist-2.6.0-javadoc.jar maven-archiver
dist-layout-stitching.sh hadoop-2.6.0 hadoop-dist-2.6.0.jar javadoc-bundle-options test-dir
发表评论
-
Centos7安装Go语言
2017-01-12 15:08 4091、下载安装包 # wget https://storag ... -
Centos安装Sqlite3
2017-01-12 11:30 5771、下载安装包 官网http://www.sqlite.org ... -
Docker仓库搭建(Registry + Portus)
2016-12-21 11:26 807引用 http://www.cnblogs.com/derek ... -
Centos7安装
2016-12-14 14:30 3311、配置静态IP vi /etc/sy ... -
Docker创建支持ssh服务的容器和镜像
2016-10-03 10:48 3781、启动容器 [root@docker ~]# docke ... -
svn
2015-06-05 13:15 4201、下载单个文件 svn co --depth=empt ... -
CentOS sendmail发送外部邮件
2015-05-10 13:39 15181、安装配置sendmail软件 yum install ... -
centos6.6 脚本
2015-04-20 21:15 343软件存放于~/soft下面,安装常用软件java、tomcat ... -
Flume
2015-03-12 17:23 6211、运行flume需要的jar包,以及hadoop配置文件 ... -
hadoop、hbase、hive、zookeeper版本对应关系
2015-03-11 15:25 644hadoop与HBase版本对应关系: Hbase Had ... -
HIVE实例
2015-03-09 16:08 3961、配置hive-site.xml文件,使用mysql作为me ... -
hadoop学习--mapReduce
2015-01-22 15:37 350vim words hello jzk hello ... -
linux文件夹权限问题
2014-07-20 16:08 6231、sudo chmod 777 /usr/local/j ... -
CentOS 6.5安装jenkins
2014-06-25 15:50 1345第一种方法 1、安装 新增 jenkins 的 yum 源 ... -
CentOS 6.5开机自启动svn、apache
2014-06-22 23:14 6541、编辑rc.local文件 #vi /etc/rc.d/rc ... -
CentOS 6.5搭建SVN 1.8.5服务器
2014-06-18 15:40 661yum install subversion apache安装 ... -
CentOS 6.5安装apache
2014-06-18 14:28 7531、依赖包的安装 tar zxvf apr-1.5.0.tar ... -
CentOS 6.5开放端口
2014-06-18 11:50 479netstat -anp|grep 8080 #查看8080 ... -
CentOS 6.5安装tomcat7
2014-06-18 11:43 6261、创建tomcat路径,上传apache-tomcat-7. ... -
CentOS 6.5安装JDK6
2014-06-18 11:32 5671、安装jdk6 上传jdk-6u30-linux-i586 ...
相关推荐
hadoop2.6.0 hadoop.dll包括winutils.exe
CentOS环境下Hadoop2.6.0分布式部署说明
hadoop 2.6.0 eclipse 插件 测试可用
hadoop-2.6.0.tar.gz + ideaIC-13.1.6.tar.gz + jdk-7u75-linux-i586.tar.gz + scala-2.10.4.tgz + spark-1.0.0-bin-hadoop2.tgz
spark-assembly-1.6.1-hadoop2.6.0.jar,欢迎下载,,,,,,,,,,,,,,,,,,,,
hadoop2.6.0插件+64位winutils+hadoop.dll
在64位系统上运行Hadoop 2.6.0会...这是因为hadoop默认编译好的native库是32bit的,所以要重新编译hadoop2.6的源代码,获取64位native库,将其复制到原来安装的hadoop的native目录中替代原来的类库,然后重新运行即可。
2.6.0源码编译生成的lib包目录。替换官网下载的资源里的lib目录即可
hadoop2.6.0伪分布安装的详细过程。
使用命令行编译打包运行自己的MapReduce程序 Hadoop2.6.0
hadoop2.6.0.chm由hadoop的doc制成,包含User Guide、Javadocs等
CentOS6.5系统下Hadoop2.6.0完全分布式环境安装与配置信息介绍
spark-assembly-1.5.2-hadoop2.6.0 在spark编程中使用的一个jar
hadoop2.6.0 jdk1.7 ant 1.9.4 eclipse最新版 使用说明:放置到eclipse/plugins下 重启eclipse即可
hadoop2.6.0编译的全部工具 包括ant maven findbugs protobuf hadoop-2.6.0-src
自己下载完整的API文档后编译的,Hadoop 2.6.0 API CHM版
windows开发需要的依赖包,hadoop2.6.0 winutils.exe、hadoop.dll
用于Hadoop搭建安装包
Hadoop 2.6.0分布式部署参考手册.doc
hadoop2.6.0版本的eclipse插件,直接把jar包复制到eclipse目录的plugins文件夹下即可。