`
672627493
  • 浏览: 17216 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

hadoop 1.2安装安装

 
阅读更多

1,安装jkd

2,下载hadoop1.2安装包 使用命令并解压

3,配置环境变量,指定自己的jdk的版本和hadoop文件夹

vi /etc/profile

在文件末尾添加

JAVA_HOME=/usr/java/jdk1.6.0_30/

JRE_HOME=/usr/java/jdk1.6.0_30/jre

PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar

export JAVA_HOME

export JRE_HOME

export PATH

export CLASSPATH

 

export HADOOP_HOME=/home/chp_hadoop/hadoop-1.2.1

export PATH=$HADOOP_HOME/bin:$PATH

 

如图:

 

4,让环境变量生效

      source /etc/profile

5,修改 hadoop-1.2.1/conf/hadoop-env.sh文件,指定JDK版本

 

6,主要配置个文件:core-site.xml、hdfs-site.xml、mapred-site.xml

配置  conf/core-site.xml: 

<configuration> 

<property> 

<name>fs.default.name</name> 

<value>hdfs://localhost:9000</value> 

</property> 

</configuration> 

 

配置  conf/hdfs-site.xml: 

<configuration> 

<property> 

<name>dfs.replication</name> 

<value>1</value> 

</property> 

</configuration> 

 

配置  conf/mapred-site.xml: 

<configuration> 

<property> 

<name>mapred.job.tracker</name> 

<value>localhost:9001</value> 

</property> 

</configuration> 

 

7,配置SSH

在终端中输入ssh localhost如果需要输入密码则输入密码后运行以下两条命令,

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

这是为了,配置自由登录hadoop的密码,第一句是产生,第二句是分发

 

8,用cd命令进入hadoop目录  输入bin/hadoop namenode -format进行格式化

 

9, 输入bin/start-all.sh启动

 

10,检测hadoop是否启动成功

输入 /usr/jdva/jdk1.6.0.30/bin/jps,查看进程状况

如果有这些进程,则表示hadoop启动成功

2760 SecondaryNameNode

2554 NameNode

2964 TaskTracker

2840 JobTracker

 

 

 

 

 

  • 大小: 7.4 KB
  • 大小: 12.6 KB
  • 大小: 5.6 KB
分享到:
评论

相关推荐

    Hadoop1.2中配置伪分布式的实例

    主要介绍了Hadoop1.2中配置伪分布式的实例,使用的系统是linux mint 15 64bit,hadoop使用的是1.2.1版本,需要的朋友可以参考下

    hadoop2.7分布式完全安装配置手册

    hadoop2.7分布式完全安装配置手册,含hbase1.2安装配置,图文并茂,一看就会。

    hadoop-1.2.1

    hadoop-1.2.1,用于大数据版本,挺好用的hadoop-1.2.1,用于大数据版本,挺好用的

    hadoop windows 下 修改后的 FileUtil.class

    Win环境下通过Hadoop1.2.1集群 修改org.apache.hadoop.fs.FileUtil文件并重新编译后的FileUtil.class

    hadoop集群安装配置详解

    1、集群部署介绍 1.1 Hadoop简介 1.2 环境说明 1.3 网络配置 1.4 所需软件 1.5 VSFTP上传 ...4、Hadoop集群安装 4.1 安装hadoop 4.2 配置hadoop 4.3 启动及验证 4.4 网页查看集群 5、常见问题FAQ

    细细品味Hadoop_第16期_ZooKeeper简介及安装_V1.2

    细细品味Hadoop_第16期_ZooKeeper简介及安装_V1.2细细品味Hadoop_第16期_ZooKeeper简介及安装_V1.2

    Linux环境Hadoop2.6+Hbase1.2集群安装部署

    hadoop,hbase单机,伪分布,全分布部署方式过程和步骤。

    hadoop 1.2.1 api 最新chm 伪中文版

    hadoop 1.2 api 伪中文版。支持即时查询,高级查询。方便编码学习。 大数据炙手可热!hadoop是一个大数据分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分...

    hadoop-2.2编译安装详解

    Hadoop-2.2.0编译安装步骤 一,准备环境 1.1 分别设置三台节点ip地址(固定) 此步骤所有节点都要操作 vi /etc/sysconfig/network-scripts/ifcfg-eth0 1.2 修改三台节点主机名 此步骤所有节点都要操作 vi /...

    HBase 1.2 分布式安装分享

    HBase 1.2 分布式安装分享

    hadoop2.2.0部署

    1.2 安装centos6.5 3 1.2.1 注意安装细节 3 1.2.2 设置VIM 命令 3 1.2.3 配置仅主机连网 4 1.2.4 配置网络出现的问题 5 1.2.5 设置桥接上网 6 1.2.6 设置nat上网 12 2 安装基本工具 15 2.1 SSH免登陆配置 15 2.2 ...

    spark-3.0.0-bin-hadoop2.7-hive1.2.tgz

    spark安装包,spark 官网下载的,46%的已解决的问题都是是针对Spark SQL的,包括结构化流和MLlib,以及高层API,包括SQL和DataFrames。在经过了大量优化后,Spark 3.0的性能比Spark 2.4快了大约2倍

    hadoop2.7+hbase1.0+hive1.2+zookeeper3.4.6

    redhat 6.4 hadoop2.7+hbase1.0+hive1.2+zookeeper3.4.6安装配置, ntp配置

    spark-3.0.2-bin-hadoop2.7-hive1.2.tgz

    spark 安装包,适配hive1.2版本

    Hadoop2.6.2、Hbase1.1.2 HA

    Hadoop2.6.2、Hbase1.1.2、Hive1.2.1 HA

    hadoop-2.4.1安装软件包以及教程jdk.zip

    3.安装hadoop2.4.1 先上传hadoop的安装包到服务器上去/home/hadoop/ 注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个配置文件 3.1配置hadoop 第一个:hadoop-env.sh vim hadoop-env.sh...

    Hadoop实战中文版

    书籍目录: 第一部分 Hadoop——一种分布式编程框架 第1章 Hadoop简介 1.1 为什么写《Hadoop 实战》 1.2 什么是Hadoop 1.3 了解分布式系统和Hadoop 1.4 比较SQL 数据库和Hadoop 1.5 理解MapReduce 1.5.1 动手...

    hadoop1.1.2 eclipse 插件

    在用eclipse 搭建hadoop插件时,apache不会提供插件,插件必须自己编译并且声称jar包。...复制D:\hadoop-1.1.2\contrib\eclipse-plugin\hadoop-eclipse-plugin-1.1.2.jar 到 eclipse安装目录/plugins/ 下。

    Hadoop权威指南 第二版(中文版)

     本书是Hadoop权威参考,程序员可从中探索如何分析海量数据集,管理员可以从中了解如何安装与运行Hadoop集群。 目录 第1章 初识Hadoop  数据!数据!  数据存储与分析  与其他系统相比  关系型数据库管理系统...

Global site tag (gtag.js) - Google Analytics