`
flyingdutchman
  • 浏览: 353267 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

CentOS 6.4 hadoop集成 Hbase Zookeeper

阅读更多
        再上一章中我们已经学习了Hadoop-1.0.3集成Hive-0.8.1,在这一章节我们来学习一下如何配置Hbase-0.92.2。

        配置Zookeeper先
        在hadoop上集成hbase之前,需要先安装zookeeper,hbase集群需要通过zookeeper集群来通信和监控Hbase集群中的节点的状态。故我们首先来配置一下zookeeper:
引用

        # wget http://mirror.bjtu.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz
        # chmod +x zookeeper-3.4.5.tar.gz
        # tar -xzvf zookeeper-3.4.5.tar.gz
        # cp -rf zookeeper-3.4.5 /opt/bigdata
        # cd /opt/bigdata/zookeeper-3.4.5
        # vi /etc/profile

          export ZOOKEEPER_HOME=/opt/bigdata/zookeeper-3.4.5
          export PATH=%ZOOKEEPER_HOME%/bin:$PATH

        # source /etc/profile
        # cd conf
        # cp zoo_sample.cfg zoo.cfg
        # mkdir /data/zookeeper
        # vi zoo.cfg

          //将zoo.cfg中的dataDir=/tmp/zookeeper改为
          dataDir=/data/zookeeper

       

        好了,执行好上述命令语句后,zookeeper就已经配置好了,现在启动:
引用

        # cd ../bin
        # ./zkServer.sh start

       


        配置Hbase
        先下载hbase并解压:
引用

        # wget http://archive.apache.org/dist/hbase/hbase-0.92.2/hbase-0.92.2.tar.gz
        # chmod +x hbase-0.92.2.tar.gz
        # tar xzvf hbase-0.92.2.tar.gz
        # cp hbase-0.92.2 /opt/bigdata

       

        1、先配置hbase环境变量:
引用
       
        # vi /etc/profile  
          export HBASE_HOME=/opt/bigdata/hbase-0.92.2
          export PATH=%HBASE_HOME%/bin:$PATH

        # source /etc/profile
       

        2、接下来进入%HBASE_HOME%/conf,配置hbase-env.sh:
引用

        # cd /opt/bigdata/hbase-0.92.2/conf
        # vi hbase-env.sh

          export JAVA_HOME=/usr/local/jdk6
          export HBASE_MANAGES_ZK=false //true:使用hbase内置的zk,false:使用外置的zk
          export HBASE_HOME=/opt/bigdata/hbase-0.92.2
          export HADOOP_INSTALL=/opt/bigdata/hadoop-1.0.3

        # sh hbase-env.sh     
       

        3、再接下来配置%HBASE_HOME%/conf,配置hbase-site.xml:
引用

        # vi hbase-site.xml
          <property>
    <name>hbase.rootdir</name>
    <value>hdfs://localhost:9000/hbase</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
  <property>
    <name>hbase.master</name>
    <value>localhost:60000</value>
  </property>
  <property>
    <name>zookeeper.znode.parent</name>
    <value>/hbase</value>
    <description>hbase在zookeeper中注册的根结点的名字,默认为”/hbase”</description>
</description>
  </property>
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>localhost</value>
  <description>指定ZooKeeper集群</description>
</property>

       

        4、接下来在配置%HBASE_HOME%/conf/regionservers:
引用

        # vi regionservers
          localhost   //这里要列出所有的regionservers
       

        5、然后将hadoop里的hadoop-core-1.0.3.jar和zookeeper里的zookeeper.3.4.5.jar拷贝到hbase的lib目录下:
引用

        # cd /opt/bigdata/hadoop-1.0.3
        # cp hadoop-core-1.0.3.jar ../hbase-0.92.2/lib
        # cp zookeeper-3.4.5.jar ../hbase-0.92.2/lib
        # rm -rf zookeeper-3.4.3.jar  //如果之前有其他版本的hadoop-core-*.jar则删除之       

       

        6、还要修改/etc/hosts,将用户名映射到127.0.0.1,如:
引用

        127.0.0.1  JackyChen
       

        否则启动hbase的时候报错。
        好了,到这里已经配置好了hbase,我们要按顺序启动hadoop、 zookeeper和hbase:
引用

        # cd /opt/bigdata/hadoop-1.0.3/bin
        # ./start-all.sh
        # cd ../../zookeeper-3.4.5/bin
        # ./zkServer.sh start
        # cd ../../hbase-0.92.2/bin
        # ./start-hbase.sh
       
       

        执行上述命令后,hbase就启动起来了,接下来我们查看相关的进程:
引用

        # jps
       

        如果出现一下显示就说明已经启动成功:

        然后执行./hbase shell进入hbase的shell命令行。

   

       
  • 大小: 126.9 KB
分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics