`

hbase 通过hbase命令数据导入导出(了解)

 
阅读更多

 

 

常看到hbase数据导入导出有:  

1 mr方式 

2 bulkbold 

3 操作hbase java api put方式

 

这里说的是通过hbase 命令方式,感觉这个方式没有什么用处,暂且记录下:

 

 

 hbase 数据导出:

 

数据导出
hbase org.apche.hadoop.hbase.mapreduce.Driver export 表名  导出的路径
eg:
[root@hadoop3 bin]# hbase org.apache.hadoop.hbase.mapreduce.Driver export  stu /hbasedata 会新建hdfs目录/hbasedata,然后数据导出到这目录下
执行完毕mr后,会报错:
2016-02-27 16:26:52,218 INFO  [main] mapreduce.Job:  map 0% reduce 0%
2016-02-27 16:27:11,593 INFO  [main] mapreduce.Job:  map 100% reduce 0%
2016-02-27 16:27:12,648 INFO  [main] mapreduce.Job: Job job_1456616077921_0001 completed successfully
Exception in thread "main" java.lang.reflect.InvocationTargetException  这就不知道是为啥了  但是数据导出已经成功

 

结果图:

 



 

 

 

hbase 命令方式导入数据到hbase:

 

hbase org.apache.hadoop.hbase.mapreduce.Driver import 表名  files 导入文件路径(可以是本地files 可以是hdfs)
hbase org.apache.hadoop.hbase.mapreduce.Driver import stu1  hdfs://ip:9000/hdfs文件路径
hbase org.apache.hadoop.hbase.mapreduce.Driver import stu1  file://本地路径

 

[root@hadoop3 bin]# hbase org.apache.hadoop.hbase.mapreduce.Driver import  stu1 /hbasedata

做测试时候 上述导入操作 报错,

2016-02-27 18:12:16,950 INFO  [main] mapreduce.Job: Task Id : attempt_1456616077921_0003_m_000000_2, Status : FAILED

 

没找到原因,暂时不关注 ......

  • 大小: 66.1 KB
分享到:
评论

相关推荐

    hbase导出csv,文本,html文件

    通过条件查询hbase数据导出csv,文本,html等文件,实现方式:将hbase关联hive,然后将hive数据导入真实表,在将真实表数据导入sql数据库

    tsv格式的数据库测试文件,hbase可以通过采用importtsv导入外部数据到hbase中

    tsv格式的数据库测试文件,hbase可以通过采用importtsv导入外部数据到hbase中

    HDFS 通过mapreduce 进行 HBase 导入导出

    NULL 博文链接:https://jsh0401.iteye.com/blog/2096103

    导入导出工具

    导入导出工具

    HBaseClient:HBase客户端数据管理软件

    HBase客户端数据管理软件 概要说明 类似PL/SQL,是一个HBase数据库的客户端数据管理软件。是免费开源的软件。 基于XJava,使用xml配置文件绘制可视化界面。 可视化界面操作 表 表的定义、编辑、删除; 数据 数据的...

    23-Sqoop数据导入导出1

    2. 练习使用Sqoop将数据从Mysql中导入到HBase中 3. 练习使用Sqoop将数据在Mysql与Hive之间的导入导出 4. Sqoop上的操作举例

    MapReduce导出hbase数据工具BillFeeImport.jar

    hbase导入hbase导入

    通用MapReduce程序复制HBase表数据

    编写MR程序,让其可以适合大部分的HBase表数据导入到HBase表数据。其中包括可以设置版本数、可以设置输入表的列导入设置(选取其中某几列)、可以设置输出表的列导出设置(选取其中某几列)。 原始表test1数据如下: 每...

    spark大作业.zip

    4、熟悉在不同类型数据库之间进行数据相互导入导出; 5、熟悉使用R语言进行可视化分析; 6、熟悉使用Eclipse或IntelliJ Idea编写Java程序操作HBase数据库 要求 1、对文本文件形式的原始数据集进行预处理 2、把文本...

    Hadoop-Sqoop-Oracle:使用Sqoop在Oracle数据库和HDFS之间进行导入和导出

    Hadoop-Sqoop-Oracle 使用Sqoop在Oracle数据库和HDFS之间进行导入和导出 ... 可以将来自外部系统的数据导入HDFS并以Hive表和HBase表等各种Hadoop文件格式保存。 Sqoop v2仅支持保存到HDFS 在所有与JDBC

    现代物流大数据分析大作业《网站用户行为分析》

    该案例实验的目的是熟悉Linux系统以及Hadoop等系统和软件的安装和使用,了解大数据处理的基本流程,熟悉数据预处理方法和熟悉在不同类型数据库之间进行数据相互导入导出。预计耗时10天完成此次课程大作业,通过此次...

    Hadoop硬实战 [(美)霍姆斯著][电子工业出版社][2015.01]_PDF电子书下载 带书签目录 高清完整版.rar )

    2 将数据导入导出Hadoop. 2.1 导入导出的关键要素 2.2 将数据导入Hadoop . 2.2.1 将日志文件导入Hadoop 技术点1 使用Flume 将系统日志文件导入HDFS 2.2.2 导入导出半结构化和二进制文件 技术点2 ...

    Hadoop实战(第2版)

    1.2.4 运行MapReduce 作业 1.3 本章小结第2 部分 数据逻辑.2 将数据导入导出Hadoop.2.1 导入导出的关键要素2.2 将数据导入Hadoop .2.2.1 将日志文件导入Hadoop技术点1 使用Flume 将系统日志文件...

    Apache Hadoop---Sqoop.docx

    Sqoop是SQL-to-Hadoop的缩写,是Hadoop的周边工具,它的主要作用是在结构化数据存储...Sqoop充分利用了Hadoop的优点,整个数据导入导出过程都是用MapReduce实现并行化,同时,该过程中的大部分步骤自动执行,非常方便。

    大数据简历,内含有数据项目的简历,大数据 简历

    2.采用Kstream框架对数据进行初步数据清洗与变换,使用Java API将数据导入HBase 3.使用Hive集成Hbase,对数据进行ETL,进一步清洗处理数据 4.协助使用Hive提取特征值,运用Spark ML构建模型 5.参与模型检验与随机...

    sqoop安装详解以及sqoop介绍

    sqoop:是一个工具,主要用于导入导出,实现MySQL到Hadoop之间数据的转换 2、导入数据:从结构化数据(Mysql,oracle,db2,)导入到半结构化或非结构化hadoop中(HDFS、HIVE、HBASE) 3、导出数据:从haoop中将数据...

    hadoop安装与配置.pdf

    此外,Hadoop广义上指的是一个更广泛的概念,即Hadoop生态系统,其中还包括了Hive数据仓库工具、HBase非关系型数据库、Zookeeper分布式协调服务、Kafka消息队列、Sqoop数据导入导出等其他组件。 Hadoop的创始人是...

    大数据-sqoop.pptx

    Sqoop的用途 Sqoop可以在HDFS/Hive和关系型数据库之间进行数据的导入导出,其中主要使用了import和export这两个工具。 这两个工具非常强大,提供了很多选项帮助我们完成数据的迁移和同步。比如,下面两个潜在的需求...

    Hadoop权威指南(中文版)2015上传.rar

    通过FileSystem API读取数据 写入数据 目录 查询文件系统 删除数据 数据流 文件读取剖析 文件写入剖析 一致模型 通过 distcp并行拷贝 保持 HDFS 集群的均衡 Hadoop的归档文件 使用Hadoop归档文件 不足 第4章 Hadoop ...

    Hadoop权威指南 第二版(中文版)

     本书是Hadoop权威参考,程序员可从中探索如何分析海量数据集,管理员可以从中了解如何安装与运行Hadoop集群。 目录 第1章 初识Hadoop  数据!数据!  数据存储与分析  与其他系统相比  关系型数据库管理系统...

Global site tag (gtag.js) - Google Analytics