`

sqoop 1.99.6遇到的错误

 
阅读更多

1、create job 时:

There are issues with entered data, please revise your input:

说明配置有错,请重新检查各输入项

 

2、create job 时:

Last value is required during incremental read

是因为Check column: 输入了值,所以要求输入 Last value

 

3、接上一问题,输入Last value后:

Size of input exceeds allowance for this input field. Maximal allowed size is -1

怎么都没办法输入正确,一个字符也不行,重新配置时把Check column 项清空就好了

 

4、start job -j 1时:

Exception has occurred during processing command
Exception: org.apache.sqoop.common.SqoopException Message: CLIENT_0001:Server has returned exception

根本不知道这个提示说什么,通过修改设置:

set option --name verbose --value true

,再次执行 start job -j 1,显示出有用的出错信息:

Exception has occurred during processing command
Exception: org.apache.sqoop.common.SqoopException Message: CLIENT_0001:Server has returned exception
Stack trace:
         at  org.apache.sqoop.client.request.ResourceRequest (ResourceRequest.java:129)
...
Caused by: Exception: org.apache.sqoop.common.SqoopException Message: GENERIC_HDFS_CONNECTOR_0007:Invalid output directory - Unexpected exception
Stack trace:
         at  org.apache.sqoop.connector.hdfs.HdfsToInitializer (HdfsToInitializer.java:71)
...
Caused by: Exception: java.net.ConnectException Message: Call From localhost.localdomain/127.0.0.1 to localhost:8020 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
Stack trace:
         at  sun.reflect.NativeConstructorAccessorImpl (NativeConstructorAccessorImpl.java:-2)
...
Caused by: Exception: java.net.ConnectException Message: 拒绝连接
Stack trace:
         at  sun.nio.ch.SocketChannelImpl (SocketChannelImpl.java:-2)
...

 在$HADOOP_HOME/etc/hadoop/core-site.xml 检查默认端口为 9000,重新修改连到HDFS的Link配置,重新执行job,问题解决。

 

待续...

 

 

 

 

分享到:
评论

相关推荐

    sqoop导出数据到mysql故障处理---完整检查日志方法总结.txt

    sqoop问题处理通用办法,首先详细描绘了一个sqoop实际问题得处理过程,然后延申到完整得hadoop日志得处理过程。非常具体实用。

    sqoop-1.4.7.zip

    运行Sqoop报错:找不到或无法加载主类 org.apache.sqoop.sqoop 将sqoop-1.4.7.jar包放到Sqoop的lib目录下,问题解决。

    sqoop-1.4.6.jar

    sqoop-1.4.6.jar,sqoop报错找不到加载类的时候 将该文件放入sqoop的lib文件夹下

    sqoop安装详解以及sqoop介绍

    sqoop安装详解以及sqoop内容介绍使用介绍 集群介绍 sqoop:是一个工具,主要用于导入导出,实现MySQL到Hadoop之间数据的转换 2、导入数据:从结构化数据(Mysql,oracle,db2,)导入到半结构化或非结构化hadoop中...

    sqoop connect sqlserver driver

    sqoop连接sqlserver的驱动工具,没有这个sqoop是连不上滴

    Sqoop集群搭建.

    Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.Sqoop集群搭建.

    Sqoop安装与使用

    Sqoop即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce并行特点以批处理的方式加快数据传输

    实战Sqoop数据导入及大数据用户行为案例分析

    实战Sqoop数据导入及大数据用户行为案例分析(全套视频+代码+工具+课件讲义) 内容包括: 01_CDH版本框架的介绍 02_CDH版本框架的环境部署 03_Sqoop的介绍及其实现原理 04_Sqoop的安装部署及连接测试 05_Sqoop将...

    sqoop常用命令.xlsx

    sqoop的常用指令操作

    sqoop重编译版本,解决了联合主键的同步问题

    原生的sqoop在迁移联合主键的表至hive时,只能识别一个主键,导致数据覆盖。本资源是把sqoop的源码按照官方推荐的issue解决方案重新编译后的版本。sqoop-1.4.7.bin__hadoop-2.6.0-2020....大家在遇到问题也需要耐心些。

    sqoop-1.4.6.jar.zip

    sqoop框架开发工具使用的jar sqoop-1.4.6.jar 手动安装到maven <groupId>org.apache.sqoop <artifactId>sqoop <version>1.4.6 </dependency>

    sqoop使用.txt

    sqoop数据导出工具

    Sqoop学习文档(1){Sqoop基本概念、Sqoop的安装配置}.docx

    Sqoop学习文档(1){Sqoop基本概念、Sqoop的安装配置}。记录我的学习之旅,每份文档倾心倾力,带我成我大牛,回头观望满脸笑意,望大家多多给予意见,有问题或错误,请联系 我将及时改正;借鉴文章标明出处,谢谢

    sqoop1.46和1.47

    sqoop框架开发工具使用的jar,目前版本有1.4.6和1.4.7两个jar包,启动Sqoop时,抛出异常:Error: Could not find or load main class .usr.local.sqoop-1.4.7.sqoop-1.4.7.jar 则可以下载资源将sqoop-1.4.7.jar放到...

    eclipse-sqoop.

    利用eclipse开发工具 远程调试sqoop一些相关问题描述。

    sqoop安装与使用

    hadoop中的sqoop安装与使用

    sqoop-1.4.6-cdh5.13.2.tar

    mv /usr/local/sqoop-1.4.6-cdh5.13.2/conf/sqoop-env.template.sh /usr/local/sqoop-1.4.6-cdh5.13.2/conf/sqoop-env.sh vi /usr/local/sqoop-1.4.6-cdh5.13.2/conf/sqoop-env.sh export HADOOP_COMMON_HOME=/usr/...

    sqoop2的安装包

    sqoop2安装包。

    sqoop常用命令文件

    sqoop常用命令文件

    sqoop技术分享.ppt

    sqoop技术分享.ppt

Global site tag (gtag.js) - Google Analytics