`
cloudeagle_bupt
  • 浏览: 540443 次
文章分类
社区版块
存档分类
最新评论

Hive 安装出现的问题

 
阅读更多
Exception in thread "Thread-18" java.lang.IllegalArgumentException: Does not contain a valid host:port authority: local
at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:206)
at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:158)
at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:147)
at org.apache.hadoop.hive.ql.exec.JobTrackerURLResolver.getURL(JobTrackerURLResolver.java:42)
at org.apache.hadoop.hive.ql.exec.JobDebugger.showJobFailDebugInfo(JobDebugger.java:209)
at org.apache.hadoop.hive.ql.exec.JobDebugger.run(JobDebugger.java:92)
at java.lang.Thread.run(Thread.java:722)

Execution failed with exit status: 2


http://taoo.iteye.com/blog/1678993 这里给出了原因,参考:http://grokbase.com/p/cloudera/cdh-user/126wqvfwyt/hive-refuses-to-work-with-yarn

这里摘要下:


链接中的解释很清楚

引用

There are actually two failures here:

1) The MR job that Hive launched on your cluster failed for some reason. I
can't determine why based on the information provided. I recommend trying
to locate the task logs for the failed tasks on the cluster.

2) When a job fails Hive attempts to automatically retrieve the task logs
from the JobTracker's TaskLogServlet. This service doesn't exist in MR2,
which is why Hive is throwing an exception (either because
mapred.job.tracker is undefined, or because it can't find the
TaskLogServlet service running on the machine that mapred.job.tracker
points to). This is a known issue and one that we plan to address in the
next release of CDH.


解决方法也很详细,就是在hive-site.xml中添加设置,
引用

In the meantime I recommend doing the following if you need to run Hive on
MR2:
* Keep Hive happy by setting mapred.job.tracker to a bogus value.
* Disable task log retrieval by setting
hive.exec.show.job.failure.debug.info=false

So 我的解决方法:

添加到 hive-site.xml

<property>
<name>mapreduce.jobtracker.address</name>
<value>ignorethis</value>
</property>

并重启 hive-server.


分享到:
评论

相关推荐

    hivesql语句练习

    如果出现没有权限的问题,在mysql授权(在安装mysql的机器上执行) mysql -uroot -p #(执行下面的语句 *.*:所有库下的所有表 %:任何IP地址或主机都可以连接) GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' ...

    ranger-2.0.0-hive-plugin.tar.gz

    由于很多文章都是只有ranger的安装说明,却没有编译后的tar包,而且编译的时间有点长,编译期间会出现各种问题,导致编译不过,特此上传编译后的包,来提供大家下载

    docker-spark-hive-ipython:Spark + Jupyer +蜂巢

    docker-spark-hive-ipython介绍Apache Hive(中继版) Apache Tez 0.5.2 Apache Hadoop 2.5.2 PostgreSQL 9.3(Hive Metastore后端) Apach Spark 1.4.1 朱皮特安装Docker Linux: : Mac: : 安装boot2docker 建议在...

    Hadoop安装学习-入门教程

    Hadoop 安装 学习 入门教程 Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, ...

    textpattern-hive-framework:使用Hive Framework作为支架的Textpattern CMS网站主题模块集合

    用于Textpattern CMS的Hive网站主题框架 使用作为支架的Textpattern CMS网站主题模块的集合。 需要Textpattern CMS版本4.8.4或更高版本。 目前正在开发中-尚未准备好用于生产!支持的网页浏览器Chrome,Edge,Fire...

    R的极客理想:工具篇 带书签扫描版(1/2)

    R的极客理想:工具篇 带书签扫描版(1/2) 目录 封面 -20 书名 -18 版权 -17 前言 -16 目录 -7 第一部分 R基础 1 第1章 R语言基础包 2 1.1 R是最值得学习的编程语言 ... 附录G Hive环境安装 287 附录H HBase安装 290

    R的极客理想:工具篇 带书签扫描版(2/2)

    R的极客理想 工具篇.part2.rar (第二部分)共分两个文件上传 封面 -20 书名 -18 版权 -17 前言 -16 目录 -7 第一部分 R基础 1 第1章 R语言基础包 2 ... 附录G Hive环境安装 287 附录H HBase安装 290

    MySQL5.5及其驱动连接jar包mysql-connector-java-5.1.19

    首先,安装数据库,然后将mysql-connector-java-5.1.21-bin.jar文件拷贝到一个目录下,任意即可,放在MySQL...将其删除,另外,可以在CMD中输入sc delete mysql,出现success即删除成功,所有清理完毕再重新安装即可。

    hadoop安装与配置.pdf

    Hadoop是一个由Apache基金会所开发的分布式系统基础架构,主要用于解决海量数据的存储和海量数据的分析计算问题。其核心组件包括HDFS(Hadoop分布式文件系统,用于存储)、MapReduce(分布式离线计算框架)和YARN...

    hadoop基础教程

    作者: [英] Garry Turkington 出版社: 人民邮电出版社Hadoop和云服务出现的历史背景,以及何时适用Hadoop的背景知识, 安装并配置Hadoop集群的最佳方式,根据手头的问题调整系统配置, 用Java和Ru by示例程序讲解如何...

    Mysql 5.7.19 winx64 ZIP Archive 安装及使用过程问题小结

    今天学着安装了MySQL,过程出现了一些问题,查看几个相关文章后解决了,记录下来供大家参考。 1.下载  https://dev.mysql.com/downloads/mysql/  //www.jb51.net/softs/451120.html  选择适合自己的版本,Archive...

    大数据工程师学习计划.pdf

    以上⼤致就把整个⼤数据⽣态⾥⾯⽤到的⼯具所解决的问题列举了⼀遍,知道了他们为什么⽽出现或者说出现是为了解决什么问题,进⾏学 习的时候就有的放⽮了。 正⽂ ⼀、⼤数据相关⼯作介绍 ⼤数据⽅向的⼯作⽬前主要...

    实验一(搭建Android开发环境)-(含友情提醒).doc

    图2-12 ADT的配置 因为国内网络环境的限制,以及google取消对Eclipse的支持,在安装ADT的时候可能会 出现各种问题,此时,可以先提前下载好ADT的安装包,再按照以上步骤导入Eclipse即 可。 ADT 离线安装 最新ADT...

    大数据运维技术第9章 Sqoop组件安装配置.pptx

    当大数据存储和Hadoop生态系统的MapReduce,Hive,HBase等分析器出现时,他们需要一种工具来与关系数据库服务器进行交互,以导入和导出驻留在其中的大数据。Sqoop在Hadoop生态系统中占据一席之地,为关系数据库...

    大数据平台CDH和Impala的使用

    Cloudera版本(Cloudera’sDistributionIncludingApacheHadoop,简称CDH),基于Web的用户界面,支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、HBase、Zookeeper、Sqoop,简化了大数据平台的安装、使用难度...

    大数据工程师部署.docx

    Hadoop生态圈部署 文档包括: Hadoop HA部署 Zookeeper安装 Hive组件部署 Hbase组件部署 Sqoop组件部署 Flume组件部署 spark组件部署 storm组件部署 kafka组件部署 MongoDB部署 可能会出现差错

    TheHiveProject

    在虚拟环境中(使用conda或virtualenv)安装依赖项,以避免出现任何问题。 将pip2或pip3分别用于python2和python3。 ================================================================================== .0: ...

    mysql zip archive 版本(5.7.19)安装教程详细介绍

    3. 理论上现在这样就可以直接安装服务了,但是因为是默认配置,我们使用的时候会出现很多问题。比如里面的汉字全是乱码之类的,所以建议先配置一下默认文件。在解压的mysql目录下,新建个my.ini,//在根目录新建my....

    大数据:基于Docker离线部署2.7.4版本ambari及启用kerberos安全认证(物理机同理)

    1.离线部署ambari 2.7.4及HDP大数据组件服务(提供离线wangpan资源) ...4.支持HDFS、Spark、Yarn、MapReduce、Hive、Pig、 HBase、Zookeeper、Sqoop和Hcatalog等 5.很详细的文档,包括各种可能出现的Bug

    大数据技术概述.pdf

    Ambari⾃动化的安装部署配置管理Hadoop集群的。Zookeeper分布式协作服务,选管家等,专门做分布 式协调⼀致性⼯作。HBase实时性计算,分布式数据库。Flume⽇志采集,Sqoop数据库ETL(抽取、转换、加载),完成Hadoop...

Global site tag (gtag.js) - Google Analytics