在Hadoop1.2.1分布式集群环境下安装pig0.12
● 前言:
1. 大家最好通读一遍过后,在理解的基础上再按照步骤搭建。
2. 之前写过几篇文章是关于Hadoop家族安装系列的,后续还会有其它内容,敬请期待!
3. 好记性不如烂笔头,最近突然想把自己学习的东西整理出来,一则服务大众,二则以后好查阅。由于水平有限,难免有错误,请多谅解并指正,如有什么问题可以留言咨询。
一、推荐阅读文章
《Hadoop家族安装系列(1)——Hadoop1.2.1分布式安装》
《Hadoop家族安装系列(2)——安装Mahout0.9框架》
二、前提条件
Hadoop1.2.1分布式集群环境搭建成功,并且Hadoop集群服务器正常运行。
三、所需环境与软件
1. Hadoop分布式集群环境:
见《Hadoop家族安装系列(1)——Hadoop1.2.1分布式安装》。
2. Pig0.12: pig-0.12.0.tar.gz
四、安装和配置
1. 下载pig-0.12.0.tar.gz,并使用以下命令解压后,移动到opt目录下。
tar -zxvf pig-0.12.0.tar.gz (解压后文件夹为:pig-0.12.0)
sudo mv pig-0.12.0 /opt/pig-0.12.0
2. 配置环境变量
如(图1)所示,使用命令 sudo gedit /etc/profile 打开文件后,在文件最后面加入:
export PIG_HOME=/opt/pig-0.12.0
export PIG_CLASSPATH=${HADOOP_HOME}/conf
export PATH=${PATH}:${PIG_HOME}/bin
(图1)
备注:最后要使用命令:source /etc/profile 使环境变量立即生效。
五、运行与测试
有二种运行方式:
1. 本地运行
命令: pig -x local
出现如(图2)所示页面,说明本地运行成功。
(图2)
2. 集群运行
(1). 启动hadoop集群,如(图3)所示。
使用命令: start-all.sh 启动hadoop集群。
使用命令: jps 查看是否启动成功。
(图3)
(2). pig集群运行
命令: pig
出现如(图4)所示页面,说明本地运行成功。
(图4)
3. 成功了,虽然很简单,还是高兴一下。
2014年3月9日
相关推荐
Hadoop课程实验和报告——Hadoop安装实验报告
hadoop集群配置之————flume安装配置(详细版)
Hadoop课程实验和报告——MPI安装和测试实验报告
用于生产环境的hadoop2.2.0和hbase0.96.2、hive0.12的集成安装 经过测试环境
hadoop2.2+hbase0.96+hive0.12安装整合详细高可靠文档及经验总结
Hadoop课程实验和报告——Apriori算法并行实现
Hadoop课程实验和报告——K-Means算法并行实现
Hadoop课程实验和报告——Apriori算法并行实现.rar
Hadoop课程实验和报告——每年申请美国专利的国家数统计
Hadoop2.2.0+HBase.96+Hive0.12简单集群环境的搭建
hadoop集群配置之———hive安装与配置(超详细)
Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, ...
「⼤数据⼲货」基于 「⼤数据⼲货」基于Hadoop的⼤数据平台实施 的⼤数据平台实施——整体架构设 整体架构设 计 计 ⼤数据的热度在持续的升温,继云计算之后⼤数据成为⼜⼀⼤众所追捧的新星。我们暂不去讨论⼤数据...
Hadoop、HBase、Hive、Pig、Zookeeper资料整理,欢迎大家下载学习
完整版大数据云计算课程 Hadoop数据分析平台系列课程 Hadoop 08 Pig安装与Pig Latin语言,应用案例 共26页.rar
hadoop家族各种中间件图谱,包含HBase、Hive、Pig、Sqoop、Hadoop、Zookeeper、Mahout、Hue等等
hadoop学习笔记、hadoop的安装、linux上jdk的安装等
Hadoop 家族技能图谱包含Hive和Mahout两个大类
hadoop 2的安装,以及配置。。。
hadoop集群安装详细步骤,支持snappy hadoop 集群安装