下载pig的安装文件:
http://mirrors.cnnic.cn/apache/pig/pig-0.12.1/pig-0.12.1.tar.gz
安装:
tar -zxvf pig-0.12.1.tar.gz
重命名:
mv pig-0.12.1 pig0.12
配置环境变量:
在cetos下 .bashrc
#add for pig0.12
export PIG_HOME=/opt/program/pig0.12
export PATH=$PIG_HOME/bin:$PATH
#hadoop2.0以上版本
export PIG_HADOOP_VERSION=23
配置PIG_CLASSPATH变量:
PIG_CLASSPATH=$HADOOP_PATH/etc/hadoop
export PIG_CLASSPATH
配置hadoop的job和mapreduce路径:
vi /opt/program/pig0.12/conf/pig.properties
fs.defaultFS=hdfs://localhost:9000
mapred.job.tracker=hdfs://localhost:9001
本地测试:
pig -x local
hadoop模式:
pig -x mapreduce
ls /
- 大小: 23 KB
分享到:
相关推荐
用于Pig脚本的基于Node.js的单元测试(以及尝试Hadoop简便方法)。 概述 该模块使用node.js和Mocha作为的单元测试框架。 猪的单元测试定义为.pu文件,用于描述特定猪脚本的输入字符串和预期的输出字符串。 由于Pig...
尝试在 PIG 中测试自定义加载程序有点困难...... 我能够通过简单地尝试从 pig 运行现有的单元测试而不修改代码来重现我面临的问题。 所以我做了什么: 创建一个非常简单的 pom.xml 下载并将其放在正确的目录中。...
"hadoop安装与配置及mapreduce测试网站" Hadoop 是一个易于安装易于使用的系统,他既适用于云计算的新人学习,也适用于对云计算已经有一定研究的人深入学习(包括网格计算,并行计算等等)。Hadoop 源于 Nutch,...
Programming Pig Dataflow Scripting with Hadoop(2nd) 英文无水印转化版pdf 第2版 pdf所有页面使用FoxitReader、PDF-XChangeViewer、SumatraPDF和Firefox测试都可以打开 本资源转载自网络,如有侵权,请联系...
Apache Pig 带有自己的测试框架 PigUnit。 尽管该框架为基本 Pig 测试提供了足够的功能,但它缺乏一些基本功能,例如: 能够测试具有多个输入的场景 以更模糊的方式断言输出。 它必须完全匹配 无法在脚本中放置 ...
目标是学习 Apache(大)数据库框架 - Hadoop、Pig、Hive、Hbase 描述 目前在 2 个数据集上有 3 个项目: 百万歌曲数据集 Most_Popular_Genres :使用非常简单的流派识别(Apache Hive 与 Apache Pig)确定“21 ...
描述:pigLatin() 测试:“它将在以元音开头的单词的末尾添加'way'。” (A,E,I,O,U)代码:pigLatin(“ a”); 预期输出:“离开” 测试:“如果输入的单词以vowell开头,它将返回true”代码:pigLatin(“ ...
单元测试 UDF。 加载到猪脚本中。 如何编写一个猪脚本 使用外部编写的 Loader ( ) 尝试通过以下方式保持猪脚本尽可能干净 使用属性文件。 只加载它真正需要的 JAR 文件。 将您的 Pig 项目与所有必需的依赖项...
弃用通知不再积极维护该gem,我建议改用以下替代方法:样本输出安装将此行添加到您的应用程序的Gemfile中: group :test do gem 'pig-ci-rails'end 然后执行: $ bundle 或将其自己安装为: $ gem install pig-ci-...
设置打开命令终端git clone https://github.com/janicelaset/pig-latin.git cd pig-latin导航到项目目录打开pig-latin.html启动应用程序使用的技术程式语言JavaScript html Web应用程序库jQuery的测试工具和框架柴...
RC一阶电路响应测试-实验,电路原理的实验课,有具体实验过程
ncdc_data.txt是用于pig实例测试的数据,可以参考我的文章Pig实例:测试NCDC天气数据.
ua_parser 猪库 ...现在构建并安装java版本: cd uap-java mvn install 注意:如果出现问题,您可能需要跳过测试 mvn install -DskipTests=true 现在您可以构建 PIG udfs: cd ../uap-pig mvn package
拉丁猪猪拉丁翻译9/08/2015查尔斯·莫斯(Charles Moss)和布莱恩(Brian Borealis)描述用户输入一个单词或句子,然后将其翻译成“ Pig Latin”。演示版在Codepen上观看设置克隆并在浏览器中打开index.html。使用的...
对于 Makerthon,我们构建了一个实时游戏。...安装依赖 npm install 如何运行测试 cd pig-pong make all 如何在本地运行 node server.js 访问 贡献者 我们是 2014 年 12 月伦敦创客学院的 [Hannah]、[India]、
pig基础学习使用的三篇测试数据:NYSE_dividends、NYSE_daily、baseball
:sparkles: :pig_face: :sparkles: 。 。 目录 你好! 或解析表达语法,使用规则描述一种编程语言。 用人类的话来说,它是用于解析编程语言的。 Peppa PEG是ANSI C中的超轻量级PEG分析器。 警告:Peppa PEG尚未...
用节点测试 前端开发 测试驱动开发 移相器游戏图形 工作清单 创建带有名称条目的主页 与用户和与某种对象的交互创建一个游戏画布。 用户友好的体验 实现两人模式 使用的技术 Javascript 查询 节点 html CSS ...
Savvas Savvides 基于Apache PIG的TPC-H基准测试。 由两个软件包组成: TPC-H DBGEN( ) 适用于Apache PIG的TPC-H( )
豚鼠豚鼠网站用于内部e2e测试