`
kanpiaoxue
  • 浏览: 1753804 次
  • 性别: Icon_minigender_1
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

hadoop classpath

 
阅读更多

 

参考地址: https://mapr.com/docs/61/ReferenceGuide/hadoop-classpath.html

 

$hadoop classpath
/opt/mapr/hadoop/hadoop-2.7.0/etc/hadoop:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoop/common/lib/
*:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoop/common/*:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoo
p/hdfs:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoop/hdfs/lib/*:/opt/mapr/hadoop/hadoop-2.7.0/shar
e/hadoop/hdfs/*:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoop/yarn/lib/*:/opt/mapr/hadoop/hadoop-2
.7.0/share/hadoop/yarn/*:/opt/mapr/hadoop/hadoop-2.7.0/share/hadoop/mapreduce/lib/*:/opt/mapr/h
adoop/hadoop-2.7.0/share/hadoop/mapreduce/*:/contrib/capacity-scheduler/*.jar:/opt/mapr/lib/kvs
tore*.jar:/opt/mapr/lib/libprotodefs*.jar:/opt/mapr/lib/baseutils*.jar:/opt/mapr/lib/maprutil*.
jar:/opt/mapr/lib/json-20080701.jar:/opt/mapr/lib/flexjson-2.1.jar

 

分享到:
评论

相关推荐

    spark-2.4.5-bin-without-hadoop.tgz

    spark-2.4.5-bin-without-hadoop.tgz spark最新已编译好的包,...export SPARK_DIST_CLASSPATH=$(hadoop --config /opt/bigdata/hadoop-2.9.2/etc/hadoop classpath) export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop

    Analysis-of-Stock-Market-using-Hadoop-Map-Reduce:使用Hadoop Map Reduce分析股票市场

    导出HADOOP_CLASSPATH = $(hadoop classpath) 回声$ HADOOP_CLASSPATH 在HDFS中创建和删除文件夹 hadoop fs -mkdir / WordCountTutorial hadoop fs -mkdir / WordCountTutorial /输入 hadoop dfs -rmr -skip...

    hadoop-findaverage

    export HADOOP_CLASSPATH=$(/usr/bin/hadoop classpath) mkdir target cd target javac -classpath ${HADOOP_CLASSPATH} ../CustomAverageTuple.java jar cf findaverage-1.0-SNAPSHOT.jar *.class cd ../ ...

    java笔试题算法-hadoop-s3a:适用于Hadoop的AWSSDK支持的文件系统驱动程序

    java笔试题算法请注意:此文件系统现在包含在 Hadoop 2.6 版本中。 这里的代码不再维护。 可在以下位置找到更多信息: 适用于 Hadoop ...Hadoop ...hadoop ...目录(运行“hadoop classpath”以找到合适的 li

    crystalball:在 Apache Hadoop MapReduce 中实现的朴素贝叶斯文本分类器

    CrystalBall - Apache Hadoop MapReduce 中的朴素贝叶斯文本分类器 创建者:徐敏 日期:2015年6月1日 如何使用该程序 构建程序 ./build.sh 将在bin/创建一个 jar ... java -cp bin/crystal.jar:$(hadoop classpath) \

    data-science-project:数据科学课程小组项目

    要知道它应该具有的值: $ hadoop classpath然后,您可以从根目录开始按如下所示编译您的(和其他)UDF: $ cd trunk$ javac -cp pig.jar:$HADOOP_CLASSPATH ../udfs/udf1.java ../udfs/udf2.java$ cd .

    hadoop-lzo-0.4.20-SNAPSHOT.jar

    编译后的hadoop-lzo源码,将hadoop-lzo-0.4.21-SNAPSHOT.jar放到hadoop的classpath下 如${HADOOP_HOME}/share/hadoop/common。hadoop才能正确支持lzo,免去编译的烦恼

    kylin-engine-flink-3.1.1-SNAPSHOT.jar

    kylin 3.1.0源码中kylin-engine-flink编译,已修改hadoopClasspathEnv = "`hadoop classpath`",编译完成后,作为测试flink引擎使用。个人认为这个变量设置的有问题,所以自己改一下,自用。

    hadoop1.1.2 eclipse 插件

    在用eclipse 搭建hadoop插件时,apache不会提供插件,插件必须自己编译并且声称jar包。 1、将hadoop-1.1.2.tar.gz解压。比如:D:\hadoop-1.1.2。 2、进入D:\hadoop-1.1.2\src\contrib目录。将build-contrib.xml...

    hadoop安装

    1.a1 192.168.9.1 (master) a2 192.168.9.2 (slave1) a3 192.168.9.3 (slave2) 修改/etc/hosts 2.3台机器 创建hadoop 用户 ...[hadoop@a1 hadoop-0.20.2-cdh3u5]$ bin/hadoop dfsadmin -report

    Hadoop hbase hive sqoop集群环境安装配置及使用文档

    export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 1.2 Hostname 设置 在三个服务器上分别设置 hostname。例如: 192.168.3.197:/etc/sysconfig/network: NETWORKING=yes NETWORKING_IPV6=yes...

    hadoop-core-0.20.2-cdh3u3.jar

    export CLASSPATH="$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:${HADOOP_HOME}/lib/commons-logging-1.0.4.jar:${HADOOP_HOME}/lib/guava-r09-jarjar.jar:${HADOOP_HOME}/hadoop-core-0.20.2-cdh3u3.jar:/usr/...

    第6集-Hadoop环境搭建 - linux(centos7) - 安装配置hbase1.3.6.pdf

    export HBASE_CLASSPATH=/home/hadoop/hbase-1.3.6/conf #HBASE_HOME export HBASE_HOME=/home/hadoop/hbase-1.3.6 #HADOOP_HOME export HADOOP_HOME=/home/hadoop/hadoop-2.7.7 #set hbase heap size export ...

    hadoop-eclipse-plugin-1.1.2.jar

    hadoop 1.1.2 的eclipse 插件 经测试可用 如不可用 可以参考如下自行编译 首先将 ${HADOOP_HOME}\src\contrib 下面的 build-contrib.xml 复制到 ${HADOOP_HOME}\src\contrib\eclipse-plugin 下面 然后修改 build-...

    flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar

    Flink-1.11.2与Hadoop3集成JAR包,放到flink安装包的lib目录下,可以避免Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/dependencies.这个报错,实现...

    GraphiteMetrics2:与metrics2一起使用的石墨的hadoop上下文包

    在您的 hadoop-env.sh 文件(通常在 /etc/hadoop/conf/ 中)中,将 GraphiteContext.jar 文件的位置添加到 HADOOP_CLASSPATH 示例:export HADOOP_CLASSPATH="/[path_to]/GraphiteMaven-1.1-SNAPSHOT.jar 配置: ...

    第3集-Hadoop环境搭建 - linux(centos7) - 安装配置hadoop2.7.7.pdf

    export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar ``` 2. 配置hadoop-env.sh文件:在hadoop-env.sh文件中添加以下内容: ``` export JAVA_HOME=/home/hadoop/jdk1.8.0_161 export HADOOP_HOME=/...

    Ubuntu_Hadoop分布部署.docx

    HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE, HADOOP_YARN_HOME,HADOOP_MAPRED_HOME 6. 配置环境变量。在`.bashrc`文件中,添加以下配置:`export JAVA_HOME=/usr/lib/jvm/jdk-15.0.2`和`export HADOOP_HOME...

    第2集-Hadoop环境搭建 - linux(centos7) - 安装配置jdk1.8.pdf

    export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar ``` 然后,我们可以使用 `sudo /etc/profile` 命令来使配置文件生效。 四、验证 JDK 版本 最后,我们可以使用 `java -version` 命令来验证 ...

    Ubuntu_Hadoop部署笔记

    CLASSPATH=./:/usr/lib/jvm/java-6-openjdk/lib JAVA_HOME=/usr/lib/jvm/java-6-openjdk PATH添加::/usr/lib/jvm/java-6-openjdk 二、新增hadoop用户 命令:sudo addgroup hadoop1001 sudo adduser --ingroup ...

Global site tag (gtag.js) - Google Analytics