本文讲解如何在windows下使用maven编译,以及如何在windows下执行
1、下载 flume 的源文件,地址:http://www.apache.org/dyn/closer.cgi/flume/1.5.0.1/apache-flume-1.5.0.1-src.tar.gz
2、本地安装maven环境
3、切换到源文件路径下执行:mvn clean
mvn package -DskipTests // -DskipTests 使编译跳过测试,不然会报错
4、提示编译成功后,会在*\flume-ng-dist\target 目录下产生文件:apache-flume-1.5.0.1-bin、 apache-flume-1.5.0.1-bin.tar.gz、apache-flume-1.5.0.1-src、apache-flume-1.5.0.1-src.tar.gz,apache-flume-1.5.0.1-bin下的文件就可以用了
5、编译后,发现生成的仍然是linux下的脚本,无法再windows下执行,没关系,只要自己加上windows的执行脚本就行了,简单的脚本示例如下:
rem flume 1.5 . 0.1 windows script.
set FLUME_HOME=D:\java\apache-flume- 1.5 . 0.1 -bin
set JAVA= "D:\java\JDK6_2\bin\java.exe"
set JAVA_OPTS=-Xmx60m
set CONF=%FLUME_HOME%\conf\kafka.properties
set AGENT=kafka
%JAVA% %JAVA_OPTS% -Dlog4j.configuration=file:
|
6、可能遇到的问题:
[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin: 2 .
3.2 :testCompile ( default -testCompile) on project flume-ng-elasticsearch-sink: Co
mpilation failure
[ERROR] Failure executing javac, but could not parse the error:
[ERROR]
[ERROR]
[ERROR] 系统资源不足。
[ERROR] 有关详细信息, 请参阅以下堆栈跟踪。
[ERROR] java.lang.OutOfMemoryError: PermGen space
[ERROR] at java.lang.ClassLoader.defineClass1(Native Method)
[ERROR] at java.lang.ClassLoader.defineClass(ClassLoader.java: 791 )
[ERROR] at java.security.SecureClassLoader.defineClass(SecureClassLoader.java: 14
2 )
……
|
当Maven项目很大时,maven运行需要很大的内存,在默认配置下,就可能遇到java的堆溢出,这时指定分配内存大小
windows环境下:找到maven目录\bin\mvn.bat文件,编辑,在行
@REM set MAVEN_OPTS=-Xdebug -Xnoagent -Djava.compiler=NONE... 下设置
set MAVEN_OPTS= -Xms512m -Xmx1024m -XX:PermSize=256m -XX:MaxPermSize=512m
linux环境下:设置环境变量,编辑/etc/profile 增加
export MAVEN_OPTS=-Xmx512m
[ERROR] Failed to execute goal on project flume-ng-morphline-solr-sink: Could no
t resolve dependencies for project org.apache.flume.flume-ng-sinks:flume-ng-morp
hline-solr-sink:jar: 1.5 . 0.1 : The following artifacts could not be resolved: net.
sf.saxon:Saxon-HE:jar: 9.5 . 1 - 4 , ua_parser:ua-parser:jar: 1.3 . 0 : Could not transfer
artifact net.sf.saxon:Saxon-HE:jar: 9.5 . 1 - 4 from/to nexus (http:
exus/content/groups/ public ): Error transferring file: Server returned HTTP respo
nse code: 502 for URL: http:
xon/Saxon-HE/ 9.5 . 1 - 4 /Saxon-HE- 9.5 . 1 - 4 .jar -> [Help 1 ]
[ERROR]
[ERROR] To see the full stack trace of the errors, re-run Maven with the -e swit
ch.
[ERROR] Re-run Maven using the -X switch to enable full debug logging.
[ERROR]
[ERROR] For more information about the errors and possible solutions, please rea
d the following articles:
[ERROR] [Help 1 ] http:
lutionException
[ERROR]
[ERROR] After correcting the problems, you can resume the build with the command
[ERROR] mvn <goals> -rf :flume-ng-morphline-solr-sink
……
|
这个包比较大,重试几把就行了
[ERROR] Failed to execute goal on project flume-ng-morphline-solr-sink: Could no
t resolve dependencies for project org.apache.flume.flume-ng-sinks:flume-ng-morp
hline-solr-sink:jar: 1.5 . 0.1 : Failure to find ua_parser:ua-parser:jar: 1.3 . 0 in ht
tp:
, resolution will not be reattempted until the update interval of nexus has elap
sed or updates are forced -> [Help 1 ]
org.apache.maven.lifecycle.LifecycleExecutionException: Failed to execute goal o
n project flume-ng-morphline-solr-sink: Could not resolve dependencies for proje
ct org.apache.flume.flume-ng-sinks:flume-ng-morphline-solr-sink:jar: 1.5 . 0.1 : Fai
lure to find ua_parser:ua-parser:jar: 1.3 . 0 in http:
groups/ public was cached in the local repository, resolution will not be reattem
pted until the update interval of nexus has elapsed or updates are forced
at org.apache.maven.lifecycle.internal.LifecycleDependencyResolver.getDe
pendencies(LifecycleDependencyResolver.java: 196 )
at org.apache.maven.lifecycle.internal.LifecycleDependencyResolver.resol
veProjectDependencies(LifecycleDependencyResolver.java: 108 )
at org.apache.maven.lifecycle.internal.MojoExecutor.ensureDependenciesAr
eResolved(MojoExecutor.java: 258 )
……
|
这个问题搞了好一会,试了几种方法,没搞定。
发现它是对flume-ng-morphline-solr-sink的编译,需要依赖 ua_parser:ua-parser:jar:1.3.0,变通一点,先绕过它再说,在*\apache-flume-1.5.0.1-src\flume-ng-sinks\pom.xml 中,
注释掉 <module>flume-ng-morphline-solr-sink</module>,最后可以愉快的看到 [INFO] BUILD SUCCESS 啦
分享到:
相关推荐
flume 1.8所有源代码 编译通过版 附 maven3.5.2 安装包 解压配置maven,利用命令行进行编译,导入eclipse,可用于源代码查看,搭建flume远程测试环境
通过maven项目中的pom文件进行编译jar包。资源包包括maven3 和编译所需工具。
elasticsearch-6.4.2 IK6.4.2 plugin; maven编译后的,解压即可使用
Windows 下Nexus搭建Maven私服 Windows 下Nexus搭建Maven私服
Storm编程实践(安装Maven-使用Maven编译运行代码-mvn 打包)
Windows下maven安装包 Windows下maven安装包 Windows下maven安装包
eclipse 中编译、运行都正常,但是如果用maven的打包命令 mvn clean package 进行打包时会发现有类型错误
Maven多模块项目编译速度慢,下面我们来学习下优化的方法。 mvn clean package -T 4C -Dmaven.test.skip=true -Dmaven.compile.fork=true -T 4C 代表本机4个CPU内核都参与编译工程, -Dmaven.test.skip=true 代表...
jenkins和maven配置自动编译打包和发布java项目
主要介绍了解决idea使用maven编译正常但是运行项目时却提示很多jar包找不到的问题,本文分多种情形给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
最新版windows apache-maven-3.8.3-bin.zip最新版windows apache-maven-3.8.3-bin.zip
Linux环境下maven编译好的RocketMQ最新版本4.3.0;centos_64+maven-3.2.5+jdk-1.8
主要介绍了使用maven编译Java项目实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,,需要的朋友可以参考下
maven编译bindead资源
之前用maven开发,每修改一次代码都需要重新编译发布一次,于是后面我用了jrebel实现热编译,这样开发就方便了很多,后面开发都只需要编译一次,有代码或者页面改动,都会自动去编译,不用maven再重新编译发布一次,...
基于centos6.7 64bit系统上进行Hadoop2.7.1版本的编译,截至目前(2016年01月04号)apache hadoop2.7.1是官方最新release版本。
Maven是一个采用纯Java编写的开源项目管理工具。Maven是很重要的,我们可以对我们所编写的代码进行预编译。
Apache Maven是一套软件工程管理和整合工具。基于工程对象模型(POM)的概念,通过一个中央信息管理模块,Maven能够管理项目的构建、报告和文档
mondrian默认采用ant build,这里的war项目采用maven编译,可以直接在eclipse里运行
自己学习并应用Spark一段时间后,由于需要改源代码,就研究了下怎么编译源码,成功编译后,记录下了编译...另外编译使用的工具可以是maven,也可以是sbt,我都研究过了,两种编译方法都予以描述,可根据自身喜好选用。