`
Eric_2007
  • 浏览: 24448 次
  • 性别: Icon_minigender_1
  • 来自: 辽宁
社区版块
存档分类
最新评论

Heritrix1.14.1在Eclipse下的配置总结(续)

    博客分类:
  • Java
阅读更多

前面做了一个Heritrix1.14.1在Eclipse下的配置总结,那种配置方法虽然可以在Eclipse把Heritrix运行起来,但是存在在WUI下建立JOB时,存在“Modules界面不能改变选择项”的问题。
  因此又试了一下,如果能够按以下方法配置,即可正常启动,并且不再发生上面提到的问题。简要说明如下:
  1、下载heritrix-1.14.1-src.zip和heritrix-1.14.1.zip两个压缩包,并解压,以后分别简称SRC包和ZIP包;
  2、在Eclipse下新建Java项目,取名Heritrix.1.14.1;
  3、复制SRC包下面src/java文件夹下org和st两个文件夹到项目中的src包下;
  4、复制SRC包下src下conf文件夹到项目根目录;
  5、复制SRC包下lib文件夹到项目根目录;
  6、复制ZIP包下webapps文件夹到项目根目录;
  7、修改项目下conf下heritrix.properties文件(修改内容同前)
  8、在项目上右键选择构建路径->配置构建路径->库选项卡->添加Jar,将lib目录下的所有.jar文件选中,点击完成!
  9、在项目/src/org.archive.crawler包下Heritrix.java上点击右键选运行方式->运行->java应用程序->命名为Heritrix->类路径选项卡->高级->添加文件夹->选择项目下conf文件夹,最后点击运行
  运行后控制台信息如下:

10:47:59.929 EVENT  Starting Jetty/4.2.23
10:48:00.054 WARN!! Delete existing temp dir C:\DOCUME~1\ycf\LOCALS~1\Temp\Jetty_127_0_0_1_8088__ for WebApplicationContext[/,jar:file:/E:/projects/eclipse_workspace/HERITRIX1.14.1b/webapps/admin.war!/]
10:48:00.398 EVENT  Started WebApplicationContext[/,Heritrix Console]
10:48:01.163 EVENT  Started SocketListener on 127.0.0.1:8088
10:48:01.163 EVENT  Started org.mortbay.jetty.Server@1f6f0bf
Heritrix version: 1.14.1

  heritrix.properties

##############################################################################
# HERITRIX PROPERTIES
##############################################################################

# Properties with prefixes 'heritrix.', 'org.archive.', or 'system.' prefix 
# get copied into System.properties on startup so available via 
# System.getProperties. (For 'system.' properties, that prefix is stripped.
# (See Heritrix.loadProperties()). 

# Version is filled in by the maven.xml pregoal. It copies here the project
# currentVersion property.
heritrix.version = 1.14.1

# Location of the heritrix jobs directory.
heritrix.jobsdir = jobs

# Default commandline startup values.
# Below values are used if unspecified on the command line.
heritrix.cmdline.admin = admin:admin
heritrix.cmdline.port = 8088
heritrix.cmdline.run = false
heritrix.cmdline.nowui = false
heritrix.cmdline.order =
heritrix.cmdline.jmxserver = false
heritrix.cmdline.jmxserver.port = 8081

##############################################################################
# LOGGING
##############################################################################
 

  在浏览器地址栏输入:http://127.0.0.1:8088/即可登录WUI,输入用户名:admin密码:admin,即可登录设置抓取任务。

 

 

分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics