设为首页 收藏本站
查看: 615|回复: 0

[经验分享] Nutch1.0 Ui启动在tomcat中的配置

[复制链接]

尚未签到

发表于 2017-2-4 08:21:40 | 显示全部楼层 |阅读模式
  <!--@page { margin: 2cm }P { margin-bottom: 0.21cm }A:link { so-language: zxx }-->
1、下载nutch-1.0.tar.gz.http://apache.etoak.com/lucene/nutch/
2、解压缩nutch-1.0.tar.gz,放在自己熟悉的目录下面,比如workspace.
3、解压完后会有一个目录:webapps.这个目录是hadoop自己所对应的页面。
   datanodehdfsjobsecondarystatictask
4、下载tomcat5.5版本以上的都行,然后进行配置。Sudogedit /etc/profile  配置你的JAVA_HOMETOMCAT_HOME.
5、打开tomcatconf/server.xml。配置一个虚拟的目录
    <Contextpath="/crawl"docBase="/home/user/tools/nutch-1.0/webapps/task/"reloadable="true" debug="0"/>
6、在task的目录下面就可有写jsp页面了。在task下有一个WEB-INF.在它下面建立一个classes文件夹。这里面主要放的是.classlib.
7nutch所编译生成的.class文件和所需要的lib都要拷贝到/WEB-INF/classes/.
8、最主要的是在nutch1.0的目录下面有一个plugins。这个也要放在/WEB-INF/classes/.
9、同时拷贝完了还不行,因为还没有做一些其它的相应配置:
     <a>hadoop-env.sh改变JAVA_HOME.
     <b>crawl-urlfilter.txt改变抓取的URL.
     <c>regex-urlfilter.txt屏蔽URL的后缀.
    <d>:所拷贝的plugins文件目录需和nutch-default.xml放在同一目录下面,如果不是需要改变nutch-default.xml中配置plugin的路径。
             要不然会报plugin.flodersnot find等错误。
10、因为我们是在页面来启动nutch的,当然nutch所抓取的页面得有存放位置。目前我是放在/tomcat/bin/: 在这个目录下面我建立了
      myUrls---- > url.txt -----> http://www.163.com/
      crawl: 存放抓取完后页面存放路径。
11、页面的部分就很简单了。两个输入框: depttopN.如果想加thread,也可以。然后就是提交。可以是一个jsp也可以是一个servlet.(注意要把所编译的.class文件放到/WEB-INF/classes/).
12、打开浏览器启动下试试。不报错说明它已经启动了,或者是去tomcat/bin/crawl/看看有没有东东。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-337175-1-1.html 上篇帖子: Intellij Idea8.1+tomcat+修改类不重启服务器 下篇帖子: 令人十分怨念的tomcat注册成windows服务
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表