查看: 1329|回复: 0

[经验分享] nodejs+mongodb 自动化爬虫系统

尚未签到

发表于 2017-12-16 12:20:26 | 显示全部楼层 |阅读模式

　　nodejs+mongodb 自动化爬虫系统 GitHub地址：https://github.com/boboweiqi93/wenjian/tree/master/nodejs%2Bmongodb
　　这个爬虫系统是基于nodejs+mpngodb的一个凤凰网的爬虫系统，点击链接进入之后，首先fork 到你自己的github上，然后下载到本地，放在你自己本地的node运行环境中，(首先你自己的电脑的安装了mongodb)然后打开控制台，进入到文件所在的文件夹，然后npm install ,下载好需要的包，然后运行go.js 这个文件，我设置的是监听8886端口，然后你打开浏览器，在地址栏输入： localhost:8886 ,就好了，可以看到你的数据，
　　第一次打开的时候，我这个有分页功能，我设置的是默认打开第一页，内容条数为15条，第一次打开时，你的数据库中一定没有那么多数据，所以可能是什么都没有，慢慢的获取一定的时间，就好了，不要着急。
　　如果有什么问题，请联系我，

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表，该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有，请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意，请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息，一经发现立即删除。若您因此触犯法律，一切后果自负，我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集，我们仅提供一个展示、介绍、观摩学习的平台，我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责，亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏，不得用于商业或者其他用途，否则，一切后果均由您自己承担，我们对此不承担任何法律责任
7、如涉及侵犯版权等问题，请您及时通知我们，我们将立即采取措施予以解决
8、联系人Email：admin@iyunv.com 网址：www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址：https://www.yunweiku.com/thread-424680-1-1.html 上篇帖子： mongoDB学习手记2 下篇帖子： MongoDB + express + node + bootstrap 搭建多人博客

使用道具举报