Jedi-Crawler Node/PhantomJS爬虫开源项目

我要开发同款
匿名用户2016年07月27日
36阅读
开发技术JavaScript
所属分类应用工具、网络爬虫
授权协议MIT

作品详情

Jedi-Crawler是一款轻量级 Node/PhantomJS爬虫,可以动态的抓取网页内容。

安装:

npm install jedi-crawler

示例代码:

var jedi = require('./modules/jedi.js'),fs = require('fs');/// REGISTER ALL THE PADAWANSvar PADAWANS_DIR = "./padawans/";fs.readdirSync(PADAWANS_DIR).forEach(function(padawan){  require(PADAWANS_DIR + padawan)(jedi);});jedi.crawl('https://en.wikipedia.org/wiki/Montpellier,_France', function(err, data){  console.log(data);});
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论