Spidr是一个Ruby的网页爬虫库,可以将整个网站、多个网站、某个链接完全抓取到本地。
安装方法:sudogeminstallspidr
代码示例:
Spidr.start_at('https://tenderlovemaking.com/')Spidr.site('https://rubyinside.org/')do|spider|spider.every_url{|url|putsurl}endSpidr是一个Ruby的网页爬虫库,可以将整个网站、多个网站、某个链接完全抓取到本地。
安装方法:sudogeminstallspidr
代码示例:
Spidr.start_at('https://tenderlovemaking.com/')Spidr.site('https://rubyinside.org/')do|spider|spider.every_url{|url|putsurl}end
评论