没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
[RubyRetriever](http://softwarebyjoe.com/rubyretriever/)乔·诺顿(Joe Norton)RubyRetriever是一个Web爬网程序,抓取器和文件收集器。 可作为命令行可执行文件和爬网框架使用。 RubyRetriever(RR)使用[RubyRetriever](http://softwarebyjoe.com/rubyretriever/)作者:乔·诺顿(Ruby) 可作为命令行可执行文件和爬网框架使用。 RubyRetriever(RR)通过Eventmachine和Synchrony使用异步HTTP请求来非常快速地爬网网页。 RR还使用Bloomfilter的Ruby实现来跟踪它已经以内存有效方式进行爬网的页面。 v1.4.3更新(3/24/2016)-修复了fi的问题
资源推荐
资源详情
资源评论
收起资源包目录
rubyretriever-master.zip (28个子文件)
rubyretriever-master
.gitignore 887B
.rspec 26B
bin
rr 2KB
.travis.yml 137B
LICENSE 1KB
spec
link_spec.rb 2KB
retriever_spec.rb 2KB
spec_helper.rb 734B
page_spec.rb 3KB
target_spec.rb 1KB
rubyretriever.gemspec 2KB
lib
retriever.rb 350B
retriever
target.rb 1KB
page_iterator.rb 748B
fetchfiles.rb 2KB
cli.rb 713B
fetchsitemap.rb 1KB
fetch.rb 8KB
openuri_redirect_patch.rb 267B
fetchseo.rb 467B
version.rb 43B
page.rb 3KB
link.rb 1KB
core_ext.rb 237B
readme.md 7KB
Gemfile 38B
Rakefile 143B
Gemfile.lock 1KB
共 28 条
- 1
资源评论
韦先波
- 粉丝: 72
- 资源: 4678
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 藏区特产销售平台源代码+论文+毕业设计.zip
- B297C8EC5A69641DB3E681E1B3F894E5.mp4
- PrimitivesPro v2.2.unitypackage
- 财务管理系统源代码+论文.zip
- 高级信息通信运行管理员第七套试卷
- UModeler v2.11.6 (May 10, 2024).unitypackage
- 基于Selenium的Java爬虫实战(内含谷歌浏览器Chrom和Chromedriver版本127.0.6486.0)
- 基于FPGA的CORDIC算法旋转模式实现
- bilibili视频解析下载源码
- 基于Selenium的Java爬虫实战(内含谷歌浏览器Chrom和Chromedriver版本124.0.6367.60)
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功