没有合适的资源?快使用搜索试试~ 我知道了~
webmagic垂直爬虫 v0.7.2
共286个文件
java:227个
xml:16个
html:13个
0 下载量 190 浏览量
2020-09-28
19:40:33
上传
评论
收藏 343KB ZIP 举报
温馨提示
为您提供webmagic垂直爬虫下载,webmagic是一个开源的Java垂直爬虫框架,目标是简化爬虫的开发流程,让开发者专注于逻辑功能的开发。webmagic的核心非常简单,但是覆盖爬虫的整个流程,也是很好的学习爬虫开发的材料。webmagic的主要特色:1、完全模块化的设计,强大的可扩展性。2、核心简单但是涵盖爬虫的全部流程,灵活而强大,也是学习爬虫入门的好材料。3、提供丰富的抽取页面API。4、无配置,但是可通过POJO+注解形
资源推荐
资源详情
资源评论
收起资源包目录
webmagic垂直爬虫 v0.7.2 (286个子文件)
.gitignore 71B
Github.groovy 545B
下载说明.htm 3KB
mock-github.html 112KB
mock-github.html 112KB
mock-webmagic.html 2KB
package.html 149B
package.html 106B
package.html 104B
package.html 96B
package.html 90B
package.html 88B
package.html 73B
package.html 70B
package.html 58B
package.html 56B
config.ini 480B
config.ini 362B
XpathSelectorTest.java 102KB
MockGithubDownloader.java 72KB
ProcessorBenchmark.java 59KB
Spider.java 21KB
PageModelExtractor.java 15KB
HttpClientDownloaderTest.java 13KB
Site.java 10KB
Xpath2Selector.java 7KB
WebDriverPool.java 7KB
ScriptConsole.java 6KB
FileCacheQueueScheduler.java 6KB
Page.java 6KB
HttpClientGenerator.java 6KB
HttpClientDownloader.java 5KB
HttpUriRequestConverter.java 5KB
PageModelExtractorTest.java 5KB
PhantomJSDownloader.java 5KB
MultiPagePipeline.java 4KB
BasicTypeFormatter.java 4KB
Request.java 4KB
HtmlNode.java 4KB
RedisPriorityScheduler.java 4KB
SpiderTest.java 4KB
SpiderMonitor.java 4KB
RedisScheduler.java 4KB
ScriptProcessor.java 4KB
UrlUtils.java 4KB
SeleniumDownloader.java 3KB
ZipCodePageProcessor.java 3KB
OOSpider.java 3KB
AlexanderMcqueenGoodsProcessor.java 3KB
Selectable.java 3KB
ModelPageProcessor.java 3KB
SmartContentSelector.java 3KB
BloomFilterDuplicateRemoverTest.java 3KB
AbstractSelectable.java 3KB
PatternProcessorExample.java 3KB
RegexSelector.java 3KB
Html.java 3KB
ExtractRule.java 3KB
CssSelector.java 3KB
CountableThreadPool.java 3KB
SpiderTest.java 3KB
SimpleHttpClientTest.java 3KB
GithubRepo.java 3KB
ModelPageProcessorTest.java 2KB
News163.java 2KB
HttpRequestBody.java 2KB
SpiderStatus.java 2KB
DoubleKeyMap.java 2KB
ZhihuPageProcessor.java 2KB
QuickStarter.java 2KB
HtmlTest.java 2KB
PriorityScheduler.java 2KB
GithubRepo.java 2KB
CharsetUtils.java 2KB
ComboExtract.java 2KB
JsonPathSelectorTest.java 2KB
DelayQueueScheduler.java 2KB
PlainText.java 2KB
BloomFilterDuplicateRemover.java 2KB
PrioritySchedulerTest.java 2KB
ObjectFormatterBuilder.java 2KB
FilePipeline.java 2KB
ExtractBy.java 2KB
RedisPrioritySchedulerTest.java 2KB
DiaoyuwengProcessor.java 2KB
ScriptProcessorBuilder.java 2KB
CustomRedirectStrategy.java 2KB
GithubRepoApi.java 2KB
DuplicateRemovedSchedulerTest.java 2KB
AmanzonPageProcessor.java 2KB
BaiduBaikePageProcessor.java 2KB
PhantomJSPageProcessor.java 2KB
MamacnPageProcessor.java 2KB
JsonFilePageModelPipeline.java 2KB
SinaBlogProcessor.java 2KB
BaiduBaike.java 2KB
DiandianBlogProcessor.java 2KB
FilePageModelPipeline.java 2KB
ResultItems.java 2KB
UrlUtilsTest.java 2KB
共 286 条
- 1
- 2
- 3
资源评论
weixin_38679651
- 粉丝: 6
- 资源: 934
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 基于智慧云校园管理系统全部资料+高分项目+详细文档.zip
- 基于智慧自助餐饮系统-图像识别全部资料+高分项目+详细文档.zip
- 彩虹-DNS管理系统源码V2.0.1,SSL证书自动申请与部署.zip
- 7寸液晶屏覆膜机(含工程图bom单)sw16全套技术开发资料100%好用.zip
- AI程序源码最新,支持多个国家语言.zip
- 0.64四方针插针打弯机(sw12可编辑+cad)全套技术开发资料100%好用.zip
- 600离心清洗机sw13可编辑全套技术开发资料100%好用.zip
- 基于 Linux 的智能家居系统全部资料+详细文档+优秀项目.zip
- 基于 Yunzai 的小米智能家居控制插件全部资料+详细文档+优秀项目.zip
- 基于android的智能语音家居控制系统 安卓端1.0全部资料+详细文档+优秀项目.zip
- 基于C#的智能家居控制系统通信协议的实现全部资料+详细文档+优秀项目.zip
- 基于LLM Agent的全能管家,通过语音或文字交互,调用工具控制智能家居(HA米家)和电脑。超高拓展性,无限可能。全部资料+详细文档+优秀项目.zip
- 基于ESP32-S3的小键盘,具有时间显示、实时天气、天气预报、实时股票、快捷键、蓝牙键盘、倒计时、快捷访问网站、米家智能家居控制等功能。全部资料+详细文档+优秀项目.zip
- 基于QML智能家居UI全部资料+详细文档+优秀项目.zip
- 基于python实现智能家居物联网服务平台全部资料+详细文档+优秀项目.zip
- 基于STC89C52的智能家居系统全部资料+详细文档+优秀项目.zip
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功