没有合适的资源?快使用搜索试试~ 我知道了~
WebCrawler:搜寻器会命中给定的端点,然后继续导航到每个链接。 Maven项目
共20个文件
java:7个
prefs:3个
properties:2个
需积分: 9 0 下载量 162 浏览量
2021-05-09
06:12:28
上传
评论
收藏 61KB ZIP 举报
温馨提示
网络爬虫 这是用maven开发的Java项目。 (建议使用Java 8运行此项目)。 使用Maven包装器。 搜寻器到达端点,然后继续导航到每个链接。 该应用程序检测圆形链接以防止无限循环。 抓取所有链接(如下),并在最后打印出摘要统计信息: 整个应用程序中执行的HTTP请求总数 成功请求总数 失败请求总数 链接: : 生成并运行 下载专案 打开终端/命令提示符 导航到下载项目的文件夹 执行以下命令 mvnw.cmd全新安装(Windows)[或] ./mvnw全新安装(linux) java -jar target \ spider-0.0.1-SNAPSHOT.jar JSON数据 {“链接”:[“ ”,“ ”,“ ”,“ “,” “,” “,” “,” “,” “,” “,” “,” https://httpbin.org/status/502 “
资源推荐
资源详情
资源评论
收起资源包目录
WebCrawler-master.zip (20个子文件)
WebCrawler-master
.project 607B
mvnw.cmd 6KB
mvnw 9KB
src
test
java
com
project
urlmanager
UrlsStackTest.java 4KB
webcrawler
CrawlerTest.java 5KB
main
resources
log4j.properties 758B
java
com
project
urlmanager
UrlsStack.java 2KB
EndPoint.java 2KB
webcrawler
Crawler.java 3KB
WebCrawlerApplication.java 738B
.settings
org.eclipse.m2e.core.prefs 90B
org.eclipse.jdt.core.prefs 243B
org.eclipse.core.resources.prefs 155B
.mvn
wrapper
MavenWrapperDownloader.java 4KB
maven-wrapper.jar 47KB
maven-wrapper.properties 115B
README.md 3KB
pom.xml 4KB
.classpath 1KB
.gitignore 18B
共 20 条
- 1
资源评论
信徒阿布
- 粉丝: 39
- 资源: 4576
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功