没有合适的资源?快使用搜索试试~ 我知道了~
web-scrapper:使用Python抓取工具获取网站信息(有用的数据)
共6个文件
txt:2个
md:1个
py:1个
需积分: 10 0 下载量 63 浏览量
2021-02-10
12:25:33
上传
评论
收藏 24.21MB ZIP 举报
温馨提示
PYTHON应用程序从网站获取数据 从多个表中获取数据(排名,排行榜等)| 网址:website.txt 检索数据,例如排名,团队,奖杯,积分,电话代码和订单 爬虫类使用REGEX从website.txt读取URL 文件“ script_list”包含参数列表 “ web-scrapper.py”将每一行作为与“ websites.txt”不同的网站来循环“ script_list.txt” 只需在“ websites.txt”和“ script_list.txt”中添加更多信息即可从不同的数据集中检索更多数据 SCRAPPER仅解析表元素以进行演示 使用库(例如漂亮的汤)进行html解析和请求http请求 RUN:要运行该应用,只需以管理员身份运行“ run_scrapper.bat”(WINDOWS) 测试:5个站点的执行时间:20s(平均每个站点要废弃4s)
资源推荐
资源详情
资源评论
收起资源包目录
web-scrapper-master.zip (6个子文件)
web-scrapper-master
web-scrapper.py 3KB
python
python373.exe 24.47MB
websites.txt 234B
script_list.txt 438B
run_scrapper.bat 485B
README.md 827B
共 6 条
- 1
资源评论
胜负欲
- 粉丝: 23
- 资源: 4641
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功