没有合适的资源?快使用搜索试试~ 我知道了~
job-openings-git-scraper:使用Github Actions和Scrapy取消工作机会。 数据通过版本控制...
共18个文件
py:7个
json:6个
cfg:1个
需积分: 5 0 下载量 96 浏览量
2021-04-04
16:27:11
上传
评论
收藏 153KB ZIP 举报
温馨提示
职位空缺Git铲运机 该项目的目标是使用Github Actions和抓取工作机会。每次推送到Master分支都会触发抓取,并且每天使用Github Actions都会抓取一次。 为什么要使用Github? Github提供了一种使用计划爬网的方式,还提供了版本控制功能,使我们能够跟踪数据的变化。 预定的工作 蜘蛛程序使用Github动作按计划运行。 可以在文件夹中查看配置 支持平台: 通过可行 重要连结 该项目是在阅读以下文章后构建的: : 。 我决定自定义并扩展已构建的版本。 ( 在本文中介绍了这种抓取技术“ Git Scraping”: : 要添加的平台:
资源推荐
资源详情
资源评论
收起资源包目录
job-openings-git-scraper-main.zip (18个子文件)
job-openings-git-scraper-main
.github
workflows
scrape_workable.yml 928B
jobGitScraper
settings.py 3KB
pipelines.py 1KB
middlewares.py 4KB
__init__.py 0B
items.py 798B
spiders
__init__.py 161B
workable.py 3KB
scrapy.cfg 269B
requirements.txt 14B
README.md 1KB
data
tymit.json 166KB
axur.json 89KB
quintoandar.json 551KB
thegrid.json 160KB
zyte.json 85KB
scrapinghub.json 64KB
.gitignore 2KB
共 18 条
- 1
资源评论
基少成多
- 粉丝: 21
- 资源: 4538
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功