没有合适的资源?快使用搜索试试~ 我知道了~
selenium-grid-docker-swarm:与Selenium Grid和Docker并行进行Web抓取
共10个文件
py:3个
sh:2个
yml:1个
需积分: 9 0 下载量 143 浏览量
2021-05-25
14:21:00
上传
评论
收藏 6KB ZIP 举报
温馨提示
使用Selenium Grid和Docker Swarm进行并发Web抓取 想学习如何建立这个项目? 查看。 要使用这个项目吗? 货叉/克隆 创建并激活虚拟环境 安装要求 Digital Ocean并访问令牌 将令牌添加到您的环境中: (env)$ export DIGITAL_OCEAN_ACCESS_TOKEN=[your_token] 启动四个Droplet并部署Docker Swarm: (env)$ sh project/create.sh 运行刮板: (env)$ docker-machine env node-1 (env)$ eval $( docker-machine env node-1 ) (env)$ NODE= $( docker service ps --format " {{.Node}} " selenium_hub ) (env)$ for
资源推荐
资源详情
资源评论
收起资源包目录
selenium-grid-docker-swarm-master.zip (10个子文件)
selenium-grid-docker-swarm-master
project
destroy.sh 200B
create.sh 1KB
scrapers
__init__.py 0B
scraper.py 3KB
script.py 530B
requirements.txt 57B
LICENSE 1KB
README.md 1KB
docker-compose.yml 677B
.gitignore 26B
共 10 条
- 1
资源评论
dahiod
- 粉丝: 28
- 资源: 4664
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功