没有合适的资源?快使用搜索试试~ 我知道了~
xproxy:一个动态更新代理接口类
共35个文件
py:25个
txt:4个
cfg:3个
需积分: 25 1 下载量 132 浏览量
2021-05-31
07:51:50
上传
评论
收藏 28KB ZIP 举报
温馨提示
xproxy 一个动态更新代理接口类,遵循proxychain的代理保存方式 通过scrapy抓取代理接口,并通过开启抓取线程,确保proxies代理池内数量 安装&使用 依赖python scrapy,使用前请确保安装 内置两个scrapy爬取web接口的例子,可参考这两个例子编写,确保爬取结果符合proxychain的格式,并将结果保存在proxies.txt内 XProy类的具体使用可参考demo.py 说明 现在仅支持http/https,待修改
资源推荐
资源详情
资源评论
收起资源包目录
xproxy-master.zip (35个子文件)
xproxy-master
demo.py 952B
proxy_check.py 2KB
LICENSE 18KB
xproxy.py 2KB
__init__.py 0B
.gitignore 702B
README.md 569B
scrapys
xroxy
scrapy.cfg 252B
xroxy
pipelines.py 437B
spiders
__init__.py 161B
thspider.py 1KB
items.py 320B
__init__.py 0B
settings.py 550B
proxies.txt 7KB
proxy_check.py 2KB
proxies2.txt 7KB
cnproxy
scrapy.cfg 256B
proxies.txt 579B
__init__.py 0B
cnproxy
pipelines.py 428B
spiders
__init__.py 161B
thspider.py 546B
items.py 324B
__init__.py 0B
settings.py 562B
crawlLoader.py 795B
kuaidaili
scrapy.cfg 260B
proxies.txt 2KB
kuaidaili
pipelines.py 430B
spiders
__init__.py 161B
thspider.py 1021B
items.py 353B
__init__.py 0B
settings.py 575B
共 35 条
- 1
资源评论
小子骚骚
- 粉丝: 19
- 资源: 4657
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功