没有合适的资源?快使用搜索试试~ 我知道了~
异步:使用asyncio和aiohttp开发的轻量级初始化协程web爬虫框架
共21个文件
py:19个
txt:1个
md:1个
需积分: 31 0 下载量 26 浏览量
2021-02-28
00:37:44
上传
评论
收藏 20KB ZIP 举报
温馨提示
异步的 使用asyncio和aiohttp的串联Web搜寻器框架 Asyncpy是我基于asyncio和aiohttp开发的一个轻便高效的爬虫框架,采用了scrapy的设计模式,参考了github上一些开源框架的处理逻辑。 使用文档: : 应用案例: : github的: : pypi: ://pypi.org/project/asyncpy/ asyncpy的架构及流程 安装需要的环境 python版本需要> = 3.6依赖包:['lxml','parsel','docopt','aiohttp'] 安装命令: pip install asyncpy 如果安装报错: ERROR: Could not find a version that satisfies the requirement asyncpy (from versions: none) ERROR:
资源推荐
资源详情
资源评论
收起资源包目录
asyncpy-master.zip (21个子文件)
asyncpy-master
asyncpy
asyncpy
settings.py 919B
exceptions.py 628B
request.py 7KB
pipelines.py 179B
middleware.py 1KB
response.py 4KB
__init__.py 2KB
spider.py 20KB
tools
get_attr.py 182B
log.py 786B
__init__.py 117B
demo_middleware.py 545B
templates
settings.py 967B
pipelines.py 152B
middlewares.py 428B
__init__.py 24B
spiders
__init__.py 27B
templates.py 251B
LICENSE.txt 1KB
setup.py 911B
README.md 7KB
共 21 条
- 1
资源评论
李念遠
- 粉丝: 19
- 资源: 4615
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功