基于scrapy框架采用异步高并发的方式抓取知乎千万用户信息
需积分: 50 110 浏览量
2019-08-10
07:47:34
上传
评论 2
收藏 27KB ZIP 举报
基于scrapy框架采用异步高并发的方式抓取知乎千万用户信息.zip （36个子文件） 
scrapy-zhihu-master zhihuuser 
settings.py 4KB pipelines.py 1KB middlewares.py 3KB __init__.py 0B items.py 1KB __pycache__ items.cpython-36.pyc 1KB pipelines.cpython-36.pyc 2KB __init__.cpython-36.pyc 141B middlewares.cpython-36.pyc 2KB settings.cpython-36.pyc 797B spiders zhihu.py 4KB __init__.py 161B __pycache__ zhihu.cpython-36.pyc 3KB __init__.cpython-36.pyc 149B curl 0B scrapy.cfg 280B .idea misc.xml 288B workspace.xml 23KB Zhihu.iml 467B .name 5B modules.xml 286B Zhihu-distributed.iml 467B build lib zhihuuser settings.py 4KB pipelines.py 1KB middlewares.py 2KB __init__.py 0B items.py 1KB spiders zhihu.py 4KB __init__.py 161B setup.py 256B README.md 1KB project.egg-info 
entry_points.txt 40B dependency_links.txt 1B PKG-INFO 179B SOURCES.txt 334B top_level.txt 10B资源评论
