爬虫框架Scrapy

Scrapy笔记 安装 安装: 通过pip install scrapy 即可安装 Scrapy官方文档: https://scrapy.org/en/latest 注意: 在ubuntu上安装scrapy之前需要安装以下依赖: sudo apt-get install python-dev python-pip libxml2-dev libxslt1-dev zlibig-dev libffi-dev libssl-dev, 然后在通过pip install scrapy安装 如果是windows系统,需要使用pip install pypiwin32安装pypiwin32,否则可能出现