scrapy-redis 分布式爬虫demo 全站

分布式爬虫的一个demo，对186信息网站全站爬取。仅提供学习。其他责任不在本人。一小时7-8万有效