scrapy-redis的安装部署步骤讲解

先说下自己的环境，redis是部署在centos上的，爬虫运行在windows上， 1. 安装redis yum install -y redis 2. 修改配置文件 vi /etc/redis.conf 将 protected-mode no解注释，否则的话，在不设置密码情况下远程无法连接redis 3. 重启redis systemctl restart redis 4. 关闭防火墙 systemctl stop firewalld.service 5. 开始创建scrapy-redis的相关，和普通的scrapy一样的创建，只不过修改setting.py文件，添加一行 REDIS