分布式爬虫scrapy-redis所踩过的坑一、安装redis二、scrapy框架出现的问题三、scrapy正确的源代码
一、安装redis因为是在CentOS系统下安装的，并且是服务器。遇到的困难有点多不过。1.首先要下载相关依赖首先先检查是否有c语言的编译环境，你问我问什么下载这个，我只能说它是下载安装redis的前提，就像水和鱼一样。rpm -q gcc```如果输出版本号，则证明下载好了，否则就执行下面的命令，安装gcc，2.然后编译redis下载你想要的redis版本注意下面的3.0.6是版本号，根据自己想要的下载版本号，解压yum install gcc-c++cd /usr/local
