在分布式爬虫框架的搭建选择上,我们有3中方法可以选择。虽然celery的功能使用较为全面,不过Redis的使用也很广泛,所以有些小伙伴想尝试Redis的使用但苦于不会安装。小编搜集整理了相关的资料之后,尽量以简洁易懂的形式跟大家见面,下面我们就来看看Redis在python分布式爬虫中安装的方法吧。
Redis配置安装:
工欲善其事必先利其器,既然是基于redis的服务,当然首先要安装redis了。
安装Redis服务器端
sudo apt-get install redis-server
修改配置文件 redis.conf
sudo nano /etc/redis/redis.conf
将bind 127.0.0.1注释掉。这样Slave端才能远程连接到Master端的Redis数据库。
将Ubuntu作为Master端,Windows10和Windows7作为Slaver端,在Master中开启redis-service服务。Slaver端也需要有redis。
redis-server
Slaver连接测试:
redis-cli -h MasterIP地址
至此,redis已经安装完成。
Redis可视化管理工具-Redis Desktop Manager
下载地址:
https://redisdesktop.com/download
配置方法:
跟着小编的步骤,相信很多小伙伴已经成功安装好Redis框架啦。python如何连接redis数据库,小伙伴们可以根据自己平时使用工具的情况再决定是否下载。
神龙|纯净稳定代理IP免费测试>>>>>>>>天启|企业级代理IP免费测试>>>>>>>>IPIPGO|全球住宅代理IP免费测试