python分布式爬虫中安装Redis

316次阅读
没有评论

python分布式爬虫中安装Redis

在分布式爬虫框架的搭建选择上,我们有3中方法可以选择。虽然celery的功能使用较为全面,不过Redis的使用也很广泛,所以有些小伙伴想尝试Redis的使用但苦于不会安装。小编搜集整理了相关的资料之后,尽量以简洁易懂的形式跟大家见面,下面我们就来看看Redis在python分布式爬虫中安装的方法吧。

 

Redis配置安装:

工欲善其事必先利其器,既然是基于redis的服务,当然首先要安装redis了。

安装Redis服务器端

sudo apt-get install redis-server

 

修改配置文件 redis.conf

sudo nano /etc/redis/redis.conf

 

将bind 127.0.0.1注释掉。这样Slave端才能远程连接到Master端的Redis数据库。

将Ubuntu作为Master端,Windows10和Windows7作为Slaver端,在Master中开启redis-service服务。Slaver端也需要有redis。

redis-server

 

Slaver连接测试:

redis-cli -h MasterIP地址

python分布式爬虫中安装Redis

 

至此,redis已经安装完成。

Redis可视化管理工具-Redis Desktop Manager

下载地址:

https://redisdesktop.com/download

配置方法:

 

python分布式爬虫中安装Redis

 

跟着小编的步骤,相信很多小伙伴已经成功安装好Redis框架啦。python如何连接redis数据库,小伙伴们可以根据自己平时使用工具的情况再决定是否下载。

神龙|纯净稳定代理IP免费测试>>>>>>>>天启|企业级代理IP免费测试>>>>>>>>IPIPGO|全球住宅代理IP免费测试

相关文章:

版权声明:wuyou2021-05-22发表,共计648字。
新手QQ群:570568346,欢迎进群讨论 Python51学习