分布式爬虫管理平台Crawlab安装与使用

安装：

系统：阿里云centos7

这里使用最简单的安装方法，docker安装。

先用docker下载crawlab镜像：

docker pull tikazyq/crawlab:latest
#关于docker常用命令及简介，这篇文章写的很全：
#https://blog.csdn.net/javahelpyou/article/details/104587242

还需要安装docker-compose，在安装了python3 的前提下：

pip3 install docker-compose
安装后可执行docker-compose ps验证是否安装正常。

启动crawlab:

需要先找到docker-compose.yml文件所在文件夹，shell在根目录下执行：
find / -name docker-compose.yml
#find -name "docker-compose.yml"
转到该文件夹直接执行：

docker-compose up
即可运行。

在浏览器中输入 http://localhost:8080就可以看到界面。
localhost 注意！！
 如果布置到了公网记得开放8080端口及重设密码。

 

#这里mongodb及redis也是使用docker-compose一同安装管理。

#所以建议您将数据库持久化，因为否则的话，一旦您的 Docker 容器发生意外导致关闭重启，您的数据将丢失。

#至于数据持久化、mongodb及redis密码设置、数据库端口映射。等等修改配置文件docker-compose.yml即可。

#可以到官方文档查看说明：

#https://docs.crawlab.cn/Installation/Docker.html

参考博客 https://www.cnblogs.com/byadmin/p/12434975.html

今天的文章分布式爬虫管理平台Crawlab安装与使用分享到此就结束了，感谢您的阅读，如果确实帮到您，您可以动动手指转发给其他人。