centos7中爬虫相关安装

首先，安装centos系统。可参照如下教程：

在 VMware 虚拟机中安装 CentOS 7(图文教程)

注意的是：在进行/boot、/home和swap分区大小设置时，不要太小，不然在后续会出现boot分区满了的尴尬情况。

进入系统后，先进行软件的更新。在应用程序-系统工具-软件更新中进行更新。然后为了避免下载太慢的情况，进行yum源的替换。可参考：更换阿里云 yum 源

---

安装Python和pip

注意：一定要安装依赖包，不然后期出现问题会比较烦。wget下载会很慢，耐心等待。

具体可参考：Centos7.6 下安装 Python3.7

---

安装mongodb：

注意：软件的链接(baseurl)自己先确认好再安装。并且只需要安装到正常启动服务即可。

具体可参考：Linux Centos 7 安装 MongoDB（简单！详细！）以及Install MongoDB Community Edition on Red Hat or CentOS

---

安装Redis：

参考：按照第一种方法安装即可。#requirepass大概在47%的位置。centos7 安装 redis

---

安装MySQL：

参考：[centos7 mysql 数据库安装和配置]

---

安装库：

pip install requests selenium beautifulsoup4 pyquery pymysql pymongo redis flask django jupyter

在安装chrome和chromedriver时可参考：CENTOS 安装 SELENIUM、CHROME、CHROMEDRIVER（驱动） 。核心就是升级chromedrvier到以适配chrome的版本。

---