`scrapy`做为一款优秀的爬虫框架,如果用`pip`来安装,会非常麻烦,可能你会怀疑人生。
其实我们用`anaconda`来安装,非常方便
以下是在`centos8`中安装`anaconda`
首先在https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 下载`anaconda.sh`
然后 `chmod +x anaconda.sh`
`./anaconda.sh`
接着安装`scrapy`
设置好环境变量
执行`conda install -c conda-forge scrapy`
如果`scrapy`要用到`mysql`
需要安装
`conda install -c anaconda pymysql`