最近在学习网络爬虫的一些知识,接触到pyspider框架,但在下载安装的过程当中遇到不少坑,记录一下。 环境:win10+anaconda3+python3.7 一、Pyspider和PhantomJS的安装 pyspider的安装网上有很多教程,可以参照这个:戳这里。 PhantomJS下载之后需要配置环境变量,我是直接把它放在python.exe的文件夹中,因为该路径已经在环境变量中。 下载完之后运行spider all查看是否成功。 二、关闭防火墙 在window环境下需要关闭防火墙: 控制面板–>Windows Defender