爬虫scrapy入门体验 安装scrapy pip install scrapy 如果需要安装C++,可以先下载安装twisted:http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted(选择对应的python版本)。 创建项目 需要在项目根目录下,如D:\Python\spider>。 运行:scrapy startproject 项目名(如:lab),D:\Python\spider>scrapy startproject lab 启动爬虫 进入项目内:cd 项目名,D:\Python\spider>cd lab scrapy genspid