Scrapy_qiushibaike.rar
通过scrapy框架爬取糗事百科的段子,并进行保存。 内附源码,和爬取好段子的文件。 部分代码: def start_requests(self): urls = [] for page in range(1,14): url = 'https://www.qiushibaike.com/text/page/{page}/'.format(page = page) urls.append(url) for url in urls: yield scrapy.Request(u
文件列表
Scrapy_qiushibaike.rar
(预估有个14文件)
qiushibaike
QiushibaikeInfo.txt
98KB
scrapy.cfg
265B
qiushibaike
middlewares.py
4KB
pipelines.py
659B
spiders
__pycache__
qiushibaike_spider.cpython-37.pyc
1KB
__init__.cpython-37.pyc
149B
暂无评论