一、熟悉你要爬取的页面 1,按键盘上的:F12 打开 2,选择All刷新界面,F5刷新。 3,复制下面的 Request URL的数据 也就是我们要访问的url地址; 4,获取页面的请求头 前段代码如下: import requests import re url = 'https://www.qiushibaike.com/text/' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.40