requests模块中经常使用到的headers和proxies,随机代理ip和请求头可以实现更加高效的爬取操作。 文件中给出从网上收集到的代理,下方也给出了筛选可用代理的方法。