基于 Python 的可配置网络爬虫实现

本项目使用 Python 语言开发，实现了一个功能丰富的网络爬虫，支持自定义配置，包括 Cookie 设置和定时爬取功能。

数据存储

爬取到的数据支持多种存储方式，以满足不同需求：

• 文件：
  • TXT (默认)
  • CSV (默认)
• 结构化数据：
  • JSON (可选)
• 数据库：
  • MySQL (可选)
  • MongoDB (可选)
  • SQLite (可选)

跨平台支持

本项目支持跨平台运行，可在以下操作系统上使用:

• Windows
• Linux
• macOS

Python 版本兼容性

本项目兼容 Python2 和 Python3。