python爬虫爬取新浪微博
本程序可以爬取多个新浪微博用户的数据并将结果信息写入存储介质可选excel或数据库体的写入文件类型如下txt文件默认csv文件默认json文件可选MySQL数据库可选MongoDB数据库可选SQLite数据库可选同时支持下载微博中的图片和视频具体的可下载文件如下原创微博中的原始图片转发微博中的原始图片原创微博中的视频转发微博中的视频原创微博Live Photo中的视频转发微博Live Photo中的视频写入信息几乎包括用户微博的所有数据包括用户信息和微博信息两大类.如果只需要用户信息可以通过设置实现只爬取微博用户信息的功能.本程序配置在config.json中.
文件列表
新浪微博爬虫.zip
(预估有个18文件)
新浪微博爬虫
爬取过程.png
226KB
爬取结果.png
727KB
code
logging.conf
931B
weibo.py
79KB
const.py
1KB
requirements.txt
72B
config.json
645B
__pycache__
暂无评论