本文主要介绍爬虫、数据挖掘/分析项目的实现及架构。通过扫描直播站点收集数据,并使用RESTFul API实现前后端分离的通信,前端使用Vue+Webpack,后端使用Flask,同时爬虫服务使用框架scrapy来获取数据。未来还将进行相关数据分析模块的开发。
本文主要介绍爬虫、数据挖掘/分析项目的实现及架构。通过扫描直播站点收集数据,并使用RESTFul API实现前后端分离的通信,前端使用Vue+Webpack,后端使用Flask,同时爬虫服务使用框架scrapy来获取数据。未来还将进行相关数据分析模块的开发。
暂无评论