look39799

使用scrapy获取所有的A股股票数据,然后使用pyqt5进行数据可视化,代码比较简单,初入的朋友们可以参考下。

1. 通过selenium+requsets对拉勾网的职位信息进行抓取,然后通过正则表达式对数据进行规整化;2. 通过使用pandas+numpy对职位信息数据进行分析,分类,然后分别保存在本地;3. 使用python绘图库对数据进行可视化的分析。4. 为了防止反爬,使用了代理池技术。