wsb scraper live:walltreetbets刮板每五分钟运行一次 源码
/ r / wallstreetsbets抓取器可获取实时数据。 它使用praw(reddit API包装器)从/ r / wallstreetbets获取最新的100条帖子和最新的1000条评论。 它检查那些帖子和评论的时间戳,并处理五分钟到十分钟之间的帖子和评论。 如果提交的评论多于一个,并且这些评论的分数(向上投票与向下投票)均大于零,则它们将通过字解析器运行以查找股票报价器。 这些评论也通过vaderSentiment运行(由CJ Hutto创建,然后由Ryan Elliot进一步编辑),以给他们一个“情感分数”。 所有这些都被发送到mongoDB数据库,最终被拉出并显示在wsb-data.vercel.app中。
文件列表
wsb-scraper-live-master.zip
(预估有个35文件)
wsb-scraper-live-master
.gitignore
8B
requirements.txt
567B
wsb_scraper_historical.py
83KB
runtime.txt
12B
README.md
720B
Procfile
74B
wsb_scraper.py
84KB
vaderSentiment
setup.py
2KB
暂无评论