数据收集器 此存储库包含用于从各种数据源中收集数据的nodeJS和Python代码。 ### USstock 可以在此链接中下载源库存文件(.csv) 该代码用于清除这些文件,以便可以将它们转换为Postgres数据库。 ###### stockCleanerMultipleFiles.py转换多个文件。 请相应地设置您的文件位置。 ###### stockcleanerOneFile.py清除一个文件的数据。 ### sfGov 数据源为: : ##### removeLastCol_cleanTimestamp.py此Python文件从csv文件中删除最后一列:Map__Crime_Incidents _-_ Previous_Three_Months.csv,从下载还将时间戳列的格式设置为与库存数据时间相同。 ###### urlScrapper.js此脚本从s