SparkDemo:一个简单的火花演示
火花演示关于如何使用Spark的演示。该程序从本地文件系统(或HDFS、S3)读取GPX格式的数据。 GPX文件应包含GPS轨迹。读取轨道后,使用Ramer Douglas Peucker减少[1]减少每个轨道中的点数。在最后一步中,数据以geoJson格式保存在本地mongo db中。要构建项目,并创建一个具有外部依赖项的jar,请运行: gradle胖罐在创建jar之后,它可以在Spark集群之上执行。可以在此处找到有关如何运行Spark集群或独立应用程序的信息: : [1]
文件列表
SparkDemo-master.zip
(预估有个8文件)
SparkDemo-master
src
test
scala
org
demo
spark
main
RamerDouglasPeuckerReductionTest.scala
800B
main
暂无评论