phoenix-spark-toolkit:与Apache Phoenix + Apache Spark一起使用的工具包
适用于Apache Spark的Hive ACID数据源 一个基于Spark Datasource V1 API的数据源,为提供Spark支持。 此数据源提供了与Hive ACID V2表,完全ACI
适用于Apache Spark的深度学习管道 该仓库仅包含用于本地CI和API文档的HorovodRunner代码。 要使用HorovodRunner进行分布式培训,请使用Databricks Run
什么是星火? Apache Spark是用于执行大型计算任务(例如数据处理,机器学习和实时数据流)的高性能引擎。 它包括Java,Python,Scala和R的API。 TL; DR Docker撰写
docker.spark_python 具有Apache Spark和Python的Docker映像
spark-records:带有快速故障根源分析的防弹Apache Spark作业
数值函数Round: 用于四舍五入数值。round(412,-2):将412保留到百位,结果为400。round(412.313,2):将412.313保留两位小数,结果为412.31。
主要介绍了详解Java编写并运行spark应用程序的方法,内容详细,结合了作者实际工作中的问题进行具体分析,具有一定参考价值。
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapRedu
SparkDataFrame使用详解,包括:DataFrame解析;创建;Action;条件查询和join详尽操作解释
用户评论