基于HDFS的spark分布式Scala程序测试
在Hadoop分布式集群和基于HDFS的spark分布式集群部署配置基础上进行Scala程序wordcount测试,环境分别是spark-shell和intelliJIDEA。
用户评论
推荐下载
-
分布式式缓存
在系统运行的过程中,WEB应用中的Session是不断变化的,我们通过WEB容器的提供的Listener接口达到同步Session数据的目的
40 2020-05-06 -
论文研究基于KFCM CV模型的Spark分布式医学图像分割方法.pdf
基于KFCM-CV模型的Spark分布式医学图像分割方法,梁靖宜,郭玉翠,医学图像分割对于医疗诊断和病理学研究具有重要意义。为了快速有效的处理医学图像,本文提出了一种基于Spark分布式处理医学图像的
8 2020-12-31 -
Spark生态系统解析及基于Redis的开源分布式服务Codis
1月24日,一场基于Spark和Redis组成的分布式系统实践分享由Spark资深布道者陈超和豌豆荚资深系统架构师刘奇联手打造。在分享中,陈超首先简短的介绍了Spark社区在2014年的发展:目前Sp
7 2021-02-01 -
基于Spark和IPPSO_LSSVM的短期分布式电力负荷预测算法
为了提高电力负荷预测的精度,应对单机运算资源不足的挑战,提出一种改进并行化粒子群算法优化的最小二乘支持向量机短期负荷预测模型。通过引入Spark on YARN内存计算平台,将改进并行粒子群优化(IP
13 2021-01-17 -
CORBA分布式应用程序
使用CORBA写一个分布式应用程序,包括用户登录、回话建立、回话查询等简单功能。
26 2019-08-02 -
RMI分布式应用程序
使用RMI写一个分布式应用程序,包括用户登录、回话建立、回话查询等简单功能
33 2019-08-02 -
分布式程序设计
分布式程序设计
30 2019-06-05 -
单元5分布式文件系统HDFS.pptx
Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也
13 2020-05-02 -
hadoop3自学入门笔记2HDFS分布式搭建
目录一些介绍Hadoop 2和Hadoop 3的端口区别Hadoop 3 HDFS集群架构我的集群规划1.安装JDK2.配置Hadoop2.1部署及配置2.2 将配置复制到其他服务器2.3配置下had
10 2021-01-30 -
基于HLA的分布式仿真系统的时延分析与测试
基于HLA的分布式仿真系统的时延分析与测试。
3 2021-04-06
暂无评论