一种优化的Hadoop副本放置策略
Hadoop分布式文件系统默认采用三副本策略实现较为简单,未对数据节点负载进行充分考虑。为了改善HDFS中集群负载的均衡性,提高数据节点的资源利用率,提出一种优化的副本放置策略。该策略综合考虑数据节点的实时负载信息和工作进程数,选择负载最小的节点存放数据。实验结果表明,与默认策略相比,优化的Hadoop副本放置策略能使副本分布更加合理,集群的均衡性更加良好,并能减少数据上传响应时间。
用户评论
推荐下载
-
论文研究一种基于策略的区分服务模型.pdf
一种基于策略的区分服务模型,张雨,,本文在分析并对比当前IP互联网的几种QoS模型后,又探讨了基于策略的网络管理模型。在此基础上,最后提出了一种基于策略的区分服务�
26 2019-09-24 -
一种SQL语法分析的策略和实现pdf
一种SQL语法分析的策略和实现.pdf
19 2019-03-06 -
一种基于多策略的本体匹配方法.pdf
目前本体匹配的方法很多,本文将这些方法分为基于本体概念结构的、定义的和实例的,还有多策略结合的四类的方法。为了帮助用户从各种本体匹配方法中选择最有效的策略来匹配本体,本文提出了一种对本体匹配策略进行评
22 2019-05-28 -
一种采用预排序策略的多核并行skyline算法
一种采用预排序策略的多核并行skyline算法
8 2021-05-11 -
一种新的内存对象缓存系统预取策略
一种新的内存对象缓存系统预取策略
8 2021-04-21 -
一种基于同源行为分析的APT异常发现策略
APT(advanced persistent threat)攻击的日益频繁对APT攻击行为的检测提出了更高的要求,对同源行为进行分析是尽早发现APT攻击行为的一种有效方法。针对数据量过大造成数据对比
5 2021-02-28 -
一种支持撤销的双策略属性基加密方案
一种支持撤销的双策略属性基加密方案
9 2021-02-19 -
一种可容错的覆盖网节点合作激励策略
为了促进覆盖网节点之间的合作,以任意相邻的两个节点为博弈参与者,用纯策略博弈建立了问题模型,证明了静止状态下的节点相互转发博弈是典型的囚徒困境,以及在无限重复囚徒困境博弈情况下,基于针锋相对策略的合作
1 2021-02-23 -
一种粒子滤波自适应优化算法
通过对粒子滤波算法中建议分布与重采样2种改进技术分析,提出了一种粒子滤波自适应优化算法.首先,基于退火参数自适应优化混合建议分布,以改进建议分布的采样范围.然后,在基于有效样本大小的自适应重采样技术之
12 2020-07-21 -
一种煤矸石优化识别方法
针对输送带磨损造成煤矸石图像目标检测不准确、影响煤矸石识别准确率等问题,提出了一种煤矸石优化识别方法。采集的图像经过裁切、去噪、灰度化等预处理后,利用训练好的CornerNetSqueeze深度学习模
10 2020-07-24
暂无评论