云雾网络架构的大数据分析平台研究
随着云计算和物联网的快速发展,企业和个人产生的数据信息量和速度都在不断增加。如何使用和管理如此庞大的数据量进行大数据分析已经成为一项重要的任务。但在云计算的架构下,Hadoop在执行MapReduce操作时会占用大量的网络带宽,尤其是在多个节点的情况下,网络传输质量的影响更为严重。基于大数据信息储存平台为基础架构,结合雾计算的数据预处理能力,构建了以雾计算架构为基础的大数据分析平台,利用雾的特性计算近端设备的优点,将大多数的数据信息在送进MapReduce做分析前,先进行初步的整合和计算,可以减少传递给Hadoop MapReduce的Result Set,将这种计算架构应用到当前的云计
用户评论
推荐下载
-
Python大数据分析处理
详细介绍了python进行数据处理的相关方法,仅作为个人学习记录。
34 2020-06-02 -
大数据分析实战教程
01_【LevelⅠ业务数据分析师】02_【LevelⅡ建模分析师】03_【LevelⅢ大数据分析师】04_【LevelIV数据分析专家】05_【拓展课程】06_【人工智能】
20 2020-06-19 -
大数据分析概述.ppt
大数据分析——大数据引领我们走向数据智能化时代 大数据技术被设计用于在成本可承受的条件下,通过非常快速(velocity)地采集、发现和分析,从大量(volumes)、多类别(variety)的数据中
13 2020-12-10 -
Spark快速大数据分析
HoldenKarau是Databricks的软件开发工程师,活跃于开源社区。她还著有《Spark快速数据处理》。AndyKonwinski是Databricks联合创始人,ApacheSpark项目
11 2019-09-18 -
spark大数据分析实战
spark大数据分析实战完整版一起走进大数据的世界。
31 2020-02-14 -
spark快速大数据分析
高清非扫描版,十分实用
16 2019-09-06 -
oracle大数据分析方案
oracle大数据分析方案,运维人员必备,深入研究oracle的人员必备
29 2019-09-08 -
Python金融大数据分析
一本介绍Python在金融领域应用的实例数据,非常多值得学习python的例子。
18 2019-09-10 -
Pyohn大数据分析工具
大数据,机器学习最新最全的学习资料,适合大多数向更高级的人工智能工程师发展的技能人士。作为一款很好的优秀的教辅书籍,希望得到大家的支持再次分享给诸位。。。
35 2019-01-13 -
Spark大数据分析实战
本书一共11章:其中第1~3章,主要介绍了Spark的基本概念、编程模型、开发与部署的方法;第4~11章,详细详解了热点新闻分析系统、基于云平台的日志数据分析、情感分析系统、搜索引擎链接分析系统等的应
50 2019-02-15
暂无评论