【大数据入门笔记系列】第三节 Hdfs读、写数据处理流程Hdfs简介写数据处理流程读数据处理流程后记跳转 Hdfs简介 一般而言,Hdfs是由一个NameNode节点和若干个DataNode节点组成(非高可用,高可用还有一个SecondNameNode)。 NameNode:管理分布式文件系统的元数据,这些元数据是一些诸如描述文件的存储路径以及block具体在哪些DataNode上的具体位置等; DataNode:DataNode节点用来保存文件数据块(block),它只负责接受存储、查询发送文件,不负责文件的切块; 文件切割:文件的切割默认是以128M为标准(该数值可通过参数设定),小于该