Flume配置HDFS所需jar包 commons-configuration-1.6.jar commons-io-2.6.jar hadoop-auth-2.6.0-cdh5.16.2.jar h
hdfs读原理.描述的是hadoop的读的原理执行过程,块,socket
1.maven本地安装； 2.Maven引用:com.dw.hadoopcommon_tool0.0.1-SNAPSHOT3.调用静态方法HdfsDAO
基于maven工程打包的可执行jar包,支持hadoop版本cdh5.12.1,以及kerberos认证,配置kerberos信息的核心配置文件core.properties,下载集群相关认证信息配置
本文档记录了为hadoop的hdfs配置kerberos的过程,hadoop用的版本是2.4.1。其中有一些作者的个人经验,希望对读者有帮助。
hdfs文件的查看 hdfs fs -cat /文件名
一篇讲述apache hdfs扩展性限制的文章
测试HDFS的IO性能,扩展性,并发性测试fuse_dfs接口的IO性能,并发性衡量HDFS代替MFS的可行性
HDFS多租户实现方案—北京蓝汛通信技术有限责任公司刘刚
原创HDFS浏览器windows版,基于java,需要JDK1.7以上,另外hadoop在windows上的依赖资源一并献上。功能:连接,断开,浏览文件,上传,下载(包括文件夹),删除(递归)删除。
