随着互联网、云计算和大数据技术的发展，政府、金融、气象、工业等行业会产生各种的日志文件，伴随着业务系统规模迅速增加，日志文件的规模随之急剧增加。一直以来日志分析都是反映应用系统的运行状况和用户行为的重要途径，尤其是目前互联网技术的发展，针对日志的分析处理增加了很多创新方向，比如个性化推荐，用户行为分析等等。不同的运行系统间数据独立存储，不能实现关联分析，急需对日志文件进行统一的组织管理，以备后期进行数据挖掘和关联分析，实现这些日志、数据的价值。此外在现有很多平台中，基本数据都是放在HDFS上，对一些非专业的人员来说很难实现对数据等内容的直观查看并进行分析，对于开发人员来说要不断通过命令来查看HDFS上的内容也不是很方便，因此急需开发一个平台来实现HDFS上文件