本方案采用统信UOS操作系统,结合Storm和Zookeeper进行设计,构建了一套基于分布式集群的实时大数据处理框架。为了保证系统的高可用性,至少需要三台服务器进行部署。其中,Master服务器部署Nimbus主节点,用于分配任务和监测故障;Slave服务器部署Supervisor工作节点,用于收听工作指派并运行工作进程。Nimbus和Supervisor之间的协调则通过Zookeeper系统或者集群实现。本方案使用了操作系统统信服务器操作系统、Storm2.2.0和Zookeeper3.4.14。为了避免重复,本文对资源标题和内容进行了改写,同时纠正了一些错误。如果您对大数据处理框架的部署感兴趣,可以参考本文提供的方案。
暂无评论