虫洞 来自的流式处理平台 Wormhole是一个一站式流式处理云平台解决方案(SPaaS-流处理即服务)。 蠕虫洞针对大数据流式处理项目的开发管理运维人员,致力于提供统一的抽象概念体系,直观可视化的操作界面,简单流畅的配置管理流程,基于SQL即可完成的业务逻辑开发方式,并屏蔽了流式处理的紧张技术细节,极大的降低了数据项目管理运维门云,从而大数据流式处理项目的开发管理运维变得更加轻量敏捷可控可靠。 文献资料 请参考。 建筑学 设计理念 统一DAG高阶分形抽象 构建由Source DataSys,Kafka Topic,Spark Stream(Flink Stream),Sink DataSys组成的物理DAG 每个物理DA​​G里可以并行处理多个由源命名空间,流,接收器命名空间组成的逻辑DAG 每个流程本身都是典型的 统一通用流消息UMS协议抽象 UMS是Wormhole定义的流消息协议