SparkStreaming和kafka的整合.pdf

streamDM，是由华为诺亚方舟实验室开源的使用SparkStreaming挖掘大数据的开源软件。大数据流学习大数据流学习（BigDatastreamlearning）比批量或离线学习更富有挑战性，

SparkStreaming是Spark核心API的扩展,用于可伸缩、高吞吐量、可容错地处理在线流数据。Spark Streaming可以从很多数据源获取数据,比如:Kafka、Flume、Twitt

通过定时任务生成消息，并定时消费kafka主题消息，大家可以试试

消息中间件kafka进行消息的分发和接收示例应用中包含分通道发送和多线程接收

NULL博文链接：https://xnbhnly.iteye.com/blog/2431757

kafka和zk的安装包，kafka_2.10-0.8.2.1和kafka_2.11-1.0.1和zookeeper-3.4.6

技术文档资料分享，欢迎私信获取。

这个软件包支持canal监控MySQL数据库，并将数据传输到kafka以进行缓存。软件包版本分别是：canal.deployer-1.1.5.tar.gz和kafka_2.12-3.3.2.tgz。

整合Flex和Java--配置篇.pdf 详细的pdf文档，包会

简单介绍了如何在SpringCloud中使用RabbitMQ和Kafka来完成消息发送与接收