eric_pyt@qq.com

集群机器之间ssh免密登录ssh-keygen-trsa命令生成各自的私钥公钥对

航班数据下载问题提出，分析，如何根据问题一步步写出sparksql

CDH集群搭建-cm5.11.1，包括cm包下载，cdh包下载，centos下载安装，时间同步，网络配置，免密ssh，防火墙配置，hostname，安装Cloudera Manager，数据库驱动，agent配置，parcels包放置，启动cm server 和 agent，使用web登录cm管理页

该文档是本人对实时流数据分析的scala代码的详细解析，具有一定RDD了解，scala基础

flume agent收集数据 一个源对于两个sink 同时输出到hdfs和kafka 的配置文件，注意其中的 source绑定channel时候 channel1 channel2 不能分开写，该配置文件已经过集群实验成功收集到数据的