数据采集与缓存
来自CloudWiki
虚拟机环境
master 192.168.128.130 2G、1核 slave1 192.168.128.131 1.5G 、1核 slave2 192.168.128.132 1.5G 、1核 slave3 192.168.128.133 1.5G 、1核 已配置无密码登录、jdk、时间同步服务
集群环境
已安装Hadoop、Flume、Kafka、Flink、MYSQL、Zookeeper Hadoop:ResourceManager(master)、NameNode(master)、SecondaryNameNode(master)、DataNode(slave1-slave3)、NodeManager(slave1-slave3) Flume:master Kafka:broker0(master)、broker1(slave1)、broker2(slave2) Zookeeper:slave1、slave2、slave3 MYSQL:master Flink:JobManager(master)、TaskManager(slave1-slave3)