数据采集与缓存

来自CloudWiki
Cloud17讨论 | 贡献2020年7月21日 (二) 04:41的版本 (创建页面,内容为“==虚拟机环境== <nowiki>master 192.168.128.130 2G、1核 slave1 192.168.128.131 1.5G 、1核 slave2 192.168.128.132 1.5G 、1核 slave3 192.168.128.…”)
(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
跳转至: 导航搜索

虚拟机环境

master 192.168.128.130            2G、1核
slave1 192.168.128.131	1.5G 、1核
slave2 192.168.128.132	 1.5G 、1核
slave3 192.168.128.133	 1.5G 、1核

已配置无密码登录、jdk、时间同步服务

集群环境

已安装Hadoop、Flume、Kafka、Flink、MYSQL、Zookeeper
Hadoop:ResourceManager(master)、NameNode(master)、SecondaryNameNode(master)、DataNode(slave1-slave3)、NodeManager(slave1-slave3)
Flume:master
Kafka:broker0(master)、broker1(slave1)、broker2(slave2)
Zookeeper:slave1、slave2、slave3
MYSQL:master
Flink:JobManager(master)、TaskManager(slave1-slave3)