查看“Hadoop 动态添加/删除节点”的源代码
←
Hadoop 动态添加/删除节点
跳转至:
导航
,
搜索
因为以下原因,您没有权限编辑本页:
您所请求的操作仅限于该用户组的用户使用:
用户
您可以查看与复制此页面的源代码。
1.增加删除节点<br> 增加节点:<br> 2.基础操作、本地源、防火墙、时区、时间同步每十分钟同步一次时间<br> 3.修改hosts文件 所有文件添加到slave3<br> 4.免密操作 masterslave3<br> 5.安装JDK HADOOP配置环境变量<br> Hadoop设置<br> 修改所有slaves文件:添加slave3<br> 启动DataNode:hadoop-daemon.sh start datanode<br> 启动nodemanage:yarn-daemon.sh start nodemanager<br> 刷新集群状态<br> 主节点刷新:hdfs dfsadmin -refreshNodes<br> 均衡block: start-balancer.sh<br> 查看存活节点:hdfs dfsadmin -report<br> 临时删除<br> hadoop-daemon.sh stop datanode<br> hadoop-daemon.sh stop tasktracker<br> 二、动态删除DataNode<br> 1、配置NameNode的hdfs-site.xml,增加dfs.hosts.exclude配置<br> <property> <name>dfs.hosts.exclude</name> <value>/usr/local/hadoop2/etc/hadoop/excludes</value> </property> 2、在对应路径(/etc/hadoop/)下新建excludes文件,并写入待删除DataNode的ip或域名 如要删除slave2写入 echo “slave2” > excludes<br> 3、在NameNode上刷新所有DataNode<br> hdfs dfsadmin -refreshNodes hdfs dfsadmin -report start-balancer.sh 关闭节点上进程(slave2)<br> hadoop-daemon.sh stop datanode yarn-daemon.sh stop nodemanager 数据均衡:start-balancer.sh
返回至
Hadoop 动态添加/删除节点
。
导航菜单
个人工具
登录
命名空间
页面
讨论
变种
视图
阅读
查看源代码
查看历史
更多
搜索
导航
首页
最近更改
随机页面
帮助
工具
链入页面
相关更改
特殊页面
页面信息