查看“2.Hadoop集群部署”的源代码
←
2.Hadoop集群部署
跳转至:
导航
,
搜索
因为以下原因,您没有权限编辑本页:
您所请求的操作仅限于该用户组的用户使用:
用户
您可以查看与复制此页面的源代码。
'''Hadoop搭建''' hadoop-env.sh 配置JDK环境变量 export JAVA_HOME=/绝对路径 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin core-site.xml 核心配置 //默认文件系统是什么 namenode通信 //定义什么端口在哪里启动namenode //定义namenode在哪里 //master表示主机名称 <!--配置master为主节点,端口为9000 --> <property> <name>fs.default.name</name> <value>hdfs://master:9000</value> </property> <!-- HDFS工作目录的设置--> <!--其它一些目录是以这个临时目录为基本目录的,如dfs.name.dir和dfs.name.edits.dir等,如果文件清空,hadoop中的数据会全部丢失--> <property> <name>hadoop.tmp.dir</name> <value>/usr/hadoop/hadoop-2.7.3/hdfs/tmp</value> </property> hdfs-site.xml配置 //副本的数量是多少 <property> <name>dfs.replication</name> <value>2</value> </property> //配置 namenode元数据存放位置 <property> <name>dfs.namenode.name.dir</name> <value>file:/usr/hadoop/hadoop-2.7.3/hdfs/name</value> </property> //配置datanode块数据存放位置 <property> <name>dfs.datanode.data.dir</name> <value>file:/usr/hadoop/hadoop-2.7.3/hdfs/data</value> </property> mapred-site.xml配置 <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> yarn-site.xml配置 <!-- 指定mapreduce的shuffle--> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> <!-- 指定resourcemanager的ip地址--> <property> <name>yarn.resourcemanager.hostname</name> <value>localhost</value> </property> 初始化:hdfs namenode -format 创建目录 并初始化一个空的fsimage VERSION CID
返回至
2.Hadoop集群部署
。
导航菜单
个人工具
登录
命名空间
页面
讨论
变种
视图
阅读
查看源代码
查看历史
更多
搜索
导航
首页
最近更改
随机页面
帮助
工具
链入页面
相关更改
特殊页面
页面信息