Hadoop下载位置:下载
将hadoop安装文件上载到node1上的/opt/apps目录,并解压缩到/opt目录中
#创建用户时,默认情况下使用相同名称的用户组[ root @ node1~ ] # useradditbaizhan #解压缩[ root @ node1~ ] # CD/opt/apps [ root @ node1~ ]
[ root @ node 1a PPS ] # CD/opt [ root @ node1opt ] # ll总用量0drwxr-xr-x 2 root root 33 10月8日13:03 appsdrwxr-xr-x9 itbaizhanitbaizhan 149月12日2019 Hadoop-3.1.3 [ root @ node1] cdhadoop-3.1.3/[ root @ node1Hadoop-3.1.3 ] # ll总用量176 drwxr-xr-x2 itbaizhanitbaizhan 1839月12日2019 chdsbdrwxr-xr-x3 itbaizhanitbaizhan 20月12日2019 etcdrwxr-xr-x2 itbaitbaizhan anitbaizhan 2019 libdrwxr-xr-x4 itbaizhanitbaizhan 288月12日2019libexec-rw-r han 147145 9月4日2019 license.txt-rw-rw otice.txt-rw-rw-r--1itbaizhanitbaizhanitbaizhan wxr-xr-x3 itbaizhanitbaizhan 40969月12日2019 schdsbdrwxr-xr-x4 itbaitbaitbanitbanitbaitbaitbaitbitbitban 用于执行联合服务(yarn )操作的脚本etc目录(Hadoop配置文件目录、Hadoop配置文件lib目录、Hadoop本地库)用于压缩和解压缩数据的功能。schdsb目录
Hadoop配置文件分为两类:默认配置文件和自定义配置文件。仅当用户希望更改默认配置文件时,才需要更改自定义配置文件并更改相应的属性值。
默认配置文件:
要获取的默认文件是Hadoop的jar包中的位置[ core-default.XML ] Hadoop-common-3.1.3.jar/core-default.XML [ HDFS-XML ]
自定义配置文件:
$HADOOP_HOME/etc/hadoop路径允许用户重新修改配置以满足项目的需要。
文件角色Hadoop-env.shJDK环境变量Workers(Hadoop2.x的名称slaves )指定如果未配置与datanode节点core-site.xml相关的参数,则为相应的缺省文件