Hadoop集群搭建-- 安装jdk、hadoop

一、jdk安装

1. 通过Xftp将本机JDK上传至服务器目录:

2. 查看是否上传成功:

3. 解压jdk

tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

4. 配置环境变量

sudo vim /etc/profile.d/my_env.sh

#JAVA_HOME

export JAVA_HOME=/opt/module/jdk1.8.0_212

export PATH=$PATH:$JAVA_HOME/bin

保存后退出 :wq

5. 使环境变量生效

source /etc/profile

6. 查看是否安装成功

二、安装hadoop

1. 上传hadoop安装包

2. 解压hadoop安装包

tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/

查看是否解压成功

3. 配置环境变量

进入到解压之后的hadoop目录(pwd)

bin目录:存放对Hadoop相关服务(hdfs,yarn,mapred)进行操作的脚本

etc目录:Hadoop的配置文件目录,存放Hadoop的配置文件

lib目录:存放Hadoop的本地库(对数据进行压缩解压缩功能)

sbin目录:存放启动或停止Hadoop相关服务的脚本

share目录:存放Hadoop的依赖jar包、文档、和官方案例

sudo vim /etc/profile.d/my_env.sh在下面添加如下环境变量:

#HADOOP_HOME

export HADOOP_HOME=/opt/module/hadoop-3.1.3

export PATH=$PATH:$HADOOP_HOME/bin

export PATH=$PATH:$HADOOP_HOME/sbin

4. 使环境变量生效,并查看是否配置成功

source /etc/profile

hadoop version

经验分享 程序员 微信小程序 职场和发展