虚拟机安装hadoop安装详细步骤图，虚拟机环境下Hadoop安装详细步骤解析及图解

本文详细解析了在虚拟机环境下安装Hadoop的步骤，并附有详细步骤图解，帮助用户顺利完成Hadoop的安装配置。

环境准备

1、操作系统：CentOS 7（推荐）

2、虚拟机软件：VMware Workstation（推荐）

3、Hadoop版本：Hadoop 3.3.1（根据需要选择合适的版本）

4、Java环境：JDK 1.8（根据Hadoop版本选择合适的JDK版本）

虚拟机安装及配置

1、创建虚拟机：打开VMware Workstation，点击“创建新的虚拟机”，选择“自定义（高级）”，然后点击“下一步”。

2、选择安装类型：选择“典型安装”，然后点击“下一步”。

3、选择操作系统：选择“Linux”，然后选择“CentOS 7 64位”，点击“下一步”。

4、虚拟机名称及位置：输入虚拟机名称，选择虚拟机存放位置，点击“下一步”。

5、分配处理器和内存：根据实际情况分配处理器和内存资源，点击“下一步”。

6、选择虚拟硬盘：选择“分配一个新虚拟硬盘”，然后选择“将虚拟硬盘存储在单个文件中”，点击“下一步”。

7、设置虚拟硬盘大小：设置虚拟硬盘大小，点击“下一步”。

8、选择I/O适配器：选择“LSI Logic SAS”，点击“下一步”。

9、选择网络适配器：选择“桥接模式”，点击“下一步”。

10、设置虚拟机光盘：选择“使用ISO镜像文件”，然后选择CentOS 7的安装镜像文件，点击“下一步”。

11、完成虚拟机创建：点击“完成”。

CentOS 7系统配置

1、开启防火墙：输入以下命令，开启防火墙。

systemctl start firewalld

2、关闭防火墙：输入以下命令，关闭防火墙。

systemctl stop firewalld

3、设置静态IP地址：编辑/etc/sysconfig/network-scripts/ifcfg-ens33文件，设置静态IP地址、网关和DNS。

BOOTPROTO=static
ONBOOT=yes
IPADDR=192.168.1.100
NETMASK=255.255.255.0
GATEWAY=192.168.1.1
DNS1=8.8.8.8
DNS2=8.8.4.4

4、重启网络服务：输入以下命令，重启网络服务。

systemctl restart network

5、安装JDK：输入以下命令，安装JDK。

yum install -y java-1.8.0-openjdk

6、配置环境变量：编辑/etc/profile文件，添加以下内容。

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.252.b08-0.el7_7.x86_64
export PATH=$PATH:$JAVA_HOME/bin

7、使环境变量生效：输入以下命令，使环境变量生效。

source /etc/profile

Hadoop安装及配置

1、下载Hadoop：从Apache官网下载Hadoop 3.3.1版本，解压到指定目录，例如/opt/hadoop。

2、配置Hadoop环境变量：编辑/etc/profile文件，添加以下内容。

export HADOOP_HOME=/opt/hadoop
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

3、使环境变量生效：输入以下命令，使环境变量生效。

source /etc/profile

4、修改Hadoop配置文件：进入/opt/hadoop/etc/hadoop目录，修改以下配置文件。

core-site.xml：

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://master:8020</value>
  </property>
  <property>
    <name>hadoop.tmp.dir</name>
    <value>/opt/hadoop/tmp</value>
  </property>
</configuration>

hdfs-site.xml：

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

mapred-site.xml：

<configuration>
  <property>
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
  </property>
</configuration>

yarn-site.xml：

<configuration>
  <property>
    <name>yarn.resourcemanager.hostname</name>
    <value>master</value>
  </property>
</configuration>

5、格式化HDFS：输入以下命令，格式化HDFS。

hdfs namenode -format

6、启动Hadoop服务：输入以下命令，启动Hadoop服务。

start-dfs.sh
start-yarn.sh

7、查看Hadoop服务状态：输入以下命令，查看Hadoop服务状态。

jps

8、访问Hadoop Web界面：在浏览器中输入http://master:50070，查看HDFS Web界面；在浏览器中输入http://master:8088，查看YARN Web界面。

就是在虚拟机环境下安装Hadoop的详细步骤，在实际操作过程中，请根据实际情况调整配置文件和参数，安装完成后，可以运行Hadoop自带的示例程序，验证Hadoop是否安装成功。