CentOS 7上Hadoop单机模式的安装配置

在CentOS 7上安装配置Hadoop单机模式可以按照以下步骤进行：

1. 安装JDK：首先，您需要安装Java Development Kit (JDK)。请确保下载与CentOS 7兼容的JDK版本，例如JDK 1.8。按照官方文档的指示进行安装。
2. 下载Hadoop：访问Apache Hadoop的官方网站或使用以下链接下载Hadoop：http://mirror.bit.edu.cn/apache/hadoop/common/。选择适合您需求的Hadoop版本，例如hadoop-2.7.5.tar.gz。
3. 解压Hadoop：使用以下命令将下载的Hadoop压缩包解压到指定的目录，例如/opt目录：

   tar -zxvf hadoop-2.7.5.tar.gz -C /opt/

4. 配置Hadoop环境变量：打开终端并编辑/etc/profile文件：

   vim /etc/profile

   在文件末尾添加以下内容：

   export HADOOP_HOME=/opt/hadoop-2.7.5
   export PATH=$PATH:$HADOOP_HOME/bin

   然后保存并退出编辑器。
5. 更新系统变量：使用以下命令使环境变量生效：

   source /etc/profile

6. 配置Hadoop：打开Hadoop配置文件hadoop-env.sh，位于$HADOOP_HOME/etc/hadoop/目录下。根据您的系统和需求进行必要的配置。请确保指定正确的Java安装路径。例如：

   export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-amd64

7. 创建Hadoop目录：在根目录下创建一个名为hadoop的目录，作为Hadoop的默认工作目录：

   mkdir /hadoop

8. 启动Hadoop：使用以下命令启动Hadoop单机模式：

   $HADOOP_HOME/bin/hdfs namenode -format  #格式化NameNode
   $HADOOP_HOME/sbin/start-dfs.sh            #启动HDFS和MapReduce相关服务

9. 验证安装：您可以访问Hadoop的管理界面来验证安装是否成功。默认情况下，Hadoop的管理界面可以通过浏览器访问http://localhost:50070。您应该能够看到NameNode和ResourceManager的管理页面。
10. 使用Hadoop：一旦安装和配置完成，您就可以开始使用Hadoop进行分布式计算了。您可以编写MapReduce程序、使用HDFS进行数据存储和处理等。请确保查阅Hadoop官方文档以了解更多关于使用Hadoop的详细信息。
11. 停止Hadoop：当您完成使用Hadoop时，可以使用以下命令停止相关服务：
    ```shell
    $HADOOP_HOME/sbin/stop-dfs.sh #停止HDFS和MapReduce相关服务