hadoop下载，安装

### Hadoop 下载与安装教程 #### 准备工作 在开始下载和安装 Hadoop 前，需确认已准备好以下条件： - 已成功安装 JDK 并配置好 JAVA_HOME 环境变量[^3]。 - 主机具备网络连接能力以便于下载必要的软件包。 #### 下载 Hadoop 安装包 访问官方或其他可信资源网站获取最新稳定版本的 Hadoop 软件包。例如，在本案例中提到的是 hadoop-3.1.3.tar.gz 文件[^1]。可以通过如下命令完成文件传输至目标服务器上的指定位置 `/opt` 目录下： ```bash scp /path/to/local/hadoop-3.1.3.tar.gz user@master:/opt/ ``` #### 创建存储目录结构 为了更好地管理大数据相关组件，建议创建统一的大数据工具根目录 `bigdata` 来存放所有关联程序及其配置文件夹。具体操作可以参考下面这条指令来实现[^2]: ```bash mkdir -p /opt/bigdata mv /opt/hadoop-3.1.3.tar.gz /opt/bigdata/ cd /opt/bigdata && tar -xzvf hadoop-3.1.3.tar.gz ln -s hadoop-3.1.3 hadoop ``` #### 配置 Java 环境路径 编辑 Hadoop 的环境设置脚本以加入正确的 JAVA_HOME 参数指向实际安装好的 JDK 地址: ```bash vim /opt/bigdata/hadoop/etc/hadoop/hadoop-env.sh ``` 找到类似 export JAVA_HOME 这样的行将其修改为你系统中的真实 java home value, 如 `/usr/lib/jvm/java-8-openjdk-amd64/`. #### 启动服务验证 最后一步就是尝试启动 hdfs 和 yarn 服务来进行初步的功能测试确保一切正常运行: ```bash start-dfs.sh jps # 查看进程列表判断 NameNode SecondaryNameNode DataNode 是否存在. start-yarn.sh yarn node -list # 列举当前集群内的节点状态信息. ``` 以上即完成了基本的单机模式下的 Apache Hadoop 构建过程概述[^4].