linux

Linux上Hadoop安装步骤有哪些

小樊
43
2025-08-19 18:06:17
栏目: 智能运维

Linux上安装Hadoop的步骤如下:

  1. 准备工作
    • 安装Java JDK,建议使用OpenJDK 8或11。
    • 配置网络,设置静态IP地址等。
    • 配置主机名并在/etc/hosts中添加映射。
    • 配置SSH免密登录。
  2. 下载与解压Hadoop
    • 从官网下载稳定版本,如wget https://downloads.apache.org/hadoop/common/hadoop-3.3.5/hadoop-3.3.5.tar.gz
    • 解压到指定目录,如/usr/local/,并重命名。
  3. 配置环境变量
    • 编辑~/.bashrc/etc/profile,添加HADOOP_HOMEPATH等变量。
    • 使配置生效,使用source命令。
  4. 配置Hadoop文件
    • 修改core-site.xml,设置fs.defaultFS等。
    • 修改hdfs-site.xml,设置副本数等。
    • 如需,修改mapred-site.xmlyarn-site.xml
  5. 格式化HDFS:在主节点执行hdfs namenode -format
  6. 启动Hadoop集群:执行start-dfs.shstart-yarn.sh
  7. 验证安装:用jps命令查看进程,或访问Web UI(如HDFS的http://<namenode IP>:9870)。

0
看了该问题的人还看了