CentOS Hadoop 安装步骤是什么

以下是在CentOS上安装Hadoop的步骤：

1. 安装Java：使用命令sudo yum install -y java-1.8.0-openjdk-devel安装OpenJDK。
2. 创建Hadoop用户：执行sudo adduser hadoop_user和sudo passwd hadoop_user创建并设置用户密码。
3. 配置SSH免密登录：切换到hadoop用户，执行ssh-keygen -t rsa -P ""生成密钥，再通过cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys和chmod 0600 ~/.ssh/authorized_keys配置公钥，最后用ssh-copy-id将公钥分发到其他节点。
4. 下载并解压Hadoop：从官网下载，如sudo wget https://downloads.apache.org/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz，然后解压到指定目录，如/opt/hadoop。
5. 配置环境变量：编辑~/.bashrc，添加export HADOOP_HOME=/opt/hadoop等环境变量，执行source ~/.bashrc使其生效。
6. 配置Hadoop：进入$HADOOP_HOME/etc/hadoop目录，编辑hadoop-env.sh设置Java路径，编辑core-site.xml配置文件系统信息，编辑hdfs-site.xml配置HDFS参数，编辑mapred-site.xml配置MapReduce框架，编辑yarn-site.xml配置YARN资源管理器。
7. 格式化HDFS：执行hdfs namenode -format。
8. 启动Hadoop：使用$HADOOP_HOME/sbin/start-dfs.sh和$HADOOP_HOME/sbin/start-yarn.sh启动集群。