CentOS HDFS配置文件在哪里

在CentOS系统中，HDFS（Hadoop Distributed File System）的配置文件通常位于Hadoop安装目录下的etc/hadoop文件夹中。以下是一些关键的配置文件及其路径：

HDFS主配置文件

1. core-site.xml

   • 路径：/etc/hadoop/core-site.xml
   • 描述：配置Hadoop的核心参数，如HDFS的默认文件系统URI。

2. hdfs-site.xml

   • 路径：/etc/hadoop/hdfs-site.xml
   • 描述：配置HDFS相关的参数，如副本因子、数据节点地址等。

3. yarn-site.xml

   • 路径：/etc/hadoop/yarn-site.xml
   • 描述：配置YARN相关的参数，如ResourceManager地址、NodeManager资源管理等。

4. mapred-site.xml

   • 路径：/etc/hadoop/mapred-site.xml
   • 描述：配置MapReduce相关的参数，如JobHistory服务器地址等。

其他相关配置文件

• hadoop-env.sh

  • 路径：/etc/hadoop/hadoop-env.sh
  • 描述：设置Hadoop运行时的环境变量，如Java路径、Hadoop临时目录等。

• yarn-env.sh

  • 路径：/etc/hadoop/yarn-env.sh
  • 描述：设置YARN运行时的环境变量。

• slaves

  • 路径：/etc/hadoop/slaves
  • 描述：列出所有数据节点的主机名或IP地址。

• masters

  • 路径：/etc/hadoop/masters
  • 描述：列出ResourceManager的主机名或IP地址（在YARN模式下）。

查看配置文件

你可以使用以下命令来查看这些配置文件的内容：

cat /etc/hadoop/core-site.xml
cat /etc/hadoop/hdfs-site.xml
cat /etc/hadoop/yarn-site.xml
cat /etc/hadoop/mapred-site.xml

修改配置文件

在修改配置文件之前，请确保你有足够的权限（通常是root权限）。修改完成后，需要重启Hadoop服务以使更改生效：

systemctl restart hadoop-hdfs-namenode
systemctl restart hadoop-hdfs-datanode
systemctl restart hadoop-yarn-resourcemanager
systemctl restart hadoop-yarn-nodemanager

请根据你的具体Hadoop版本和安装方式调整上述路径和服务名称。