Hadoop在Ubuntu上的数据存储方式

Hadoop在Ubuntu上通过**HDFS（Hadoop分布式文件系统）**实现数据存储，核心机制如下：

1. 数据分块存储：将大文件切分为固定大小的数据块（默认128MB），分散存储在集群的DataNode节点上。
2. 元数据管理：NameNode节点负责维护文件系统的目录结构、文件与数据块的映射关系等元数据。
3. 副本机制：每个数据块默认存储3个副本，分布在不同DataNode上，确保数据高可用性和容错性。
4. 存储目录配置：通过hdfs-site.xml配置DataNode的数据存储路径（如dfs.datanode.data.dir）和NameNode的元数据存储路径（如dfs.namenode.name.dir）。
5. 文件操作命令：使用hadoop fs命令上传、下载、删除文件，例如hdfs dfs -put localfile.txt /将本地文件上传至HDFS根目录。

注：伪分布式模式下，NameNode和DataNode可运行在同一节点，需通过配置文件指定存储路径并格式化NameNode。