在Ubuntu上管理HDFS文件系统,首先要安装配置Hadoop环境,然后使用Shell命令或Java API进行操作。具体如下:
sudo apt update && sudo apt upgrade -y
,sudo apt install -y build-essential openssh-server
。JAVA_HOME
环境变量。core-site.xml
、hdfs-site.xml
等。hdfs namenode -format
,启动HDFS服务:start-dfs.sh
。hdfs dfs -mkdir
创建目录,hdfs dfs -ls
查看目录,hdfs dfs -put
上传文件,hdfs dfs -get
下载文件,hdfs dfs -rm
删除文件或目录。hdfs dfsadmin -report
查看集群状态。FileSystem
对象,通过调用其方法实现文件操作,如fs.mkdirs()
创建目录等。