1. 准备Linux环境

在Linux上使用Hadoop文件系统前，需完成基础环境配置：

• 确保Linux系统版本兼容Hadoop版本。
• 安装Java环境，Hadoop依赖于Java。
• 配置Java环境变量，确保系统识别Java。

2. 下载与安装Hadoop

前往Hadoop官网下载适合Linux版本的安装包，比方说hadoop-3.3.4.tar.gz。

解压安装包到指定目录，如/usr/local/hadoop。

设置环境变量：

export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

3. 配置Hadoop核心文件

进入$HADOOP_HOME/etc/hadoop目录， 修改以下关键配置文件：

• core-site.xml配置Hadoop的运行环境，如HDFS的NameNode地址。
• hdfs-site.xml配置HDFS的运行参数， 如存储路径、副本数等。
• mapred-site.xml配置MapReduce的运行参数，如MapReduce的JobTracker地址等。
• yarn-site.xml配置YARN资源管理器的运行参数，如ResourceManager地址等。

4. 启动HDFS服务

施行以下命令启动HDFS服务：

start-dfs.sh

使用以下命令验证HDFS状态：

jps

如果看到NameNode和DataNode进程，则表示HDFS服务已启动。

5. 使用HDFS命令行工具

Hadoop提供hadoop fs和hdfs dfs操作HDFS，常见操作如下：

• hdfs dfs -put /local/path /hdfs/path将本地文件上传到HDFS。
• hdfs dfs -get /hdfs/path /local/path从HDFS下载文件到本地。
• hdfs dfs -ls /列出HDFS中的文件和目录。

6. 挂载HDFS到Linux文件系统

若需将HDFS像本地目录一样访问， 可使用fuse-dfs工具：

sudo fuse-dfs dfs://localhost:9000 /mnt/hdfs -o nonempty

挂载后可通过/mnt/hdfs路径直接访问HDFS文件。

7. 关闭HDFS服务

使用以下命令关闭HDFS服务：

stop-dfs.sh

8. 使用Hadoop的其他功能

Hadoop不仅提供文件存储功能， 还包括MapReduce、YARN等大数据处理功能。

• hadoop jar hadoop-mapreduce-examples.jar wordcount /input /output使用MapReduce统计单词出现次数。
• yarn jar hadoop-mapreduce-examples.jar wordcount /input /output使用YARN运行MapReduce作业。

9.

Hadoop文件系统在Linux上的使用相对简单， 通过以上步骤，您已经可以开始在Linux上使用Hadoop文件系统了。祝您使用愉快！

---