一、为何要查看Hadoop日志？

想象一下你正搭建一个高大可用Hadoop集群，却找到有些节点一下子挂掉了。这时候，你兴许会陷入困境，不晓得问题出在哪里。其实解决问题的关键就在于查看Hadoop日志。本文将带你轻巧松掌握怎么在Debian系统中查看Hadoop日志。

二、 Hadoop日志存放位置与格式

在Debian系统中，Hadoop的日志通常存放在各个节点的$HADOOP_HOME/logs目录下文件名格式一般为hadoop-*.log，其中*代表服务名称或时候戳等标识。

三、 查看日志文件的方法

1. 用文本编辑器查看

你能用nano、vim或emacs等文本编辑器打开并编辑日志文件。比方说 用以下命令打开yarn-*.log文件：

nano /usr/local/hadoop/logs/yarn-*.log

2. 用Hadoop命令行工具查看

用hdfs dfs命令来查看HDFS中的日志文件，或用yarn logs命令来查看作业的日志。

3. 用第三方工具查看

能用一些第三方工具来收集、 琢磨和展示Hadoop集群的日志，比方说White Elephant。

四、 案例琢磨：怎么定位错误

hadoop jar myjob.jar myjob

错误提示如下：

java.lang.RuntimeException: org.apache.hadoop.mapred.InvalidInputException: Input file does not exist: /input/myinput.txt

这时你能通过查看MapReduce的日志文件来定位错误原因。用以下命令查看mapred-*.log文件：

nano /usr/local/hadoop/logs/mapred-*.log

在日志文件中搜索"Input file does not exist"，找到相关错误信息。这样，你就能够定位到错误原因，并解决问题。

在Debian系统中查看Hadoop日志并不麻烦，只需掌握一些基本方法即可。通过查看日志文件，你能飞迅速定位错误原因，搞优良Hadoop集群的稳稳当当性。希望本文能帮你轻巧松查看Debian系统中的Hadoop日志。