HDFS服务的日志存储在/mnt/disk1/log/hadoop-hdfs目录下,本文介绍HDFS服务各组件对应日志的详细说明。
组件 | 日志 | 说明 |
ZKFailoverController(ZKFC) | hadoop-hdfs-zkfc-*.out | ZKFC的进程启动日志,部分启动异常会显示在out文件中。 |
hadoop-hdfs-zkfc-*.log | ZKFC的进程运行日志,包含ZKFC的内部日志。 | |
zkfc-gc.log.0.current | ZKFC的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。 | |
NameNode | hadoop-hdfs-namenode-*.out | NameNode的进程启动日志,部分启动异常会显示在out文件中。 |
hadoop-hdfs-namenode-*.log | NameNode的进程运行日志,包含NameNode的内部日志。 | |
hdfs-audit.log | NameNode的audit日志。 | |
namenode-gc.log.0.current | NameNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。 | |
JournalNode | hadoop-hdfs-journalnode-*.out | JournalNode的进程启动日志,部分启动异常会显示在out文件中。 |
hadoop-hdfs-journalnode-*.log | JournalNode的进程运行日志,包含JournalNode的内部日志。 | |
journalnode-gc.log.0.current | JournalNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。 | |
DataNode | hadoop-hdfs-datanode-*.out | DataNode的进程启动日志,部分启动异常会显示在out文件中。 |
hadoop-hdfs-datanode-*.log | DataNode的进程运行日志,包含DataNode的内部日志。 | |
datanode-gc.log.0.current | DataNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。 |