文档

HDFS服务日志

更新时间:

HDFS服务的日志存储在/mnt/disk1/log/hadoop-hdfs目录下,本文介绍HDFS服务各组件对应日志的详细说明。

组件

日志

说明

ZKFailoverController(ZKFC)

hadoop-hdfs-zkfc-*.out

ZKFC的进程启动日志,部分启动异常会显示在out文件中。

hadoop-hdfs-zkfc-*.log

ZKFC的进程运行日志,包含ZKFC的内部日志。

zkfc-gc.log.0.current

ZKFC的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。

NameNode

hadoop-hdfs-namenode-*.out

NameNode的进程启动日志,部分启动异常会显示在out文件中。

hadoop-hdfs-namenode-*.log

NameNode的进程运行日志,包含NameNode的内部日志。

hdfs-audit.log

NameNode的audit日志。

namenode-gc.log.0.current

NameNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。

JournalNode

hadoop-hdfs-journalnode-*.out

JournalNode的进程启动日志,部分启动异常会显示在out文件中。

hadoop-hdfs-journalnode-*.log

JournalNode的进程运行日志,包含JournalNode的内部日志。

journalnode-gc.log.0.current

JournalNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。

DataNode

hadoop-hdfs-datanode-*.out

DataNode的进程启动日志,部分启动异常会显示在out文件中。

hadoop-hdfs-datanode-*.log

DataNode的进程运行日志,包含DataNode的内部日志。

datanode-gc.log.0.current

DataNode的JVM GC日志,EMR-5.8.0及之后版本、EMR-3.43.0及之后版本开始支持。