阅读量:2
Linux中查看Hadoop日志的方法如下:
-
定位日志路径
- 默认路径:
$HADOOP_HOME/logs(如/usr/local/hadoop/logs),包含NameNode、DataNode、ResourceManager等组件日志。 - 配置文件可自定义路径(如修改
log4j.properties)。
- 默认路径:
-
常用查看命令
- 实时查看:
tail -f <日志文件>(如tail -f hadoop-hadoop-namenode-*.log)。 - 查看前N行:
head -n 10 <日志文件>。 - 搜索关键词:
grep "ERROR" <日志文件>。 - 分页查看:
less <日志文件>(支持搜索,按q退出)。
- 实时查看:
-
工具与Web界面
- Hadoop Web界面:通过ResourceManager(端口8088)或NameNode(端口50070)查看作业日志。
- 命令行工具:
yarn logs查看作业日志,hadoop fs查看HDFS日志。
示例:
- 查看DataNode实时日志:
tail -f $HADOOP_HOME/logs/hadoop-hadoop-datanode-*.log。 - 搜索任务失败日志:
grep "FAILED" $HADOOP_HOME/logs/userlogs/*.log。
以上就是关于“Linux中Hadoop的日志如何查看”的相关介绍,筋斗云是国内较早的云主机应用的服务商,拥有10余年行业经验,提供丰富的云服务器、租用服务器等相关产品服务。云服务器资源弹性伸缩,主机vCPU、内存性能强悍、超高I/O速度、故障秒级恢复;电子化备案,提交快速,专业团队7×24小时服务支持!
简单好用、高性价比云服务器租用链接:https://www.jindouyun.cn/product/cvm