阅读量:3
以下是Ubuntu环境下HDFS的故障排查方法：
- 查看日志
- 检查NameNode、DataNode等组件日志（路径：
/var/log/hadoop-hdfs/），定位错误信息。
- 检查NameNode、DataNode等组件日志（路径：
- 使用HDFS命令行工具
hdfs dfsadmin -report：查看集群状态、节点健康信息。hdfs fsck：检查文件系统一致性，修复损坏块（-files -blocks -locations参数）。
- 检查配置文件
- 确保
core-site.xml、hdfs-site.xml等配置正确，如fs.defaultFS、副本因子等。
- 确保
- 监控集群状态
- 通过Web UI（如NameNode的
http://主机:9870）查看节点状态、磁盘使用等。 - 使用Ganglia、Prometheus等工具监控资源使用（CPU、内存、磁盘I/O）。
- 通过Web UI（如NameNode的
- 排查网络与权限
- 检查节点间网络连通性（
ping、telnet端口），确认防火墙未拦截HDFS端口（默认8020等）。 - 确认用户权限，使用
hdfs dfs -chmod/-chown调整文件权限，或通过sudo -u hdfs执行命令。
- 检查节点间网络连通性（
- 处理常见问题
- 安全模式：若NameNode进入安全模式，使用
hdfs dfsadmin -safemode leave退出。 - 磁盘空间不足：通过
df -h检查DataNode磁盘，清理或扩容。
- 安全模式：若NameNode进入安全模式，使用
- 重启服务
- 若临时故障，可尝试重启HDFS服务（先停止再启动）。
参考来源：
以上就是关于“Ubuntu HDFS故障排查有哪些方法”的相关介绍，筋斗云是国内较早的云主机应用的服务商，拥有10余年行业经验，提供丰富的云服务器、租用服务器等相关产品服务。云服务器资源弹性伸缩，主机vCPU、内存性能强悍、超高I/O速度、故障秒级恢复；电子化备案，提交快速，专业团队7×24小时服务支持！
简单好用、高性价比云服务器租用链接：https://www.jindouyun.cn/product/cvm