有副本就不会丢数据或中断服务吗?
不能保证。副本与校验有助于处理节点失效和数据损坏;NameNode 元数据服务的可用性还需要单独设计。原文停在“NameNode 不可靠”,不能据此判断所有 Hadoop 部署都只有单点。
三类问题分别看
| 问题 | 机制或证据 | 边界 |
|---|---|---|
| DataNode 失联 | 心跳、块报告、重新复制 | 修复需要时间和可用目标节点 |
| 数据块损坏 | 校验、其他健康副本 | 所有副本损坏时无法凭空恢复 |
| NameNode 故障 | HA 部署、日志共享与故障切换 | SecondaryNameNode 不是自动热备 |
只读检查的起点
在已配置权限和正确集群地址的 Hadoop 3.3.6 客户端使用:
hdfs dfsadmin -report
hdfs fsck /user/your-user/demo -files -blocks -locations
先将路径替换为自己有权限检查的小测试目录,避免对全量生产目录执行昂贵扫描。预期能看到节点与块位置、缺失或损坏信息;本轮没有运行集群,未给出模拟健康输出。
HA 演练还需核对 Active/Standby、共享编辑日志、fencing 与切换结果;不应只停止进程就宣布容灾验证成功。可靠性也不能代替备份、权限和误删除恢复设计。
继续:HDFS 命令使用边界。
整理范围与出处
本次依据下方版本资料整理说明与示例;历史导入资料的来源状态单独列示,不将技术参考认作原作者信息。原始发布日期与地址保留。