2026 28 3月 Hadoop 2026/3/28 00:04:48 针对Hadoop集群中NameNode内存溢出与单点故障的高可用性架构设计与实施指南 2026-03-28 Zhang Ying 1 次阅读 本文详细介绍了 Hadoop 集群中 NameNode 内存溢出与单点故障的问题，分析了问题的原因，设计了高可用性架构并给出实施指南。通过 Java 和 Shell 示例进行说明，还介绍了应用场景、技术优缺点和注意事项，帮助开发者解决 Hadoop 集群的相关问题。 High Availability Hadoop Memory Overflow NameNode Single Point of Failure
2026 11 2月 Hadoop 2026/2/11 03:27:35 HDFS小文件合并策略解决NameNode内存溢出问题 2026-02-11 Liu Jie 11 次阅读 本文详细介绍了HDFS小文件导致NameNode内存溢出的问题，包括小文件的定义、带来的危害。接着阐述了基于时间、文件数量和文件大小的小文件合并策略，并给出了详细的Java和Python示例代码。还说明了策略的选择与实施步骤，以及在合并过程中需要注意的数据一致性、备份恢复和系统负载等问题。最后总结了小文件合并的重要性和作用，帮助读者有效解决HDFS小文件问题，提升系统性能。 Memory Overflow HDFS Small File Merge NameNode