HDFS核心文章合集

前言

自2015年下半年起始阶段，在写作领域中，“Hadoop”相关内容逐渐成为笔者的关注焦点，“HDFS”作为核心组件更是得到了深入研究，并且涉及源码分析的系列文章也受到了较高的重视。除了对问题进行诊断与解决之外，“内部机制”的剖析也成为重要方向。经过几年的努力积累，“Hadoop”相关的文章数量已经达到70余篇。这些内容不仅成为个人知识积累的重要资源，并且见证了笔者从一名积极参与开源社区的贡献者成长为项目维护人（Committer）的过程。此外，同样地，这些内容也为对这一技术栈感兴趣的读者群体提供了很好的学习资料。随着经验的积累和内容量的增加，“帮助博客朋友来全局地系统地阅读和学习这些文章”的想法愈发成熟，并打算为此编写一篇索引目录页作为补充资源。此外，在早期的文章中有一部分已经整理成书（<<深度剖析HDFS>>）并正式出版了，请您移步左侧介绍区域查看相关信息

Federation

HDFS联邦架构是用来解决HDFS扩展性问题的一个解决方案。面对数据量快速增长的问题，在现有的架构中，默认只有一个NameNode会导致性能瓶颈。在该架构下，在一个集群内部可以同时支持多个Namespace（即NameNodes），而每个Namespace都可以共享相同的DataNodes。

HDFS采用了基于路由的联邦方案

Ozone