标签:Hadoop
文件与 block 的信息如何保存 文件分割后,会有一个“文件 -> block”的映射,存储在 NameNo […]
Hadoop NameNode 维护了文件与数据块(block)的映射关系以及数据块与数据节点的映射关系,就是 […]
Hadoop Shuffle 什么是 Shuffle 机制 在 MapReduce 中数据从 Map 阶段传递 […]
Standalone 集群模式 MapReduce 提交流程 MapReduce 的整个工作过程如下图所示,它 […]
原文:http://blog.cloudera.com/blog/2009/02/the-small-file […]
背景 在 HDFS 中,可靠性通过多副本的方式来实现,通常每一份数据都有两个副本,使得存储利用率很低仅为1/3 […]
资源调度器是 Hadoop Yarn 中最核心的组件之一。是 ResourceManager 中的一个插拔式服 […]
前置知识介绍 NameNode 单点问题 Hadoop 1.x 在 HDFS 集群中 NameNode 存在单 […]