-
甘特图怎么制作更方便？甘特图制作方法" title="甘特图怎么制作更方便？甘特图制作方法" width="200" height="150">
-
OKR的实施标准步骤是什么？成功实施落地OKR的要点" title="OKR的实施标准步骤是什么？成功实施落地OKR的要点" width="200" height="150">
-
Hadoop权威指南：大数据的存储与分析》—5 Hadoop的I/O操作" title="《Hadoop权威指南：大数据的存储与分析》—5 Hadoop的I/O操作" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—5 Hadoop的I/O操作
第5章 Hadoop的I/O操作 Hadoop自带一套原子操作用于数据I/O操作。其中有一些技术比Hadoop本身更常用，如数据完整性保持和压缩，但在处理多达好几个TB的数据集时，特别值得关注。其他一...
-
Hadoop权威指南：大数据的存储与分析》—4.3.2 容量调度器配置" title="《Hadoop权威指南：大数据的存储与分析》—4.3.2 容量调度器配置" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—4.3.2 容量调度器配置
4.3.2 容量调度器配置 容量调度器允许多个组织共享一个Hadoop集群，每个组织可以分配到全部集群资源的一部分。每个组织被配置一个专门的队列，每个队列被配置为可以使用一定的集群资源。队列可以进一...
-
Hadoop权威指南：大数据的存储与分析》—5.2.3 在MapReduce中使用压缩" title="《Hadoop权威指南：大数据的存储与分析》—5.2.3 在MapReduce中使用压缩" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—5.2.3 在MapReduce中使用压缩
5.2.3 在MapReduce中使用压缩 前面讲到通过CompressionCodecFactory来推断CompressionCodec时指出，如果输入文件是压缩的，那么在根据文件扩展名推断出相...
-
Hadoop权威指南：大数据的存储与分析》—3.6.3 一致模型" title="《Hadoop权威指南：大数据的存储与分析》—3.6.3 一致模型" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—3.6.3 一致模型
3.6.3 一致模型 文件系统的一致模型(coherency model)描述了文件读/写的数据可见性。HDFS为性能牺牲了一些POSIX 要求，因此一些操作与你期望的可能不同。 新建一个文件之后，...
-
Hadoop权威指南：大数据的存储与分析》—5.1.3 ChecksumFileSystem" title="《Hadoop权威指南：大数据的存储与分析》—5.1.3 ChecksumFileSystem" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—5.1.3 ChecksumFileSystem
5.1.3 ChecksumFileSystem LocalFileSystem通过ChecksumFileSystem来完成自己的任务，有了这个类，向其他文件系统(无校验和系统)加入校验和就非常简...
-
Hadoop权威指南：大数据的存储与分析》—4.3.3 公平调度器配置" title="《Hadoop权威指南：大数据的存储与分析》—4.3.3 公平调度器配置" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—4.3.3 公平调度器配置
4.3.3 公平调度器配置 公平调度器旨在为所有运行的应用公平分配资源。图4-3展示了同一个队列中的应用是如何实现资源公平共享的。然而公平共享实际也可以在多个队列间工作，后续会对此进行分析。 术语q...
-
Hadoop权威指南：大数据的存储与分析》—3.2.3 块缓存" title="《Hadoop权威指南：大数据的存储与分析》—3.2.3 块缓存" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—3.2.3 块缓存
3.2.3 块缓存 通常datanode从磁盘中读取块，但对于访问频繁的文件，其对应的块可能被显式地缓存在datanode的内存中，以堆外块缓存(off-heap block cache)的形式存在...
-
Hadoop权威指南：大数据的存储与分析》" title="《Hadoop权威指南：大数据的存储与分析》" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》
Hadoop权威指南 大数据的存储与分析(第4版) Hadoop: The Definitive Guide Storage and Analysis at Internet Scale Tom Wh...
-
Hadoop权威指南：大数据的存储与分析》—4.3 YARN中的调度" title="《Hadoop权威指南：大数据的存储与分析》—4.3 YARN中的调度" width="200" height="150">
《Hadoop权威指南：大数据的存储与分析》—4.3 YARN中的调度
4.3 YARN中的调度 理想情况下，YARN应用发出的资源请求应该立刻给予满足。然而现实中资源是有限的，在一个繁忙的集群上，一个应用经常需要等待才能得到所需的资源。YARN调度器的工作就是根据既定...
-
MapReduce 的核心知识点，你都 get 到了吗 ?（干货文章，建议收藏！）
前言 大家好，我是梦想家！ 众所周知，Hadoop 中最核心的两大组件就是 HDFS 和 MapReduce。其中 HDFS 提供了承载海量数据存储的能力，而 MapReduce 则提供了海量数据高并...
