-
甘特圖怎么制作更方便?甘特圖制作方法" title="甘特圖怎么制作更方便?甘特圖制作方法" width="200" height="150">
-
OKR的實施標準步驟是什么?成功實施落地OKR的要點" title="OKR的實施標準步驟是什么?成功實施落地OKR的要點" width="200" height="150">
-
Hadoop權威指南:大數據的存儲與分析》—5 Hadoop的I/O操作" title="《Hadoop權威指南:大數據的存儲與分析》—5 Hadoop的I/O操作" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—5 Hadoop的I/O操作
所有內容 ?2025-04-04第5章 Hadoop的I/O操作 Hadoop自帶一套原子操作用于數據I/O操作。其中有一些技術比Hadoop本身更常用,如數據完整性保持和壓縮,但在處理多達好幾個TB的數據集時,特別值得關注。其他一...
-
Hadoop權威指南:大數據的存儲與分析》—4.3.2 容量調度器配置" title="《Hadoop權威指南:大數據的存儲與分析》—4.3.2 容量調度器配置" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—4.3.2 容量調度器配置
所有內容 ?2025-04-044.3.2? 容量調度器配置 容量調度器允許多個組織共享一個Hadoop集群,每個組織可以分配到全部集群資源的一部分。每個組織被配置一個專門的隊列,每個隊列被配置為可以使用一定的集群資源。隊列可以進一...
-
Hadoop權威指南:大數據的存儲與分析》—5.2.3 在MapReduce中使用壓縮" title="《Hadoop權威指南:大數據的存儲與分析》—5.2.3 在MapReduce中使用壓縮" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—5.2.3 在MapReduce中使用壓縮
所有內容 ?2025-04-035.2.3? 在MapReduce中使用壓縮 前面講到通過CompressionCodecFactory來推斷CompressionCodec時指出,如果輸入文件是壓縮的,那么在根據文件擴展名推斷出相...
-
Hadoop權威指南:大數據的存儲與分析》—3.6.3 一致模型" title="《Hadoop權威指南:大數據的存儲與分析》—3.6.3 一致模型" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—3.6.3 一致模型
所有內容 ?2025-04-033.6.3? 一致模型 文件系統的一致模型(coherency model)描述了文件讀/寫的數據可見性。HDFS為性能犧牲了一些POSIX 要求,因此一些操作與你期望的可能不同。 新建一個文件之后,...
-
Hadoop權威指南:大數據的存儲與分析》—5.1.3 ChecksumFileSystem" title="《Hadoop權威指南:大數據的存儲與分析》—5.1.3 ChecksumFileSystem" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—5.1.3 ChecksumFileSystem
所有內容 ?2025-04-035.1.3? ChecksumFileSystem LocalFileSystem通過ChecksumFileSystem來完成自己的任務,有了這個類,向其他文件系統(無校驗和系統)加入校驗和就非常簡...
-
Hadoop權威指南:大數據的存儲與分析》—4.3.3 公平調度器配置" title="《Hadoop權威指南:大數據的存儲與分析》—4.3.3 公平調度器配置" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—4.3.3 公平調度器配置
所有內容 ?2025-04-024.3.3? 公平調度器配置 公平調度器旨在為所有運行的應用公平分配資源。圖4-3展示了同一個隊列中的應用是如何實現資源公平共享的。然而公平共享實際也可以在多個隊列間工作,后續會對此進行分析。 術語q...
-
Hadoop權威指南:大數據的存儲與分析》—3.2.3 塊緩存" title="《Hadoop權威指南:大數據的存儲與分析》—3.2.3 塊緩存" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—3.2.3 塊緩存
所有內容 ?2025-04-013.2.3? 塊緩存 通常datanode從磁盤中讀取塊,但對于訪問頻繁的文件,其對應的塊可能被顯式地緩存在datanode的內存中,以堆外塊緩存(off-heap block cache)的形式存在...
-
Hadoop權威指南:大數據的存儲與分析》" title="《Hadoop權威指南:大數據的存儲與分析》" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》
所有內容 ?2025-04-01Hadoop權威指南 大數據的存儲與分析(第4版) Hadoop: The Definitive Guide Storage and Analysis at Internet Scale Tom Wh...
-
Hadoop權威指南:大數據的存儲與分析》—4.3 YARN中的調度" title="《Hadoop權威指南:大數據的存儲與分析》—4.3 YARN中的調度" width="200" height="150">
《Hadoop權威指南:大數據的存儲與分析》—4.3 YARN中的調度
所有內容 ?2025-04-014.3? YARN中的調度 理想情況下,YARN應用發出的資源請求應該立刻給予滿足。然而現實中資源是有限的,在一個繁忙的集群上,一個應用經常需要等待才能得到所需的資源。YARN調度器的工作就是根據既定...
-
MapReduce 的核心知識點,你都 get 到了嗎 ?(干貨文章,建議收藏!)
所有內容 ?2025-04-01前言 大家好,我是夢想家! 眾所周知,Hadoop 中最核心的兩大組件就是 HDFS 和 MapReduce。其中 HDFS 提供了承載海量數據存儲的能力,而 MapReduce 則提供了海量數據高并...