深入理解分布式技術(shù) - Kafka 高性能原理剖析

文章目錄

概述

磁盤順序讀寫

批量操作優(yōu)化

Sendfile 零拷貝

MMAP 技術(shù)

小結(jié)

概述

Kafka 所實現(xiàn)的高性能不需要太高配置的機器，它使用普通服務(wù)器就能實現(xiàn) TB 級別的傳輸性能。這一點也是 Kafka 對外宣傳的一個特性，也正是因為這一點，Kafka 被廣泛運用于大數(shù)據(jù)處理、流式計算、各類日志監(jiān)控等需要處理海量數(shù)據(jù)的場景。

為什么呢？

磁盤順序讀寫

Kafka 消息是存儲在磁盤上的，眾所周知，普通的機械磁盤讀取是比較慢的，那 Kafka 文件在磁盤上，如何實現(xiàn)高性能的讀寫呢？

Kafka 對磁盤的應(yīng)用

Kafka 分布式

版權(quán)聲明：本文內(nèi)容由網(wǎng)絡(luò)用戶投稿，版權(quán)歸原作者所有，本站不擁有其著作權(quán)，亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實的內(nèi)容，請聯(lián)系我們jiasou666@gmail.com 處理，核實后本網(wǎng)站將在24小時內(nèi)刪除侵權(quán)內(nèi)容。