一.kafka設(shè)計(jì)解析

1. 思考問題
  1. kafka有哪些優(yōu)點(diǎn)?
  2. kafka存儲(chǔ)結(jié)構(gòu)如何設(shè)計(jì)的?
  3. kafka的高效性是怎么保證的?
  4. kafka的leader選舉策略是怎么樣的?
  5. kafka的消息生產(chǎn)消費(fèi)模式?有什么優(yōu)缺點(diǎn)?
  6. kafka的副本數(shù)配置對(duì)效率有哪些影響,如何優(yōu)化?
  7. kafka的有哪些實(shí)踐優(yōu)化策略?
  8. 基于隨機(jī)的partition策略,kafka的comsumer如何做到順序性消費(fèi)?
  9. kafka的failover機(jī)制是怎么樣的?
  10. 消息消費(fèi)有哪幾種模式?kafka consumer的消費(fèi)方式是怎樣的?
  11. consumer是如何做rebalance的?有什么優(yōu)劣?
  12. high level api 和low level api相比有什么區(qū)別?優(yōu)勢(shì)是什么?

2. 回答
  1. kafka的消息都是順序追加到partition中的,順序?qū)懘疟P比隨機(jī)寫內(nèi)存的效率還高;kafka的broker是無狀態(tài)的,不需要標(biāo)記哪些消息被哪些consumer過,不需要保證一條消息只能被同一個(gè)consuner gruop中的一個(gè)consumer消費(fèi),因此也不需要鎖機(jī)制;kafka在每個(gè)操作過程中盡量使用批處理;consumer在讀取數(shù)據(jù)的過程中,Kafka使用sendfile API來直接通過操作系統(tǒng)直接傳輸,而不用把數(shù)據(jù)拷貝到用戶空間

kafka參考資料

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容