一文讀懂什么是分布式流處理系統Kafka

Kafka是一個分布式流處理系統，流處理系統使它可以像消息隊列一樣publish或者subscribe消息，分布式提供了容錯性，并發處理消息的機制。

2017-12-12 標簽：pythonkafka 6748 0

Kafka框架的工作原理及工作流程

Kafka在大數據技術生態當中，以作為消息系統而聞名，面對活躍的流式數據，提供高吞吐量的服務，在實時大數據處理場景下，可以說是一大利器，國內外大廠都有應...

2021-01-15 標簽：大數據kafka 5257 0

Rocket MQ存儲與Kafka存儲對比分析

Kafka單機超過64個隊列/分區，Load會發生明顯的飆高現象，隊列越多，load越高，發送消息響應時間變長。Kafka分區數無法過多的問題，Rock...

2021-01-14 標簽：存儲kafka 3395 0

Kafka架構技術：Kafka的架構和客戶端API設計

Kafka 給自己的定位是事件流平臺（event stream platform）。因此在消息隊列中經常使用的 "消息"一詞，在 K...

2023-10-10 標簽：控制器JAVAAPI 2383 0

監控Kafka集群的常用的方法和工具介紹

JMX監控：Kafka提供了JMX（Java Management Extensions）接口，可以通過JMX來監控和管理Kafka集群。您可以使用JC...

2023-08-30 標簽：監控集群監控kafka 2131 0

kafka設計原理的深度探討

Kafka簡介 Kafka是一種分布式的，基于發布/訂閱的消息系統。主要設計目標如下： 以時間復雜度為O(1)的方式提供消息持久化能力，即使對TB級以上...

2020-10-08 標簽：服務器異步通信kafka 2018 0

關于MQ的主流的消息中間件對比解析

RabbitMQ 類似有生產階段、存儲階段、消費階段，相較 RabbitMQ 的架構，增加了 NameServer 集群，橫向拓展能力較好。參考的 Ka...

2023-07-05 標簽：中間件消息中間件kafka 1279 0

想要kafka好用你就得知道這些工具

工欲善其事，必先利其器。本文主要分享一下消息中間件kafka安裝部署的過程，以及我平時在工作中針對kafka用的一些客戶端工具和監控工具。

2023-05-22 標簽：配置kafka 1238 0

面試官：Kafka會丟消息嗎？

許多開發人員普遍認為，Kafka 的設計本身就能保證不會丟失消息。然而，Kafka 架構和配置的細微差別會導致消息的丟失。我們需要了解它如何以及何時可能...

2024-04-29 標簽：架構線程kafka 1039 0

Kafka為什么要拋棄ZooKeeper？

ZooKeeper 是一個開源的分布式協調服務框架，你也可以認為它是一個可以保證一致性的分布式(小量)存儲系統。特別適合存儲一些公共的配置信息、集群的一...

2023-05-18 標簽：控制器存儲系統kafka 1016 0

kafka基本原理詳解

今天浩道跟大家分享一篇關于kafka相關原理的硬核干貨，可以說即使你沒有接觸過kafka，也可以秒懂，一起看看！

2024-01-03 標簽：Linuxpythonkafka 900 0

如何保證kafka消息不丟失

如果在簡歷上寫了使用過kafka消息中間件，面試官大概80%的概率會問你："如何保證kafka消息不丟失？"反正我是屢試不爽。

2023-12-19 標簽：代碼線程kafka 742 0