Kafka高性能消息中间件 分布式集群安装架构原理

课程简介:
Kafka 是分布式发布-订阅消息系统。它最初由 LinkedIn 公司开发,使用 Scala语言编写,之后成为 Apache 项目的一部分。Kafka 是一个分布式的,可划分的,多订阅者,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。
Kafka的特点
同时为发布和订阅提供高吞吐量。据了解,Kafka 每秒可以生产约 25 万消息(50 MB),每秒处理 55 万消息(110 MB)。
可进行持久化操作。将消息持久化到磁盘,因此可用于批量消费,例如 ETL,以及实时应用程序。通过将数据持久化到硬盘以及 replication 防止数据丢失。
分布式系统,易于向外扩展。所有的 producer、broker 和 consumer 都会有多个,均为分布式的。无需停机即可扩展机器。
消息被处理的状态是在 consumer 端维护,而不是由 server 端维护。当失败时能自动平衡。
支持 online 和 offline 的场景。












![[其他] Netty实战高性能分布式RPC(Dubbo分布式底层实现)](https://static.kouhao8.com/sucaidashi/xkbb/b78556a80e3ad06cd597336a2b3b06c8.png?x-oss-process=image/format,webp/resize,w_88/crop,w_88,h_88,g_nw)








![[MySQL] MySQL大型分布式集群](https://static.kouhao8.com/sucaidashi/xkbb/7ecba106053a8a1e9fecf2f952516719.jpg?x-oss-process=image/format,webp/resize,w_88/crop,w_88,h_88,g_nw)
![[分布式服务框架/Dubbo/ZooKeeper] Kafka原理剖析及实战演练 Kafka理论+实战视频教程 Kafka完美入门视频教程 炼数成金](https://static.kouhao8.com/sucaidashi/xkbb/6026b3822bfa5a38d74738ec1b4fac32.jpg?x-oss-process=image/format,webp/resize,w_88/crop,w_88,h_88,g_nw)





相关资源