1、Kafka 介绍Apache Kafka最初由LinkedIn公司基于独特的设计实现为一个分布式的提交日志系统，之后成为Apache项目的一部分。Kafka号称大数据的杀手锏，谈到大数据领域内的消息传输，则绕不开Kafka，这款为大数据而生的消息中间件，以其百万级TPS的吞吐量名声大噪，迅速成为大数据领域的宠儿，在数据采集、传输、存储的过程中发[...]

1.Kafka的作用1）数据缓冲：将上游数据接收到消息队列中，暂时存放，下游服务可以按照自己的节奏进行处理。上游数据一旦有大量的突发流量，保证了下游服务不会受到影响。2）解耦以及扩展：将上游服务和下游服务通过消息队列进行通信。消息队列可以作为一个接口层，只要上游服务以及下游服务遵守接口的规范，便可以随意添加新的服务器。3）冗余及健壮性：一个消息被保[...]

2011年，LinkedIn的三名员工Jay Kreps、Neha Narkhede和Jun Rao开发了一种技术工具，帮助这个职业人脉网站处理其大量的信息、网络请求和个人资料浏览。在意识到数据流可能对其他公司，而不仅仅是LinkedIn来说也是个问题之后，这三个人对该软件进行了开源，然后在2014年围绕它成立了一个名为Confluent的公司。 [...]

Apache Kafka是一个分布式消息队列，它适合离线和在线消息处理。 Kafka可以将消息保留在磁盘上，并在群集内复制以防止消息数据丢失。另外，Kafka可与Apache Storm和Spark非常好地集成，用于实时流式数据分析。Apache Kafka 3.0.0 正式发布，这是一个重要的版本更新，其中包括许多新的功能。在众多更新中，最重要的[...]

我知道，每个群主在建群的时候都有一个美好的理想---打造一个高质量的技术交流群。但是，随着时间的流失，群主的热情锐减，好端端的群将会变成一座“死宅”，因为维护一个群的时间和精力成本很大。就拿我这个“红黑鸟社群”来说，成立于2020年5月12日，距今已经运行了531天，总共加入了54名成员。客观的说，这个群有点不温不火。但是，比起外界热火朝天的“内卷[...]