本文介绍: 关于Kafka部分的核心知识进行一网打尽,包括Kafka的基本概念,基本架构,工作流程,存储机制,生产策略和消费策略,通过一篇文章串联面试重点,并且帮助加强日常基础知识的理解,全局思维导图如下所示从Kafka的基本定义和应用场景等说起Kafka 是一个分布式流式处理平台,它被设计用于构建实时的数据管道和流应用程序。Kafka 主要用于处理高吞吐量的数据流,并支持容错处理。流平台具有三个关键功能:Kafka 主要有两大应用场景:当然还有一些其它的应用场景消息队列:Kafka 可以作为一个高性能的消息队列系统

关于Kafka部分的核心知识进行一网打尽,包括Kafka的基本概念,基本架构,工作流程,存储机制,生产策略和消费策略,通过一篇文章串联面试重点,并且帮助加强日常基础知识的理解,全局思维导图如下所示
在这里插入图片描述

基本概念

从Kafka的基本定义和应用场景等说起

Kafka 是什么?主要应用场景有哪些?

Kafka 是一个分布式流式处理平台,它被设计用于构建实时的数据管道和流应用程序。Kafka 主要用于处理高吞吐量的数据流,并支持容错处理。流平台具有三个关键功能:

  1. 消息队列【传递消息】:发布和订阅消息流,这个功能类似于消息队列,这也是 Kafka 也被归类为消息队列的原因。
  2. 容错的持久方式存储记录消息流【存储消息】:Kafka 会把消息持久化到磁盘,有效避免了消息丢失的风险
  3. 流式处理平台【处理消息】: 在消息发布的时候进行处理,Kafka 提供了一个完整的流式处理类库

Kafka 主要有两大应用场景:

  • 消息队列:建立实时流数据管道,以可靠地在系统或应用程序之间获取数据

原文地址:https://blog.csdn.net/sinat_33087001/article/details/135793648

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。

如若转载,请注明出处:http://www.7code.cn/show_62407.html

如若内容造成侵权/违法违规/事实不符,请联系代码007邮箱:suwngjj01@126.com进行投诉反馈,一经查实,立即删除!

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注