Docker 安装kafka 并创建topic 进行消息通信

本文介绍: Ap ac he Kaf k a是一个分布式流处理平台，用于构建高性能、可扩展的实时数据流应用程序。本文将介绍如何使用Doc k e r 容器化技术来安装和配置Ap ac he Kaf k a。通过使用Doc ker 容器化技术，我们可以方便地安装和配置Ap ac he Kaf k a，快速搭建一个可用的Kafka 集群。这为我们开发和测试实时数据流应用程序提供了便利，同时也提供了良好的可扩展性和灵活性。

Apac he Kafka是一个分布式流处理平台，用于构建高性能、可扩展的实时数据流应用程序。本文将介绍如何使用Do cker 容器化技术来安装和配置Apac he Kafka。

一、使用镜像安装

1、kafka安装必须先安装Zo okpper

2、下载镜像

docker pull wurstmeister/kafka

3、查看 下载好的镜像

docker images

4、启动Kafka

docker run -d --name kafka --publish 9092:9092  --link zookeeper  --env KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181  --env KAFKA_ADVERTISED_HOST_NAME=127.0.0.1  --env KAFKA_ADVERTISED_PORT=9092  wurstmeister/kafka

5、查看 是否 创建好Kafka容器

docker ps

6、进入到Kafka容器内

sudo docker exec -it kafka /bin/bash

7、创建 topic

cd opt/kafka_2.13-2.6.0/bin

创建 topic

./kafka-topics.sh --create --zookeeper zookeeper:2181 --replication-factor 1 --partitions 8 --topic test Created topic test.

8、创建成功之后发送 消息

./kafka-console-producer.sh --broker-list localhost:9092 --topic test

9、重新打开一个终端，创建 消费者

sudo docker exec -it kafka /bin/bash cd opt/kafka_2.13-2.6.0/bin/ ./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning #若不想从头消费就使用 ./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test

这样就能接受到生产着生产的数据了

10、查看、删除Kafka中的所有的to pi c

#查看 ./kafka-topics.sh --list --bootstrap-server ZK地址:端口
./kafka-topics.sh --list --bootstrap-server localhost:9092

#删除 ./kafka-topics.sh --delete --bootstrap-server ZK地址:端口 --topic topic名
./kafka-topics.sh --delete --bootstrap-server localhost:9092 --topic local_point

二、使用Docker Co m pose安装

1. 安装Docker和Docker Com pose

首先，确保你的系统已经安装了Docker和Docker Com pose。你可以根据操作系统的不同，按照官方文档的指引进行安装。

2. 创建Docker Com pose 文件

在你的项目目录下创建一个名为`docker-compose.yml`的文件，并添加以下内容：

services:
zookeeper:
image: confluentinc/cp-zookeeper:6.2.0 ports:
– “2181:2181”
environment:
– ZOOKEEPER_CLIENT_PORT=2181 – ZOOKEEPER_TICK_TIME=2000 kafka:
image: confluentinc/cp-kafka:6.2.0 ports:
– “9092:9092”
environment:
– KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 – KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://kafka:9092 – KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR=1 depends_on:
– zookeeper“`