栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Kafka 基本操作

Kafka 基本操作

一、单节点单代理配置

首先参考Kafka 安装步骤(Linux系统)启动相关服务

1.1 创建 Kafka 主题

Kafka 提供了一个名为 kafka-topics.sh 的命令行实用程序,用于在服务器上创建主题

# 创建了一个名为 Hello-Kafka 的主题,其中包含一个分区和一个副本因子
# 创建主题后,可以在 Kafka 代理终端窗口中获取通知
# 并在/pwx/kafka-3.1.0/config/server.properties文件中“log.dirs=/tmp/kafka-logs/"
# 指定的目录下查看到主题日志文件"Hello-Kafka-0"
/pwx/kafka-3.1.0/bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic Hello-Kafka
1.2 获取主题列表
# 使用此命令查看当前存在的主题列表
/pwx/kafka-3.1.0/bin/kafka-topics.sh --list --bootstrap-server localhost:9092
1.3 启动生产者
# --broker-list 指定broker列表
# --topic 指定主题名称
/pwx/kafka-3.1.0/bin/kafka-console-producer.sh --broker-list localhost:9092 --topic Hello-Kafka

创建完成后生产者将等待来自 stdin 的输入并发布到 Kafka 集群。 默认情况下,每个新行都作为新消息发布,然后在 config/producer.properties 文件中指定默认生产者属性。

1.4 启动消费者
# 与生产者类似,在config/consumer.proper-ties文件中指定了缺省使用者属性。 
# 打开一个新Linux终端输入以下命令
/pwx/kafka-3.1.0/bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic Hello-Kafka --from-beginning

启动后在生产者终端输入内容后同时可以在消费者终端看到对应的内容

二、基本主题操作 2.1 修改主题
# 使用“alter”命令修改主题"Hello-kafka"分区计数
/pwx/kafka-3.1.0/bin/kafka-topics.sh --bootstrap-server localhost:9092 --alter --topic Hello-Kafka --partitions 2
2.2 删除主题
# 删除主题主要大小写
/pwx/kafka-3.1.0/bin/kafka-topics.sh --bootstrap-server localhost:9092 --delete --topic Hello-Kafka 
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/745404.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号