首页 > 其他分享 >kafka常用命令

kafka常用命令

时间:2023-10-21 14:32:13浏览次数:35  
标签:146.33 -- kafka topic sh 常用命令 tyq

  1. kafka文件所在位置:

cd /UTMGMAPL/upkafka_1.2.11-1.0/bin

  1. 创建一个模拟生产者

./kafka-console-producer.sh --broker-list 146.33.240.13:9092 --topic topic_tyq_1

  1. 创建一个模拟消费者

./kafka-console-consumer.sh --bootstrap-server 146.33.20.14:9092 --topic topic_tyq_1

  1. 创建一个分区为1 ,副本数为1的topic,在broker_list集群中都能查到此topic

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --create --replication-factor 1 --partitions 1 --topic topic_tyq

  1. 查看所有已存在的topic

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --list

  1. 查看所有topic信息

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --describe

  1. 查看指定topic的信息

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --describe --topic topic_tyq

  1. 修改topic分区数量(只能增加分区数量)

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --alter --topic topic_tyq --partions 3

  1. 创建指定分组的消费者,这样启动起来多个消费者都指定成一个组里面到了,那么多分区时就会被分别消费了,如果组中的消费者数量多于分区数,多余出来的消费者将消费不到数据

./kafka-console-consumer.sh --bootstrap-server 146.33.240.14:9092 --topic topic_tyq --consumer-property group.id=group1

  1. 删除topic(没有彻底删除,不可见)

./kafka-topics.sh --zookeeper 146.33.240.14:22181 --delete --topic topic_tyq

标签:146.33,--,kafka,topic,sh,常用命令,tyq
From: https://blog.51cto.com/u_16270487/7967162

相关文章

  • impala常用命令
    进入impala:172.18.145.220impala-shell查看表分区showpartitions表名查看表结构desc表名清空表truncate表名删除指定分区(如果是最外层,那......
  • Linux-管道、环境变量、常用命令
    目录管道概念要点与文件重定向的区别环境变量概念查看常用命令查看系统状况权限文件查找用户相关工具管道概念管道的作用类似于文件重定向,可以将前一个命令的stout做为下一个命令的stdin要点管道命令进处理stdout,会忽略stderr管道右边的命令必须能接受stdin多个管道命令可......
  • 使用Grafana + jmx 监控 kafka3.5 的过程
    使用Grafana+jmx监控kafka3.5的过程摘要周五一边进行数据库监控,同时想着部署一套监控系统.能够监控一下kafka等中间件结果不想自己遇到了很多坑.下午有同事语音告诉自己一些排查问题的方式与方法.自己又多花了半个小时才将数据捞出来.感觉自己对很多工具的使用还......
  • Python-操作kerberos验证的kafka
    本笔记为python操作kerberos认证的kafka的操作方法,此仅记录作为使用者,连接客户提供的kafka并进行操作的流程。1、依赖安装:python相关依赖库:pip3installkafka-pythonpip3installgssapi系统(镜像):需要安装kerberos的客户端进行验证对于mac:brewinstallkrb5对于Debian或Ub......
  • kafka介绍
    官网:https://kafka.apache.org/Kafka是一个分布式事件流平台1介绍核心特性:高吞吐量、弹性、持久化存储、高可用事件流类似人类的中枢神经系统。越来越多的业务被软件实现和自动化,在此种情况下软件的用户还是软件。技术上讲,事件流就是实时的从事件源(数据库,传感器,移动设备,......
  • docker常用命令
    Docker基本概念:容器(Container):容器是Docker的基本单位,它是一个独立运行的应用程序,包含了运行所需的代码、运行环境和依赖项。容器使用隔离技术来保证应用程序在不同的环境中具有一致的行为,并且可以在不同的计算机上运行。镜像(Image):镜像是用于创建容器的模板,它包含了运行应用......
  • iptables常用命令
    iptables是用于配置Linux系统中的防火墙规则的命令行工具。其命令格式和常用参数的意思如下:iptables[选项]<链名><规则规范>常用选项:-A:添加规则到指定链的末尾。-D:从指定链中删除规则。-I:插入规则到指定链的开头。-L:列出指定链的规则。-F:清除指定链中的所有规则。-P:......
  • zokeeper和kafka关系
    在部署Kafka时,有必要同时部署ZooKeeper是因为Kafka使用ZooKeeper来管理和协调其集群的状态和配置信息。ZooKeeper是一个分布式协调服务,在Kafka中被用作集群协调器。Kafka集群中的每个节点都会与ZooKeeper进行通信,以共享元数据信息、协调leader选举、检测节点故障......
  • Kafka 消费者组
    一个分区对不同消费组是共享的,对同一个消费组里的消费者是互斥的;    参考文章【1】https://cloud.tencent.com/developer/article/1540509......
  • 记录最近学习到的一些windows常用命令
    1、ping命令可以用来测试网络是否联通,使用步骤如下:1.1、在电脑上面同时按住win+R,输入cmd,回车 1.2、在窗口里面输入一行格式为“ping+空格+IP地址(或者网站地址)”的命令,如“pingwww.baidu.com” 如上图可见,本台计算机可以与百度通信2、cd命令cd命令可以更改命令提......