下载kafka二进制包kafka_2.11-0.8.2.2.tgz,解压
1.拷贝conf/server.properties为
第一个节点server.properties,修改如下内容:
broker.id=9093
port=9093
host.name=127.0.0.1
log.dirs=/tmp/kafka-logs-9093
zookeeper.connect=localhost:2181
第二个节点server.properties,修改如下内容:
broker.id=9094
port=9094
host.name=127.0.0.1
log.dirs=/tmp/kafka-logs-9094
zookeeper.connect=localhost:2181
2.启动脚本
第一个节点:
cd kafka_2.10-0.8.1.1\bin\windows
kafka-server-start.bat ..\..\config\server.properties
第二个节点:
cd kafka_2.10-0.8.1.1_2\bin\windows
kafka-server-start.bat ..\..\config\server.properties
3.创建topic
cd kafka_2.10-0.8.1.1\bin\windows
kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 2 --partitions 3 --topic my-replicated-topic
4.查看topic描述信息
cd kafka_2.10-0.8.1.1\bin\windows
kafka-topics.bat --describe --zookeeper localhost:2181 --topic my-replicated-topic
5.生产topic消息
cd kafka_2.10-0.8.1.1\bin\windows
kafka-console-producer.bat --broker-list localhost:9093 --topic my-replicated-topic
6.消费topic消息
cd kafka_2.10-0.8.1.1\bin\windows
kafka-console-consumer.bat --zookeeper localhost:2181 --from-beginning --topic my-replicated-topic
相关推荐
在Windows环境下部署Kafka,你需要下载最新版的Kafka,这里提到的是`windows kafka_2.12-2.5.0.zip`。这个版本是针对Scala 2.12编译的,这意味着它使用了Scala 2.12版本的API,提供了更好的性能和兼容性。 1. **...
《Windows环境下Kafka 2.12-2.4.1的详细指南》 Kafka是一款高吞吐量、分布式的消息发布与订阅系统,由LinkedIn开发并贡献给了Apache软件基金会。在本文中,我们将深入探讨如何在Windows操作系统上安装和使用最新版...
**Kafka在Windows环境下的安装与配置** **一、Kafka简介** Kafka是由Apache软件基金会开发的一个开源流处理平台,最初由LinkedIn设计并贡献。它是一个分布式、分区的、冗余备份的消息队列系统,主要用于实时数据流...
**Windows上的Kafka 2.5.0与Scala 2.13的详解** Kafka是一种分布式流处理平台,由LinkedIn开发并在Apache软件基金会管理。它最初设计为一个高吞吐量、低延迟的消息发布订阅系统,现在已经成为大数据领域的重要组件...
《深入理解Windows Kafka 2.11-2.4.1》 Kafka是一款由LinkedIn开发并开源的消息系统,后来成为Apache软件基金会的顶级项目。它最初设计为高吞吐量、低延迟的实时流处理平台,现在广泛应用于大数据领域的消息中间件...
将Kafka部署在Windows服务器上并作为服务运行,可以方便地管理和监控Kafka实例。 在Windows上部署Kafka服务,首先需要安装Zookeeper。Zookeeper是Kafka集群中的关键组件,负责管理集群的状态信息,如选举主节点、...
Windows 环境 为zookeeper和kafka配置开机自启动服务。
标题中的“windows下kafka_2.12-2.9.0.rar”指的是Apache Kafka的一个版本,这是在Windows环境下使用的。Kafka是一款开源的流处理平台,由LinkedIn开发并贡献给Apache软件基金会。它主要设计用于构建实时数据管道和...
1、图形化界面可以直观地查看 Kafka 的 Topic 里的内容 2、自由设置 Kafka 数据展示格式 3、使用 Kafka Tool 创建/删除 Topic 4、使用 Kafka Tool 模拟发送 Messages
因此,Kafka的`bin/windows/kafka-server-start.bat`脚本需要使用一些技巧来保持Kafka服务的后台运行。 5. **环境变量**:确保JDK已经正确安装并且`JAVA_HOME`环境变量设置正确,因为Kafka依赖Java运行。 6. **...
资源介绍了kafka的监控工具-kafkaOffsetMonitor在windodws环境下的部署,以kafkaOffsetMonitor_0.2.1版本举例说明了该工具在windows环境下如何部署及对kafka参数进行监控。
windows下安装kafka需要的安装包 Kafka凭借着自身的优势,越来越受到互联网企业的青睐,唯品会也采用Kafka作为其内部核心消息引擎之一。Kafka作为一个商业级消息中间件,消息可靠性的重要性可想而知。如何确保消息的...
Windows Kafka 启动教程 修改 boker.id 和 log.dirs 进入kafka目录下,新建文件夹 kafka-logs 与文件夹 zk-dir,进入config目录下,打开server.properties broker.id=1 log.dirs=../kafka-logs 修改 zookeeper....
kafkatool 国内可能下载不了,搞32 64位的都压缩在一起了Kafka Tool 2.0.7( 32\64) To download the Kafka UI Tool for your operating system, use the links below. All versions of Kafka Tool come with a ...
《Kafka:高吞吐量分布式消息系统的深度解析》 Kafka,作为一款业界广泛使用的分布式发布订阅消息系统,以其高吞吐量、低延迟、可扩展性以及强大的数据持久化能力,深受广大开发者和企业的青睐。其核心设计思想是...
史上最轻便好用的kafka ui界面客户端工具,可以在生产消息、消费消息、管理topic、管理group;可以支持管理多个kafka集群;部署简便,可以一键启动,不需要配置数据库、不需要搭建web容器;支持zookeeper ui界面化...
赠送jar包:kafka-clients-0.10.0.1.jar; 赠送原API文档:kafka-clients-0.10.0.1-javadoc.jar; 赠送源代码:kafka-clients-0.10.0.1-sources.jar; 赠送Maven依赖信息文件:kafka-clients-0.10.0.1.pom; 包含...
reload4j-1.2.25.jar重写了DailyRollingFileAppender中关于日志重命名部分 boolean copy(File src, File dst) throws IOException { try { InputStream in = new FileInputStream(src); OutputStream out = new ...
本资源是windows下kafka的环境配置及c++实现的kafka的producer相关代码,启动后可以测试c++的producer发送消息可以在windows下启动的kafka的customer接收消息。
Apache Spark与Apache Kafka的集成是大数据处理领域中的一个重要话题,特别是在实时流处理中。Kafka是一个高可用、高性能的消息中间件,它支持发布/订阅模式,可以作为数据管道,将数据从生产者传递到消费者。Spark...