摘要:本文主要说明了如何在Windows安装运行Kafka (http://blog.csdn.net/evankaka)
摘要:本文主要说明了如何在Windows安装运行Kafka
一、安装JDK
过程比较简单,这里不做说明。
最后打开cmd输入如下内容,表示安装成功
二、安装zooeleeper
下载安装包:http://zookeeper.apache.org/releases.html#download
下载后解压到一个目录:
1.进入Zookeeper设置目录,笔者D:\Java\Tool\zookeeper-3.4.6\conf
2. 将“zoo_sample.cfg”重命名为“zoo.cfg”
3. 在任意文本编辑器(如notepad)中打开zoo.cfg
4. 找到并编辑dataDir=D:\\Java\\Tool\\zookeeper-3.4.6\\tmp
5. 与Java中的做法类似,我们在系统环境变量中添加:
a. 在系统变量中添加ZOOKEEPER_HOME = D:\Java\Tool\zookeeper-3.4.6\conf
b. 编辑path系统变量,添加为路径%ZOOKEEPER_HOME%\bin;
6. 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)
这是笔者最终的文件内容:
7. 打开新的cmd,输入zkserver,运行Zookeeper。
8. 命令行提示如下:说明本地Zookeeper启动成功
三、安装与运行Kafka
下载
http://kafka.apache.org/downloads.html。注意要下载二进制版本的
下载后解压到任意一个目录,笔者的是D:\Java\Tool\kafka_2.11-0.10.0.1
1. 进入Kafka配置目录,D:\Java\Tool\kafka_2.11-0.10.0.1
2. 编辑文件“server.properties”
3. 找到并编辑log.dirs=D:\Java\Tool\kafka_2.11-0.10.0.1\kafka-log,这里的目录自己修改成自己喜欢的
4. 找到并编辑zookeeper.connect=localhost:2181。表示本地运行
5. Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181。
运行:
重要:请确保在启动Kafka服务器前,Zookeeper实例已经准备好并开始运行。
1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入
并回车。
四、测试
上面的Zookeeper和kafka一直打开
(1)、创建主题
1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入
注意不要关了这个窗口!
(2)创建生产者
1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入
注意不要关了这个窗口!
(3)创建消费者
1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入
注意不要关了这个窗口!
然后在第2个窗口中输入内容,最后记得回车
大功告成!
使用Java编写的kafka使用实例如下:
相关推荐
ELK栈(Elasticsearch、Logstash、Kibana)正是解决这一需求的开源解决方案,尤其适用于Java和其他开发语言的日志集成。本文将详细阐述如何在CentOS7系统上利用ELK、logback、kafka和nginx搭建分布式日志分析平台。 ...
1. **安装Java运行环境**:Kafka基于Java,所以首先你需要在你的Windows 10机器上安装Java Development Kit (JDK)。确保安装的是与Kafka兼容的版本,通常推荐使用Oracle JDK 8或OpenJDK 8。 2. **下载Kafka**:访问...
在Windows环境下搭建Kafka之前,首先需要安装Zookeeper,因为Zookeeper是Kafka的重要组成部分,它作为分布式协调服务,为Kafka提供了集群管理和数据一致性保障。Zookeeper-3.4.6是Apache ZooKeeper的一个稳定版本,...
3. **配置环境**:设置各个组件的环境变量,如Elasticsearch的路径、Kafka的Zookeeper连接等。 4. **启动服务**:依次启动Elasticsearch、Kafka、Zipkin Server,确保它们正常工作。 5. **配置Spring Cloud应用**:...
- **启动 Zookeeper 服务器**:`bin/zookeeper-server-start.sh config/zookeeper.properties` - **启动 Kafka 服务器**:`bin/kafka-server-start.sh config/server.properties` - **启动生产者**:`bin/kafka-...
4. **启动CAS Server**: 使用Tomcat的startup.sh(Unix/Linux)或startup.bat(Windows)脚本来启动服务。 5. **测试SSO功能**: 创建一个CAS客户端应用,配置相应的服务URL和验证机制,然后尝试登录,看是否能够...
在IT行业中,`Kafka` 和 `Zookeeper` 是两个非常重要的组件,广泛应用于大数据处理和实时流数据系统。这两个工具通常与Java运行环境(JRE)一起使用,因为它们都是用Java语言编写的。本篇文章将深入探讨 `Kafka`、`...
项目介绍一个例子,使用 spring boot ...cmd, 输入 输入bin\windows\kafka-server-start.bat config\server.properties,启动 kafka测试:运行以下命令kafka-topics.bat --create --zookeeper localhost:2181 --replica
在构建分布式大数据环境时,ZooKeeper是一个至关重要的组件,特别是在结合Dubbo、Kafka、Redis和MQ等技术时。ZooKeeper是由Apache软件基金会开发的一个开源项目,它是一个高可用的分布式协调服务,用于管理分布式...
本文档将指导您如何在 Windows 操作系统上配置并启动 Apache Kafka,包括安装 Java 和 Apache Zookeeper。 Java 安装 Java 是 Kafka 的依赖项,需要先安装 Java。下载 Server JRE 并安装,选择合适的版本和架构。...
在系统的环境变量配置文件(如Linux的`.bashrc`或Windows的`System Variables`)中添加Kafka的路径。例如,在Linux上,添加以下行: ``` export KAFKA_HOME=/usr/local/kafka_2.12-2.x.y export PATH=$PATH:$...
6. **zookeeper.jar**:ZooKeeper的可执行JAR文件,可以在Java环境中运行。 在运维层面,ZooKeeper的安装和配置过程相对简单。首先,解压`apache-zookeeper-3.8.0-bin.tar.gz`到指定目录,然后编辑`conf/zoo.cfg`...
在 Windows 上安装 Kafka 包括下载、配置 Zookeeper 和 Kafka 服务,以及创建和操作 topics、producer 和 consumer。了解这些基础知识后,你可以进一步探索 Kafka 的高级特性,如消费组、offset 管理、Kafka Connect...
在Kafka根目录下运行`bin\windows\zookeeper-server-start.bat config\zookeeper.properties`。 4. **启动Kafka服务器** 启动Kafka服务器,运行`bin\windows\kafka-server-start.bat config\server.properties`。 ...
在Windows环境下,你可以下载Zookeeper和Kafka的二进制包,按照官方文档配置环境,启动Zookeeper和Kafka服务。 以上就是SpringBoot整合Kafka的基础流程。实际应用中,你可能需要处理更复杂的情况,比如配置多个...
Java的跨平台特性使得Kafka可以在Windows和Linux等不同操作系统上运行。Kafka的API设计使得开发者可以方便地在Java应用程序中集成Kafka的功能,进行消息生产、消费以及处理。 **Windows上的Kafka安装** 1. **下载*...
Scala是构建在Java虚拟机(JVM)上的多范式编程语言,它的语法简洁且富有表达力,特别适合编写复杂的分布式系统,如Kafka。 **三、Windows环境下的安装** 1. **下载与解压**:下载"windows kafka_2.13-2.4.1.zip...
Zookeeper是一个基于Java的项目,使用Apache License开源协议。Zookeeper的主要功能是提供一个高可用的、可扩展的、可靠的集中式服务,用于维护和管理大规模分布式系统中的配置信息和命名空间。 伪集群搭建 要在...
Kafka还支持多种语言的客户端库,如Java、Python、Go等,便于开发者在实际应用中集成。 值得注意的是,Kafka的高可用性体现在复制策略上,每个主题的分区(Partition)都可以有多个副本(Replica),分布在不同的...
在本压缩包"**kafka_2.12-2.4.1.zip**"中,包含了适用于Windows环境下的Kafka和Zookeeper的启动命令,便于初学者快速上手实践。同时,Kafka的跨平台特性也使其在Linux环境下同样表现出色。本文将深入探讨如何在两种...