`
z_jiankun
  • 浏览: 164220 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

Zookeeper+Kafka+Java(windows)

    博客分类:
  • Java
 
阅读更多

摘要:本文主要说明了如何在Windows安装运行Kafka (http://blog.csdn.net/evankaka)

 

摘要:本文主要说明了如何在Windows安装运行Kafka

一、安装JDK

过程比较简单,这里不做说明。

最后打开cmd输入如下内容,表示安装成功

二、安装zooeleeper

下载安装包:http://zookeeper.apache.org/releases.html#download

下载后解压到一个目录:

1.进入Zookeeper设置目录,笔者D:\Java\Tool\zookeeper-3.4.6\conf
2. 将“zoo_sample.cfg”重命名为“zoo.cfg”
3. 在任意文本编辑器(如notepad)中打开zoo.cfg
4. 找到并编辑dataDir=D:\\Java\\Tool\\zookeeper-3.4.6\\tmp
5. 与Java中的做法类似,我们在系统环境变量中添加:
  a. 在系统变量中添加ZOOKEEPER_HOME = D:\Java\Tool\zookeeper-3.4.6\conf
  b. 编辑path系统变量,添加为路径%ZOOKEEPER_HOME%\bin;
6. 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

这是笔者最终的文件内容:

 

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. # The number of milliseconds of each tick  
  2. tickTime=2000  
  3. # The number of ticks that the initial   
  4. # synchronization phase can take  
  5. initLimit=10  
  6. # The number of ticks that can pass between   
  7. # sending a request and getting an acknowledgement  
  8. syncLimit=5  
  9. # the directory where the snapshot is stored.  
  10. # do not use /tmp for storage, /tmp here is just   
  11. # example sakes.  
  12. dataDir=D:\\Java\\Tool\\zookeeper-3.4.6\\tmp  
  13. # the port at which the clients will connect  
  14. clientPort=2181  
  15. # the maximum number of client connections.  
  16. # increase this if you need to handle more clients  
  17. #maxClientCnxns=60  
  18. #  
  19. # Be sure to read the maintenance section of the   
  20. # administrator guide before turning on autopurge.  
  21. #  
  22. # http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance  
  23. #  
  24. # The number of snapshots to retain in dataDir  
  25. #autopurge.snapRetainCount=3  
  26. # Purge task interval in hours  
  27. # Set to "0" to disable auto purge feature  
  28. #autopurge.purgeInterval=1  


7. 打开新的cmd,输入zkserver,运行Zookeeper。
8. 命令行提示如下:说明本地Zookeeper启动成功

 

三、安装与运行Kafka

下载

http://kafka.apache.org/downloads.html。注意要下载二进制版本的

下载后解压到任意一个目录,笔者的是D:\Java\Tool\kafka_2.11-0.10.0.1

1. 进入Kafka配置目录,D:\Java\Tool\kafka_2.11-0.10.0.1
2. 编辑文件“server.properties”
3. 找到并编辑log.dirs=D:\Java\Tool\kafka_2.11-0.10.0.1\kafka-log,这里的目录自己修改成自己喜欢的
4. 找到并编辑zookeeper.connect=localhost:2181。表示本地运行
5. Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181。

运行:

重要:请确保在启动Kafka服务器前,Zookeeper实例已经准备好并开始运行。

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入

 

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. .\bin\windows\kafka-server-start.bat .\config\server.properties   

 

并回车。

四、测试

上面的Zookeeper和kafka一直打开

(1)、创建主题

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入

 

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. .\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic linlin  

 

注意不要关了这个窗口!

(2)创建生产者

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入

注意不要关了这个窗口!

(3)创建消费者

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键,选择“打开命令窗口”选项,打开命令行。
3.现在输入

注意不要关了这个窗口!

然后在第2个窗口中输入内容,最后记得回车


大功告成!

 

使用Java编写的kafka使用实例如下:

http://blog.csdn.net/evankaka/article/details/52494412

分享到:
评论

相关推荐

    linux平台centos7系统 - ELK+logback+kafka+nginx 搭建分布式日志分析平台.doc

    ELK栈(Elasticsearch、Logstash、Kibana)正是解决这一需求的开源解决方案,尤其适用于Java和其他开发语言的日志集成。本文将详细阐述如何在CentOS7系统上利用ELK、logback、kafka和nginx搭建分布式日志分析平台。 ...

    windows10+kafka本地环境

    1. **安装Java运行环境**:Kafka基于Java,所以首先你需要在你的Windows 10机器上安装Java Development Kit (JDK)。确保安装的是与Kafka兼容的版本,通常推荐使用Oracle JDK 8或OpenJDK 8。 2. **下载Kafka**:访问...

    windows下安装kafka需要的zookeeper-3.4.6

    在Windows环境下搭建Kafka之前,首先需要安装Zookeeper,因为Zookeeper是Kafka的重要组成部分,它作为分布式协调服务,为Kafka提供了集群管理和数据一致性保障。Zookeeper-3.4.6是Apache ZooKeeper的一个稳定版本,...

    windows环境搭建调用链监控 spring cloud+es+kafka+zipkin

    3. **配置环境**:设置各个组件的环境变量,如Elasticsearch的路径、Kafka的Zookeeper连接等。 4. **启动服务**:依次启动Elasticsearch、Kafka、Zipkin Server,确保它们正常工作。 5. **配置Spring Cloud应用**:...

    CENTOS+KAFKA+GOLANG

    - **启动 Zookeeper 服务器**:`bin/zookeeper-server-start.sh config/zookeeper.properties` - **启动 Kafka 服务器**:`bin/kafka-server-start.sh config/server.properties` - **启动生产者**:`bin/kafka-...

    openjdk11+tomcat9+CASServer.zip

    4. **启动CAS Server**: 使用Tomcat的startup.sh(Unix/Linux)或startup.bat(Windows)脚本来启动服务。 5. **测试SSO功能**: 创建一个CAS客户端应用,配置相应的服务URL和验证机制,然后尝试登录,看是否能够...

    setup,zookeeper,kafka,unzip

    在IT行业中,`Kafka` 和 `Zookeeper` 是两个非常重要的组件,广泛应用于大数据处理和实时流数据系统。这两个工具通常与Java运行环境(JRE)一起使用,因为它们都是用Java语言编写的。本篇文章将深入探讨 `Kafka`、`...

    spring-boot-kafka-websocket:Spring Boot Kafka Websocket演示

    项目介绍一个例子,使用 spring boot ...cmd, 输入 输入bin\windows\kafka-server-start.bat config\server.properties,启动 kafka测试:运行以下命令kafka-topics.bat --create --zookeeper localhost:2181 --replica

    zookeeper-3.4Windows版本

    在构建分布式大数据环境时,ZooKeeper是一个至关重要的组件,特别是在结合Dubbo、Kafka、Redis和MQ等技术时。ZooKeeper是由Apache软件基金会开发的一个开源项目,它是一个高可用的分布式协调服务,用于管理分布式...

    windows安装配置运行kafka.doc

    本文档将指导您如何在 Windows 操作系统上配置并启动 Apache Kafka,包括安装 Java 和 Apache Zookeeper。 Java 安装 Java 是 Kafka 的依赖项,需要先安装 Java。下载 Server JRE 并安装,选择合适的版本和架构。...

    kafka2.12安装包及环境配置

    在系统的环境变量配置文件(如Linux的`.bashrc`或Windows的`System Variables`)中添加Kafka的路径。例如,在Linux上,添加以下行: ``` export KAFKA_HOME=/usr/local/kafka_2.12-2.x.y export PATH=$PATH:$...

    zookeeper3.8.0 最新版 windows linux通用版 apache-zookeeper

    6. **zookeeper.jar**:ZooKeeper的可执行JAR文件,可以在Java环境中运行。 在运维层面,ZooKeeper的安装和配置过程相对简单。首先,解压`apache-zookeeper-3.8.0-bin.tar.gz`到指定目录,然后编辑`conf/zoo.cfg`...

    kafka Windows安装

    在 Windows 上安装 Kafka 包括下载、配置 Zookeeper 和 Kafka 服务,以及创建和操作 topics、producer 和 consumer。了解这些基础知识后,你可以进一步探索 Kafka 的高级特性,如消费组、offset 管理、Kafka Connect...

    最新版windows kafka_2.12-2.5.0.zip

    在Kafka根目录下运行`bin\windows\zookeeper-server-start.bat config\zookeeper.properties`。 4. **启动Kafka服务器** 启动Kafka服务器,运行`bin\windows\kafka-server-start.bat config\server.properties`。 ...

    springboot整合kafka

    在Windows环境下,你可以下载Zookeeper和Kafka的二进制包,按照官方文档配置环境,启动Zookeeper和Kafka服务。 以上就是SpringBoot整合Kafka的基础流程。实际应用中,你可能需要处理更复杂的情况,比如配置多个...

    支持windows和linux的kafka安装包

    Java的跨平台特性使得Kafka可以在Windows和Linux等不同操作系统上运行。Kafka的API设计使得开发者可以方便地在Java应用程序中集成Kafka的功能,进行消息生产、消费以及处理。 **Windows上的Kafka安装** 1. **下载*...

    最新版windows kafka_2.13-2.4.1.zip

    Scala是构建在Java虚拟机(JVM)上的多范式编程语言,它的语法简洁且富有表达力,特别适合编写复杂的分布式系统,如Kafka。 **三、Windows环境下的安装** 1. **下载与解压**:下载"windows kafka_2.13-2.4.1.zip...

    Zookeeper在windows搭建伪集群

    Zookeeper是一个基于Java的项目,使用Apache License开源协议。Zookeeper的主要功能是提供一个高可用的、可扩展的、可靠的集中式服务,用于维护和管理大规模分布式系统中的配置信息和命名空间。 伪集群搭建 要在...

    kafka +zookeper 官方包kafka_2.11-2.3.0.zip

    Kafka还支持多种语言的客户端库,如Java、Python、Go等,便于开发者在实际应用中集成。 值得注意的是,Kafka的高可用性体现在复制策略上,每个主题的分区(Partition)都可以有多个副本(Replica),分布在不同的...

    kafka_2.12-2.4.1.zip

    在本压缩包"**kafka_2.12-2.4.1.zip**"中,包含了适用于Windows环境下的Kafka和Zookeeper的启动命令,便于初学者快速上手实践。同时,Kafka的跨平台特性也使其在Linux环境下同样表现出色。本文将深入探讨如何在两种...

Global site tag (gtag.js) - Google Analytics