`
heipark
  • 浏览: 2097042 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

apache kafka v0.8入门遇到问题

 
阅读更多

官方文档:https://kafka.apache.org/documentation.html

 

说下quick start遇到问题:

  • 运行kafka二进制项目不需要scala
  • 文档API栏目,每个API后面有example,字比较小,打开里面有示例

 

错误:

1. producer的配置只需要kafka server ip即可,但如果kafka server使用hostname作为zookeeper地址配置,那就需要在producer端配置zookeeper hostname与IP映射(hosts文件),否则会出现"kafka Failed to send messages after 3 tries”。producer启动log显示如下:

2014-01-27 16:01:20,405  INFO [Logging.scala:67] - <Fetching metadata from broker id:0,host:192.168.30.43,port:9092 with correlation id 0 for 1 topic(s) Set(test)>
2014-01-27 16:01:20,416  INFO [Logging.scala:67] - <Connected to 192.168.30.43:9092 for producing>
2014-01-27 16:01:20,468  INFO [Logging.scala:67] - <Disconnecting from 192.168.30.43:9092>
2014-01-27 16:01:20,541  INFO [Logging.scala:67] - <Connected to h1:9092 for producing>

 log 显示producter先连接kafka 服务端口9092获取metadata信息(如zookeeper信息),然后IP(192.168.30.43),就访问就变成通过h1这个hostname访问了,如果没有配置h1与ip映射就会出现问题。

 

 

 

 

 

分享到:
评论

相关推荐

    kafka-2.10-0.8.1.1

    kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1kafka_2.10-0.8.1.1...

    libkafka:适用于Apache Kafka v0.8 +的C ++客户端库。 还包括C API

    适用于Apache Kafka v0.8 +的C ++客户端库。 还包括C API。 带有完整的单元测试套件。 支持以下Kafka API请求/响应调用: 元数据 生产 拿来 抵消 包括对使用GZIP或Snappy压缩的MessageSet压缩的支持。 由于线路...

    Apache Kafka实战.pdf

    《Apache Kafka实战》这本书深入浅出地介绍了Apache Kafka这一分布式流处理平台的各个方面,旨在帮助读者掌握Kafka的实际应用和核心概念。Kafka是一个高吞吐量、低延迟的消息发布订阅系统,常用于构建实时数据管道和...

    Apache Kafka:KafkaStreamAPI入门.docx

    Apache Kafka:KafkaStreamAPI入门.docx

    Spring for Apache Kafka API(Spring for Apache Kafka 开发文档).CHM

    Spring for Apache Kafka API。 Spring for Apache Kafka 开发文档。

    kafka-0.8.1.1总结1

    【描述】:本文将深入探讨 Apache Kafka 的0.8.1.1版本,解析其核心概念、配置细节以及工作流程。 【标签】:“Kafka” --- **一、基础篇** 1. **开篇说明** Kafka 是一个分布式流处理平台,0.8.1.1是它的一个...

    kafka-0.8.1.1-src.tgz

    《Apache Kafka 0.8.1.1 源代码解析与应用实践》 Apache Kafka 是一个开源流处理平台,由 LinkedIn 开发并贡献给 Apache 软件基金会。Kafka 的核心特性包括高吞吐量、分布式、持久化、容错性以及支持实时数据流。...

    Learning Apache Kafka 2nd Edition

    This book is here to help you get familiar with Apache Kafka and to solve your challenges related to the consumption of millions of messages in publisher-subscriber architectures. It is aimed at ...

    kafka0.8官网下载

    Kafka 0.8 作为较早的版本,拥有丰富的社区资源和文档,对于初学者和开发者来说,学习和解决问题相对容易。 在下载 Kafka 0.8 时,需要注意选择适合自己操作系统的版本,例如 `kafka_2.8.0-0.8.0` 文件名表示的是...

    Building Data Streaming Applications with Apache Kafka

    Apache Kafka is a popular distributed streaming platform that acts as a messaging queue or an enterprise messaging system. It lets you publish and subscribe to a stream of records and process them in ...

    kafka0.8软件包以及安装步骤.rar

    1. **下载Kafka**: 首先,你需要从Apache官网或者镜像站点下载Kafka 0.8的发行版。通常会得到一个.tgz或.zip格式的压缩包。 2. **解压安装**: 解压下载的压缩包到你想要安装的目录,例如 `/usr/local/kafka`。 3. ...

    Apache Kafka快速入门.pdf

    Apache Kafka快速入门

    Apache Kafka Cookbook(PACKT,2015)

    《Apache Kafka Cookbook》是由PACKT在2015年出版的一本专著,专注于介绍Apache Kafka这一分布式流处理平台的实战技巧和最佳实践。Apache Kafka是一个高性能、可扩展且容错性强的消息中间件,它被广泛应用于大数据...

    Streaming Architecture New Designs Using Apache Kafka and MapR Streams

    本文将深入探讨"Streaming Architecture New Designs Using Apache Kafka and MapR Streams"这一主题,阐述如何利用这两种强大的工具构建高效、可扩展的流处理系统。 Apache Kafka是一种分布式流处理平台,由...

    Building Data Streaming Applications with Apache Kafka azw3

    Building Data Streaming Applications with Apache Kafka 英文azw3 本资源转载自网络,如有侵权,请联系上传者或csdn删除 本资源转载自网络,如有侵权,请联系上传者或csdn删除

    storm-kafka-0.8-plus-test:Storm-kafka-0.8-plus的简单测试项目

    风暴卡夫卡0.8加测试根据以下信息提供的storm-kafka-0.8-plus测试项目: [ ]( ) [ ]( ) [ ]( ) [ ]( ) 还包含尝试基于[Hazelcast]的三叉戟状态的示例实现( ) ##使用环境设置如果您使用的是Mac,请按照的...

    Kafka-0.8.1.1

    kafka是一个轻量级的/分布式的/具备replication能力的日志采集组件,通常被集成到应用系统中,收集"用户行为日志"等,并可以使用各种消费终端(consumer)将消息转存到HDFS等其他结构化数据存储系统中。

    Sarama是Apache Kafka 0.8及更高版本的Go库。-Golang开发

    sarama Sarama是MIT许可的Apache Kafka 0.8版(及更高版本)的Go客户端库。 可通过godoc获得入门API文档和示例。 模拟sarama中提供了用于测试的模拟程序。Sarama是MIT许可的Apache Kafka版本0.8(及更高版本)的Go...

    apache kafka pdf下载

    Apache Kafka是一款分布式流处理平台,它被设计用来处理大量数据,并且提供一个统一、高吞吐量、低延迟的处理数据管道。由于Kafka的这些特性,它在大数据处理和实时数据管道领域得到了广泛的应用。Kafka作为一个开源...

    kafka_2.11-0.8.2.2

    《Apache Kafka 0.8.2.2:分布式流处理平台详解》 Apache Kafka 是一个高性能、分布式的流处理平台,被广泛应用于大数据领域。Kafka 的版本号 "kafka_2.11-0.8.2.2" 表示这是一个基于 Scala 2.11 的 0.8.2.2 版本,...

Global site tag (gtag.js) - Google Analytics