最新文章列表

zookeeper cluster管理solrcloud 个人实践

2014-02-19,于测试机器上部署solrcloud; zk 版本:3.4.5(附件zookeeper2181),solr版本4.4.0(附件solr_v440_5001); zookeeper集群 由于是自己测试,所谓集群也是放在同一机器的伪集群,部署在10.8.8.80商城QA搜索环境); 1.将zookeeper2181复制成三份(选择奇数个,方便leader election),即zoo ...
yjnnyqqq 评论(0) 有432人浏览 2014-02-19 14:25

【Apache ZooKeeper】命令行zkCli.sh使用指南

ZooKeeper命令行   ZooKeeper客户端有C语言和Java两个版本。 ZooKeeper的命令在/usr/lib/zookeeper/bin文件夹下。 运行Java版本的客户端使用bash zkCli.sh -server IP:port ,运行C语言版本的使用./cli_mt IP:port,下面介绍Java版本的,C语言版差不多。 查看具体结点信息 bash zkSe ...
aoyouzi 评论(0) 有4636人浏览 2014-02-18 18:45

分布式设计与开发(一)------zookeeper实现实例

附件是一个通过zookeeper实现的分布式消息框架实例,与大家共享
fxzcollege6 评论(0) 有512人浏览 2014-01-23 14:52

分布式设计与开发(三)------高一致性服务ZooKeeper

分布式环境中大多数服务是允许部分失败,也允许数据不一致,但有些最基础的服务是需要高可靠性,高一致性的,这些服务是其他分布式服务运转的 ...
fxzcollege6 评论(0) 有801人浏览 2014-01-22 11:07

分布式设计与开发(一)------宏观概述

在IDF05(Intel Developer Forum 2005)上,Intel首席执行官Craig Barrett就取消4GHz芯片计划一事,半开玩笑当众单膝下跪致歉,给广大软件开发者一个明显的信号, ...
fxzcollege6 评论(0) 有443人浏览 2014-01-22 10:11

solrcloud分布式集群部署及索引操作实例

一、前期准备工作 相关工具: 1.虚拟机(VMware)2.tomcat7 64位  下载地址:http://tomcat.apache.org/download-70.cgi3.centos6.4  64位4.linux下的64位jdk安装包,版本为6或以上5. solr-4.3.1.tgz包  下载:http://archive.apache.org/dist/lucene/solr/ ...
lucien_zzy 评论(1) 有13064人浏览 2014-01-10 18:00

kafka0.7在linux上的单点及集群环境搭建与配置

IT业的小白,最近用了消息对了,研究了下kafka,并且研究了在kafka基础上进行了二次开发的淘宝rocketMQ,打算写下安装与配置环境,和初级demo。有用过的大家一起交流。这个过程参考了frankHui博客里的的安装配置过程。 kafka0.8版本比0.7版本增加了一些功能,先说下0.7版本的单点搭建和配置。 kafka的搭建需要zookeeper的支持,所以如果你的服务器还没有安装zo ...
meowo 评论(0) 有1716人浏览 2014-01-08 10:47

Tomcat上部署SolrCloud(翻译官方)

安装三个node的SolrCloud集群,配置3个zookeeper样例   工具下载zookeeper下载地址:http://hadoop.apache.org/zookeeper/releases.htmlsolr下载地址:https://archive.apache.org/dist/lucene/solr下载地址:http://lucene.apache.org/solr/downlo ...
lucien_zzy 评论(0) 有2358人浏览 2014-01-07 15:33

solrcloud分布式集群部署zookeeper集群安装+ClientCRUD实例

  附件含:操作说明文档;客户端CRUD实现   工具下载 zookeeper下载地址:http://hadoop.apache.org/zookeeper/releases.html solr下载地址:https://archive.apache.org/dist/lucene/solr   SolrCloud是基于Solr和Zookeeper的分布式搜索方案,是正在开发中的 ...
lucien_zzy 评论(0) 有1853人浏览 2014-01-07 14:34

[转]【zookeeper】删除zookeeper产生的快照和log

场景: hbase运行一个月,zookeeper产生的文件占据了800G多的磁盘空间。需要清理一下旧的快照和日志 语法: $ cd /home/dwhftp/opt/zookeeper/bin/ ;sh zkCleanup.sh /datac/zk_data/version-2  20 Removing file: Aug 3, 2012 11:58:28 AM  /datac/zk_data ...
carlzhao531 评论(0) 有354人浏览 2014-01-06 10:03

hbase启动时zookeeper不能启动的问题

前几天虚拟机挂了,重新弄好后发现hadoop集群能正常启动,hbase却不能,原因是zookeeper没法启动,查看zookeeper的日志,错误如下: java.lang.RuntimeException: Unable to run quorum server         at org.apache.zookeeper.server.quorum.QuorumPeer.loadDataB ...
teasp 评论(0) 有4458人浏览 2013-12-26 14:34

分布式助手Zookeeper(五)

散仙在上篇文章分享了关于使用zookeeper来完成配置同步的功能,那么本篇,散仙依旧是模拟实现一个基于zookeeper怎么解决单点故障的案例。 单点故障问题,在分布式系统中是一个很有可能发生的场景,比如说在Hadoop2.x之前的HDFS的NameNode和MapReduce的JobTracker的单点故障,当然这个问题已经在Hadoop2.x中得到解决,解决的方式,大部分是基于Zookeepe ...
qindongliang1922 评论(1) 有4464人浏览 2013-12-05 17:41

分布式助手Zookeeper(四)

Zookeeper是分布式环境下一个重要的组件,因为它能在分布式环境下,给我带来很多便利,大大简化了分布式编程的复杂性,本篇散仙将给出一个模拟例子,来演示下如何使用Zookeeper的API编程,来完成分布式环境下配置的同步。大家都知道在一个中大型的规模的集群中,配置文件通常是必不可少的的东西,很多时候,我都需要将在Master上配置好的配置文件,给分发到各个Slave上,以确保整体配置的一致性,在 ...
qindongliang1922 评论(2) 有4353人浏览 2013-12-05 14:15

分布式助手Zookeeper(三)

本篇,散仙要介绍一下基于zookeeper的一些API的编程。 在此之前,我们先来熟悉一下相关知识: Zookeeper的Session: (1)客户端和server间采用长连接 (2) ...
qindongliang1922 评论(0) 有3767人浏览 2013-12-04 17:51

分布式助手Zookeeper(二)

散仙在上篇文章介绍了,zookeeper的一系列基础知识,如果,你还不清楚zookeeper的基本架构,或者工作原理,那么,建议看一下散仙的上篇文章。本篇,散 ...
qindongliang1922 评论(0) 有4847人浏览 2013-12-04 15:46

来点实用的Java NIO(三)

继昨天的NIO文件夹遍历,散仙今天要分享另外两个基于NIO的比较实用的知识,第一个分享的是使用NIO对操作系统的文件进行监控,第二个要分享的是关于操作系统的文件锁,(散仙:这个会放在下一篇博客中)。 在Java以前的版本中,如果程序想要监控文件的变化,则可以采用启动一条后台线程,定时去扫描某个文件夹,或某个文件夹下的文件,如果扫描过程中发现此次的遍历结果与上次的结果不同,则认为此文件发生了变化, ...
qindongliang1922 评论(12) 有5590人浏览 2013-11-26 18:55

图解Hbase之使用外置Zookeeper分布式集群

散仙,在上篇文章,已经介绍了Hbase的完全分布式集群部署,这次要介绍的,也是基于Hbase的完全分布式集群,只不过集群的zookeeper与上次的不同,我们都知道Hbase为了简化集群部署,已经内置了zookeeper,大部分时候使用内置的zookeeper都可以非常方便的部署集群,而这一点与solr中solrcloud的集群部署非常相似,solrcloud也内置了zookeeper了,启动的时候 ...
qindongliang1922 评论(1) 有7306人浏览 2013-11-21 15:32

zookeeper启动的一个错误

2013-11-07 16:09:06,470 [myid:] - INFO [main:QuorumPeerConfig@101] - Reading configuration from: /dp/zookeeper/bin/../conf/zoo.cfg 2013-11-07 16:09:06,481 [myid:] - INFO [main:QuorumPeerConfig@334 ...
tangjunliang 评论(0) 有2080人浏览 2013-11-07 17:11

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics