longzhun
- 浏览: 376331 次
- 性别:
- 来自: 北京
-
最新评论
-
记忆无泪：
遇到这个问题我用的sed -i 's/\r$//' /mnt/ ...
CentOS6 Shell脚本/bin/bash^M: bad interpreter错误解决方法 -
alenstudent：
Windows 下Nexus搭建Maven私服 -
dandongsoft：
lucene3+IK分词器 改造 lucene2.x+paoding -
duanyanrui：
学习了，支持
Google-Gson -
yscyfy：
这是你直接翻译过来的？？？
Google-Gson
文章列表
背景
早期，阿里巴巴B2B公司因为存在杭州和美国双机房部署，存在跨机房同步的业务需求。不过早期的数据库同步业务，主要是基于trigger的方式获取增量变更，不过从2010年开始，阿里系公司开始逐步的尝试基于数据库的日志解析，获取增量变更进行同步，由此衍生出了增量订阅&消费的业务，从此开启了一段新纪元。ps. 目前内部使用的同步，已经支持mysql5.x和oracle部分版本的日志解析
基于日志增量订阅&消费支持的业务：
数据库镜像
数据库实时备份
多级索引 (卖家和买家各自分库索引)
search build
业务cache刷新
价格变 ...
MySQL高可用架构在业务层面的分析研究
- 博客分类：
- MYSQL
http://www.2cto.com/database/201410/341071.html
复习：
二进制转10进制 :要从右(低位)到左(高位)用二进制的每个数去乘以2的相应次方
11001 = 1*20+0*21+0*22+1*23+1*24 =1+0+0+8+16 =25
10进制转2进制：
25
Semaphore，动态增减信号量
- 博客分类：
- 并发
【信号量】：
用于控制对某资源访问的同一时间的并发量。
【如何获取】：
semaphore.tryAcquire()，尝试获取，不阻塞
semaphore.acquire()，没信号量可用时，将进行阻塞等
【如何释放】：
1.关于spring ioc 这段时间也着实好好的看了下spring的相关书籍，对其也有了大概和初步的认识和理解，虽然之前也一直听说spring是一个非常优秀的开源框架，可一直没有机会学习和使用（是不是有点落伍了？呵呵），所以呢，这段时间就重点学习了spring（一个星期的时间当然是入门级的啦~~） 大家一直都说spring的IOC如何如何的强大，其实我倒觉得不是IOC如何的强大，说白了IOC其实也非常的简单。我们先从IOC说起，这个概念其实是从我们平常new一个对象的对立面来说的，我们平常使用对象的时候，一般都是直接使用关键字类new一个对象，那这样有什么坏处呢？其实很显然的，使用new ...
MySQL主从同步延迟解决方案
- 博客分类：
- MYSQL
第一种方案：
使用MySQL Proxy解决MySQL主从同步延迟
MySQL的主从同步机制非常方便的解决了高并发读的应用需求，给Web方面开发带来了极大的便利。但这种方式有个比较大的缺陷在于MySQL的同步机制是依赖Slave主动向Master发请求 ...
数据库索引的实现原理
- 博客分类：
- 数据结构
数据库索引，是数据库管理系统中一个排序的数据结构，以协助快速查询、更新数据库表中数据。索引的实现通常使用B树及其变种B+树。
在数据之外，数据库系统还维护着满足特定查找算法的数据结构，这些数据结构以某种方式引用(指向)数据，这样就可以在这些数据结构上实现高级查找算法。这种数据结构，就是索引。
为表设置索引要付出代价的：一是增加了数据库的存储空间，二是在插入和修改数据时要花费较多的时间(因为索引也要随之变动)。
上图展示了一种可能的索引方式。左边是数据表，一共有两列七条记录，最左边的是数据记录的物理地址(注意逻辑上相邻的记录在
哈希表和哈希函数是大学数据结构中的课程，实际开发中我们经常用到Hashtable这种结构，当遇到键-值对存储，采用Hashtable比ArrayList查找的性能高。为什么呢？我们在享受高性能的同时，需要付出什么代价(这几天看红顶商人胡雪岩，经典台词：在你享受这之前，必须受别人吃不了的苦，忍受别人受不了的屈辱)，那么使用Hashtable是否就是一桩无本万利的买卖呢？就此疑问，做以下分析，希望能抛砖引玉。1)hash它为什么对于键-值查找性能高学 过数据结构的，都应该晓得，线性表和树中，记录在结构中的相对位置是随机的，记录和关键字之间不存在明确的关系，因此在查找记录的时候，需要进行一系列的 ...
普通泛型
class Point<T>{ // 此处可以随便写标识符号，T是type的简称
private T var ; // var的类型由T指定，即：由外部指定
Storm常见模式——分布式RPC
- 博客分类：
- storm
分布式RPC（distributed RPC，DRPC）用于对Storm上大量的函数调用进行并行计算过程。对于每一次函数调用，Storm集群上运行的拓扑接收调用函数的参数信息作为输入流，并将计算结果作为输出流发射出去。
DRPC本身算不上Storm的特性，它是通过Storm的基本元素：streams，spouts，bolts，topologies而衍生的一个模式。DRPC可以单独作为一个独立于Storm的库发布，但由于其重要性还是和Storm捆绑在了一起。
总体概述
DRPC通过DRPC Server来实现，DRPC Server的整体工作过程如下：
接收到一个RPC调用请求；
发 ...
Storm DRPC实现机制分析
- 博客分类：
- storm
DRPC是建立在Storm基本概念（Topology、Spout、Bolt、Stream等）之上的高层抽象，个人理解它的目标是在Storm 集群之上提供一种分布式的RPC框架，以便能够利用Storm快速的实现RPC请求的分布式计算过程，即发起一次RPC请求，多个worker计算节点参与计算，最后汇总后将计算结果返回给客户端。
DRPC实现框架
Storm中使用Thrift作为其RPC框架，同样地，DRPC的实现也是构建在Thrift协议之上，相关的源码文件如下：
1. storm-core/src/storm.thrift，定义了Storm中实现的Thrift协议，其中有两个se ...
Storm集群安装部署步骤【详细版】
- 博客分类：
- storm
1. Storm集群组件
Storm集群中包含两类节点：主控节点（Master Node）和工作节点（Work Node）。其分别对应的角色如下：
主控节点（Master Node）上运行一个被称为Nimbus的后台程序，它负责在Storm集群内分发代码，分配任务给工作机器，并且负责监控集群运行状态。Nimbus的作用类似于Hadoop中JobTracker的角色。
每个工作节点（Work Node）上运行一个被称为Supervisor的后台程序。Supervisor负责监听从Nimbus分配给它执行的任务，据此启动或停止执行任务的工作进程。每一个工作进程执行一个Topology的子集 ...
Zookeeper 安装和配置
- 博客分类：
- zookeeper
zookeeper的安装和配置十分简单, 既可以配置成单机模式, 也可以配置成集群模式. 下面将分别进行介绍.
单机模式
点击这里下载zookeeper的安装包之后, 解压到合适目录. 进入zookeeper目录下的conf子目录, 创建zoo.cfg:
Bash代码
CentOS安装JDK1.6
- 博客分类：
- 互联网
1、获得程序包 jdk-6u16-dlj-linux-i586.bin
http://java.sun.com/javase/downloads/index.jsp
wget http://down1.chinaunix.net/distfiles/jdk-6u16-dlj-linux-i586.bin
2、解压安装
chmod +x jdk-6u16-dlj-linux-i586.bin
shell&
Apache服务自带了应该用于压力测试的工具ab（ApacheBench），对应做一些简单的压力测试，它完全能够胜任。本文介绍在Centos中不安装apache的情况下如何获取安装ab。
ab运行需要依赖apr-util包，安装命令为：
yum install apr-util
下载apache的rpm包，可以直接去官网手动下载，当然也可以使用命令yumdownloader来完成，yumdownloader是yum-utils包下面的，如果没有安装yum-utils，则需要先安装它。因为解压apache的rpm包时会在当前目录下生成etc、var和usr三个目录，所以建议先创建一个临时目 ...