javafan_303
- 浏览: 957064 次
- 性别:
- 来自: 北京
-
最新评论
-
baichoufei90：
hadoop权威指南说ZK的zab协议不是用的paxos算法。 ...
zookeeper原理（转） -
shin1355：
看了一小部分，看不下去了，
zookeeper原理（转） -
b_l_east：
表示没看懂楼主关于选举算法的描述，顿时没了读下去的兴致
zookeeper原理（转） -
prince4426：
好前沿的技术呀
hive选型讨论 -
zk519720303：
zookeeper原理（转）
文章列表
Base: An Acid Alternative
In partitioned databases, trading some consistency for availability can lead to dramatic improvements in scalability.
Dan Pritchett, Ebay
Web applications have grown in popularity over the past decade. Whether you are building an application for end users or application ...
如何使用消息系统避免分布式事务
- 博客分类：
- 分布式事务
作者：伯乐在线-meituanalibaba
网址：http://blog.jobbole.com/89140/
http://www.cnblogs.com/LBSer/p/4715395.html
不知道谁抄的谁的
前阵子从支付宝转账1万块钱到余额宝，这是日常生活的一件普通小事，但作为互联网研发人员的职业病， ...
http://blog.csdn.net/jiyiqinlovexx/article/details/43702035
http://blog.csdn.net/jiyiqinlovexx/article/details/38326865
http://vernonzheng.com/2015/02/09/开源分布式配置中心选型/
Uber容错设计与多机房容灾方案
- 博客分类：
- 多机房
此文是根据赵磊在【QCON高可用架构群】中的分享内容整理而成。
赵磊，Uber高级工程师，08年上海交通大学毕业，曾就职于微软，后加入Facebook主要负责Messenger的后端消息服务。这个系统在当时支持Facebook全球5亿人同时在线。目前在Uber负责消息系统的构建并推进核心服务在高可用性方向的发展。
前言
魅族多机房方案（转）
- 博客分类：
- 多机房
转自：http://blog.chinaunix.net/uid-30571370-id-5465017.html
魅族经过2014-2015年的转型以及销量大爆发后，随之而来的互联网服务业务越来越多，用户基数越来越大，之前单机房的扩展架构已经满足不了魅 族的发展，此外加上国内复杂网络环境下，单机房无法满足我们的可靠性需求。近年经常出现的光缆被挖、机房掉电。如支付宝光纤被挖断，导致业务中断；去年微 信也出现大面积故障，同样是光纤被挖断。除了单机房故障风险外，用户就近接入的需求也很强烈。
技术挑战
机房之间的网络延迟和带宽限制, 租用运营商的专线非常昂贵，可靠性也得不到保障；
业 ...
Versioning
Not all APIs and SDKs share the same versioning system. For example, the Graph API is versioned with a different pace and numbering compared to the iOS SDK. All SDKs released after 30th April 2014 support the ability to interact with different versions of our APIs. Multiple versions ...
I am currently working on a REST API, and the question was raised, how are, and how should, REST APIs be versioned? Here are the results of my research.
It seems that there are a number of people recommending using Content-Negotiation (the HTTP “Accept:” header) for API versioning. However, none of ...
现实企业级Java开发中，有时候我们会碰到下面这些问题：
OutOfMemoryError，内存不足
内存泄露
线程死锁
锁争用（Lock Contention）
Java进程消耗CPU过高
......
这些问题在日常开发中可能被很多人忽视（比如有的人遇到上面的问题只是重启服务器或者调大内存，而不会深究问题根源），但能够理解并解决这些问题是Java程序员进阶的必备要求。本文将对一些常用的JVM性能调优监控工具进行介绍，希望能起抛砖引玉之用。本文参考了网上很多资料，难以一一列举，在此
Memcached 自带了一个内存分配模块slab，自己在用户层实现了内存的分配，而不是完全依赖于系统的 malloc。这篇文章，来看看 Memcached slab 内存分配算法是怎么做的。
一个内存分配算法要考虑算法的效率，管理内存所占的空间和内存碎片的问题。这个是三个衡量点往往不能个个都得到满足，每个实现都会各有所长。slab 能较好的规避内存碎片的问题，但也带来了一定的内存浪费，算法的效率还不错。
Memcached slab 概述
在 Memcached 中，为键值对分配空间的时候都会调用 do_item_alloc() 函数，真正设计 slab 的是slabs_alloc() ...
假设我们要上线一个两年内不会宕机的先进架构。在上线前，免不了单元测试，功能测试，还有使用ab，webbench等等进行压力测试。
但这些步骤非生产环境下正式用户的行为。或许你会想到灰度上线，但毕竟可能会影响到部分用户，这怎么对得起我们两年内不宕机的承诺呢？
好在网易的 王斌 开发了tcpcopy， 可以导入线上流量进行功能和压力测试。
tcpcop
package io.github.id;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
/**
* 第一位为未使用（实际上也可作为long的符号位），接下来的41位为毫秒级时间，然后5位datacenter标识位，</br>
* 5位机器ID（并不算标识符，实际是为线程标识），然后12位该毫秒内的当前毫秒内的计数，加起来刚好64位，为一个Long型。
* 0---0000000000 0000000000 0000000000 0000000000 0 --- 00000 --- ...
Twitter-Snowflake算法产生的背景相当简单，为了满足Twitter每秒上万条消息的请求，每条消息都必须分配一条唯一的id，这些id还需要一些大致的顺序（方便客户端排序），并且在分布式系统中不同机器产生的id必须不同。
Snowflake算法核心
把时间戳，工作机器id，序列号组合在一起。
除了最高位bit标记为不可用以外，其余三组bit占位均可浮动，看具体的业务需求而定。默认情况下41bit的时间
1.XA
XA是由X/Open组织提出的分布式事务的规范。XA规范主要定义了(全局)事务管理器(Transaction Manager)和(局部)资源管理器(Resource Manager)之间的接口。XA接口是双向的系统接口，在事务管理器（Transaction Manager）以及一个或多个资源管理器（Resource Manager）之间形成通信桥梁。XA之所以需要引入事务管理器是因为，在分布式系统中，从理论上讲（参考Fischer等的论文），两台机器理论上无法达到一致的状态，需要引入一个单点进行协调。事务管理器控制着全局事务，管理事务生命周期，并协调资源。资源管理 ...
转载自
http://mp.weixin.qq.com/s?__biz=MjM5ODYxMDA5OQ==&mid=400465735&idx=1&sn=8d7067de4cc8f73ea5558f07e0a9340e&scene=0#wechat_redirect
缘起：受@萧田国 萧总邀请，上周五晚上在“高效运维1号群”内分享了《58同城数据库软件架构设计与实践》（这个topic今年在数据库大会上分享过），应组织方要求，发出纪要。
-Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME environment variable and mvn script match.
可以设一个环境变量M2_HOME指向你的maven安装目录
M2_HOME=D:\Apps\apache-maven-3.3.1
然后在Window->Preference->Java->Installed JREs->Edit
在Default VM arguments中设置
-Dmaven.multiModuleProjectDi ...