- 浏览: 211641 次
- 性别:
- 来自: 北京
文章分类
最新评论
-
bluky999:
jiakechong 写道跟啊里爸爸那个差不多吧跟 dubb ...
淘宝-HSF -
jiakechong:
跟啊里爸爸那个差不多吧
淘宝-HSF -
lookqlp:
您好!我写了个关键词关联度统计的mapreduce,排序非常慢 ...
排序--MapReduce -
liubang201010:
DB Audit更多参考资料:
http://www.inno ...
8--《DB Audit》 -
裴小星:
这些数据库专家,同样不了解程序员。SQL(或PL/SQL,TS ...
MapReduce:一个重大的倒退
HSF:High-speed Service Framework
主要做了以下方面:服务方式的远程调用;软负载体系;服务可用性保障
spring-hessian
序列化方式一:Hessian 是由 caucho 提供的一个基于 binary-RPC 实现的远程通讯 library 。
1 、是基于什么协议实现的 ?
基于 Binary-RPC 协议实现。
2 、怎么发起请求 ?
需通过 Hessian 本身提供的 API 来发起请求。
3 、怎么将请求转化为符合协议的格式的 ?
Hessian 通过其自定义的串行化机制将请求信息进行序列化,产生二进制流。
4 、使用什么传输协议传输 ?
Hessian 基于 Http 协议进行传输。
5 、响应端基于什么机制来接收请求 ?
响应端根据 Hessian 提供的 API 来接收请求。
6 、怎么将流还原为传输格式的 ?
Hessian 根据其私有的串行化机制来将请求信息进行反序列化,传递给使用者时已是相应的请求信息对象了。
7 、处理完毕后怎么回应 ?
处理完毕后直接返回, hessian 将结果对象进行序列化,传输至调用端。
序列化方式二: Protocol buffer,Protocol buffers are a flexible, efficient, automated mechanism for serializing structured data – think XML, but smaller, faster, and simpler. You define how you want your data to be structured once, then you can use special generated source code to easily write and read your structured data to and from a variety of data streams and using a variety of languages. You can even update your data structure without breaking deployed programs that are compiled against the "old" format.
远程调用:同步、单向异步、Future异步、Callback异步、可靠异步
负载均衡 : failover,随机寻址,第七层路由,路由规则,权重规则
failover(故障转移):In computing , failover is the capability to switch over automatically to a redundant or standby computer server , system , or network upon the failure or abnormal termination of the previously active application ,[ 1] server, system, or network. Failover happens without human intervention and generally without warning, unlike switchover .
随机寻址:
负载均衡策略
选择合适的负载均衡策略,使多个设备能很好的共同完成任务,消除或避免现有网络负载分布不均、数据流量拥挤反应时间长的瓶颈。在各负载均衡方式中,针对不同的应用需求,在
OSI
参考模型的第二、三、四、七层的负载均衡都有相应的负载均衡策略。
负载均衡策略的优劣及其实现的难易程度有两个关键因素:一、负载均衡算法,二、对网络系统状况的检测方式和能力。
轮循均衡(
Round Robin
):
每一次来自网络的请求轮流分配给内部中的服务器,从
1
至
N
然后重新开始。此种均衡算法适合于服务器组中的所有服务器都有相同的软硬件配置并且平均服务请求相对均衡的情况。
权重轮循均衡(
Weighted Round Robin
):
根据服务器的不同处理能力,给每个服务器分配不同的权值,使其能够接受相应权值数的服务请求。例如:服务器
A
的权值被设计成
1
,
B
的权值是
3
,
C
的权值是
6
,则服务器
A
、
B
、
C
将分别接受到
10%
、
30
%、
60
%的服务请求。此种均衡算法能确保高性能的服务器得到更多的使用率,避免低性能的服务器负载过重。
随机均衡(
Random
):
把来自网络的请求随机分配给内部中的多个服务器。
权重随机均衡(
Weighted Random
):
此种均衡算法类似于权重轮循算法,不过在处理请求分担时是个随机选择的过程。
响应速度均衡(
Response Time
):
负载均衡设备对内部各服务器发出一个探测请求(例如
Ping
),然后根据内部中各服务器对探测请求的最快响应时间来决定哪一台服务器来响应客户端的服务请求。此种均衡算法能较好的反映服务器的当前运行状态,但这最快响应时间仅仅指的是负载均衡设备与服务器间的最快响应时间,而不是客户端与服务器间的最快响应时间。
最少连接数均衡(
Least Connection
):
客
户端的每一次请求服务在服务器停留的时间可能会有较大的差异,随着工作时间加长,如果采用简单的轮循或随机均衡算法,每一台服务器上的连接进程可能会产生
极大的不同,并没有达到真正的负载均衡。最少连接数均衡算法对内部中需负载的每一台服务器都有一个数据记录,记录当前该服务器正在处理的连接数量,当有新
的服务连接请求时,将把当前请求分配给连接数最少的服务器,使均衡更加符合实际情况,负载更加均衡。此种均衡算法适合长时处理的请求服务,如
FTP
。
处理能力均衡:
此种均衡算法将把服务请求分配给内部中处理负荷(根据服务器
CPU
型号、
CPU
数量、内存大小及当前连接数等换算而成)最轻的服务器,由于考虑到了内部服务器的处理能力及当前网络运行状况,所以此种均衡算法相对来说更加精确,尤其适合运用到第七层(应用层)负载均衡的情况下。
DNS
响应均衡(
Flash DNS
):
在
Internet
上,无论是
HTTP
、
FTP
或是其它的服务请求,客户端一般都是通过域名解析来找到服务器确切的
IP
地址的。在此均衡算法下,分处在不同地理位置的负载均衡设备收到同一个客户端的域名解析请求,并在同一时间内把此域名解析成各自相对应服务器的
IP
地址(即与此负载均衡设备在同一位地理位置的服务器的
IP
地址)并返回给客户端,则客户端将以最先收到的域名解析
IP
地址来继续请求服务,而忽略其它的
IP
地址响应。在种均衡策略适合应用在全局负载均衡的情况下,对本地负载均衡是没有意义的。
HSF 框架:OSGI,动态部署;Core+Plugins 模式;动态线程池
动态线程池:Jini中的TaskManager
服务方式的远程调用:远程通信框架Mina,消息中间件Notify,序列化协议Hessian;跨语言协议XFire
Equinox
Mina通信
心跳机制
评论
跟 dubbo 是同类产品,一个用在taobao.com,一个用在alibab.com
发表评论
-
hadoop shuffle机制中针对中间数据的排序过程详解(源代码级)---转载
2011-10-20 09:18 3892转载--http://blog.csdn.net/riverm ... -
ConcurrentModificationException
2011-09-26 12:03 948ConcurrentModificationException ... -
Axis2常见错误
2011-09-25 22:22 959An access occurred that is not ... -
marshal 学习
2011-08-22 17:43 853marshal是一个java与xml绑定的一个用具,marsh ... -
TDD thinking
2011-08-21 11:36 820今天看了一篇blog(http://drdobbs.com/g ... -
ZooKeeper 典型的应用场景(转载)
2011-08-03 12:16 1121Zookeeper 从 ... -
hadoop+hbase+zookeeper+hive 搭建实践
2011-07-20 20:50 875问题 1,zookeeper 单机伪集群----创建多个se ... -
hadoop常见问题解决
2011-07-14 11:52 758http://www.hadoopor.com/thread- ... -
My beautiful code----feel bad code smell (a serial code review later)
2011-07-13 14:49 976boolean fisrt=true; for(int i= ... -
TDD -JUnit
2011-06-29 16:50 1102http://www.ibm.com/developerwor ... -
Hadoop中的一些关注点
2011-06-08 20:39 752A sync point Distributed Cache ... -
回调函数
2011-05-27 17:27 777public interface ICallback { ... -
C指针
2011-05-23 18:00 753指针是一个特殊的变量 ... -
MVC 是什么--wiki
2011-05-03 21:28 873层次 模型(Model) “数据模型”(Model)用于 ... -
非阻塞同步机制
2011-05-03 18:17 840转自:http://blog.csdn.net/caoxu ... -
GemFire Enterprise- spring
2011-05-03 14:19 1198GemFire Enterprise is ... -
Java 序列化
2011-04-20 12:56 898Java Serialization is one of ... -
zookeeper--分布式协同框架
2011-04-18 19:59 765Zookeeper 分布式服务框架是 Apache Hadoo ... -
java 邮件程序
2011-04-14 09:16 791import javax.activation.Data ... -
Pnuts
2011-03-28 21:55 701在分布式领域有个CAP理论,是说Consistency(一致性 ...
相关推荐
淘宝HSF(High Speed Service Framework)是阿里巴巴开源的一款高性能、轻量级的服务框架,主要用于构建大规模分布式服务系统。HSF全称为High Speed Service Framework,它基于Java语言开发,旨在提高服务调用的效率...
标题中的“taobao-HSF”指的是淘宝的High Speed Service(HSF)框架,它是一个高性能、高可用的服务治理框架,主要用于阿里巴巴集团内部的分布式服务调用。HSF提供了包括服务发现、服务调用、负载均衡、熔断保护等一...
"淘宝好舒服"(Taobao-HSF)是一个专为阿里巴巴集团内部设计的高性能服务框架,全称为High Speed Service。这个框架主要用于实现企业级的服务化架构,提供高效、稳定、灵活的服务调用解决方案。HSF是淘宝核心的服务...
淘宝的HSF框架,用户手册,有兴趣的人欢迎下载~内部文档哦~
1. **HSF (High Speed Service Framework)**:HSF是淘宝内部开发的一款高性能、轻量级的RPC框架,用于实现服务化架构中的服务调用。HSF.sar是HSF服务在Tomcat中的实现形式,它使得Tomcat能够直接支持HSF服务的发布和...
SF全称为High-Speed Service Framework,旨在为淘宝应用提供一个分布式的服务框架,HSF从分布式应用层面以及统一的发布/调用方式层面为大家提供支持,从而可以很容易的开发分布式的应用以及提供戒使用公用功能模块,...
淘宝技术框架分析报告中,讨论了淘宝在技术架构方面的设计和实现,涵盖了CDN技术、多数据中心策略、LVS技术、Session框架、HSF框架等方面的内容。 首先,淘宝使用CDN技术来解决不同运营商网络之间的互访性能问题,...
- **成熟阶段**(2007.12-至今):随着业务量的持续增长,淘宝在架构层面实现了更多的技术创新,包括应用透明伸缩、Session框架、高性能服务框架HSF、消息系统Notify等。 - **特点**:高度可扩展、高性能的服务框架...
远程服务调用框架HSF是淘宝自研的远程服务调用框架,它允许不同服务模块之间通过网络相互调用。HSF类似于Dubbo,但根据淘宝内部的具体实施情况做了调整。HSF与注册中心配合使用,支持大规模的分布式服务调用。 此外...
- **架构特色**:实现了数据访问层TDDL、面向服务框架HSF以及消息系统Notify等组件,大大增强了系统的灵活性和扩展性。 #### 四、总结 从LAMP架构到Java生态系统的转变,淘宝网经历了一次次的技术革新,成功应对了...
- **HSF(High Speed Service)**:为了解决服务间通信,淘宝开发HSF,提供高效的服务调用框架。 - **数据垂直化**:将不同业务数据分离到不同的数据库,减少相互影响,提升效率。 - **读写分离**:使用异构...
5. HSF(High Speed Service Framework):淘宝的HSF是一个高性能服务框架,用于协调分布式应用中的服务提供者和服务消费者。服务提供者启动时向ConfigServer注册服务信息,消费者则注册所需服务,当服务信息变更时...
这包括分布式服务框架(如HSF,淘宝的服务框架)、分布式存储系统(如Tair,淘宝的分布式Key-Value存储)和分布式任务调度(如Luban,淘宝的任务调度平台)等。 2. **数据库管理**:淘宝采用分布式数据库来存储和...
淘宝采用HSF(High Speed Service,高速服务框架),将庞大复杂的系统分解为多个微服务,每个服务专注于特定业务领域。这种方法提高了代码的可维护性,使得新功能的添加和系统扩展变得更加容易。通过服务化,系统...
本篇文章将深入探讨淘宝的技术架构,包括CDN技术、多数据中心策略、LVS负载均衡、Session管理和HSF高性能服务框架,以及NotifR消息中间件。同时,文章还将对比吉林银行的技术框架,以揭示两者间的差异。 首先,CDN...