【总结】RPC框架Dubbo深入分析
1,背景
随着互联网的发展,网站应用的规模不断扩大,常规的垂直应用架构已无法应对,分布式服务架构以及流动计算架构势在必行,亟需一个治理系统确保架构有条不紊的演进
- 单一应用架构
-
- 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本
- 此时,用于简化增删改查工作量的数据访问框架(ORM)是关键
- 垂直应用架构
-
- 当访问量逐渐增大,单一应用增加机器带来的加速度越来越小,将应用拆成互不相干的几个应用,以提升效率
- 此时,用于加速前端页面开发的Web框架(MVC)是关键
- 分布式服务架构
-
- 当垂直应用越来越多,应用之间交互不可避免,将核心业务抽取出来,作为独立的服务,逐渐形成稳定的服务中心,使前端应用能更快速的响应多变的市场需求
- 此时,用于提高业务复用及整合的分布式服务框架(RPC)是关键
- 分布式服务RPC框架
-
- 按业务线拆分
-
- 部署分离
-
- 每次发布只部署部分服务器
- 每个节点可根据不同需求伸缩扩展
- 每个应用之间更新,部署,运行不影响
- 团队分离
- 数据分离
- 停止RPC滥用,垂直业务内优先通过本地jar调用,跨业务才采用RPC调用
- 正确的识别业务逻辑的归属,让各个模块最大化内聚,从性能,可用性和维护性上减少耦合
- 流动计算架构
-
- 当服务越来越多,容量的评估,小服务资源的浪费等问题逐渐显现,此时需增加一个调度中心基于访问压力实时管理集群容量,提高集群利用率
- 此时,用于提高机器利用率的资源调度和治理中心(SOA)是关键
2,需求
在大规模服务化之前,应用可能只是通过RMI或Hessian等工具,简单的暴露和引用远程服务,通过配置服务的URL地址进行调用,通过F5等硬件进行负载均衡
- 当服务越来越多时,服务URL配置管理变得非常困难,F5硬件负载均衡器的单点压力也越来越大
-
- 此时需要一个服务注册中心,动态的注册和发现服务,使服务的位置透明
- 并通过在消费方获取服务提供方地址列表,实现软负载均衡和Failover,降低对F5硬件负载均衡器的依赖,也能减少部分成本
- 当进一步发展,服务间依赖关系变得错踪复杂,甚至分不清哪个应用要在哪个应用之前启动,架构师都不能完整的描述应用的架构关系
-
- 这时,需要自动画出应用间的依赖关系图,以帮助架构师理清理关系
- 接着,服务的调用量越来越大,服务的容量问题就暴露出来,这个服务需要多少机器支撑?什么时候该加机器?
-
- 为了解决这些问题,第一步,要将服务现在每天的调用量,响应时间,都统计出来,作为容量规划的参考指标
- 其次,要可以动态调整权重,在线上,将某台机器的权重一直加大,并在加大的过程中记录响应时间的变化,直到响应时间到达阀值,记录此时的访问量,再以此访问量乘以机器数反推总容量
3,Dubbo架构
- Dubbo分层
-
- 层次结构
-
- Business
-
- Service
- RPC
-
- Config
- Proxy
- Registry
- Cluster
- Monitor
- Protocol
- Remoting
-
- Exchange
- Transport
- Serialize
- 层说明
-
- config(配置层 )
-
- 对外配置接口
- 以ServiceConfig, ReferenceConfig为中心,可以直接new配置类,也可以通过spring解析配置生成配置类
- proxy(服务代理层)
-
- 服务接口透明代理,生成服务的客户端Stub和服务器端Skeleton
- 以ServiceProxy为中心,扩展接口为ProxyFactory
- 选择
-
- Javassist ProxyFactory
- Jdk ProxyFactory
- registry( 注册中心层)
-
- 封装服务地址的注册与发现
- 以服务URL为中心,扩展接口为RegistryFactory, Registry, RegistryService
- 选择
-
- Zookeeper
-
- 支持基于网络的集群方式,有广泛周边开源产品,建议使用dubbo-2.3.3以上版本(推荐使用)
- 依赖于Zookeeper的稳定性
- Redis
-
- 支持基于客户端双写的集群方式,性能高
- 要求服务器时间同步,用于检查心跳过期脏数据
- Multicast
-
- 去中心化,不需要安装注册中心
- 依赖于网络拓普和路由,跨机房有风险
- Simple
-
- Dogfooding,注册中心本身也是一个标准的RPC服务
- 没有集群支持,可能单点故障
- cluster( 路由层)
-
- 封装多个提供者的路由及负载均衡,并桥接注册中心
- 以Invoker为中心,扩展接口为Cluster, Directory, Router, LoadBalance
- Cluster选择
-
- Failover
-
- 失败自动切换,当出现失败,重试其它服务器,通常用于读操作(推荐使用)
- 重试会带来更长延迟
- Failfast
-
- 快速失败,只发起一次调用,失败立即报错,通常用于非幂等性的写操作
- 如果有机器正在重启,可能会出现调用失败
- Failsafe
-
- 失败安全,出现异常时,直接忽略,通常用于写入审计日志等操作
- 调用信息丢失
- Failback
-
- 失败自动恢复,后台记录失败请求,定时重发,通常用于消息通知操作
- 不可靠,重启丢失
- Forking
-
- 并行调用多个服务器,只要一个成功即返回,通常用于实时性要求较高的读操作
- 需要浪费更多服务资源
- Broadcast
-
- 广播调用所有提供者,逐个调用,任意一台报错则报错,通常用于更新提供方本地状态
- 速度慢,任意一台报错则报错
- Router选择
-
- Random
-
- 随机,按权重设置随机概率(推荐使用)
- 在一个截面上碰撞的概率高,重试时,可能出现瞬间压力不均
- RoundRobin
-
- 轮循,按公约后的权重设置轮循比率
- 存在慢的机器累积请求问题,极端情况可能产生雪崩
- LeastActive
-
- 最少活跃调用数,相同活跃数的随机,活跃数指调用前后计数差,使慢的机器收到更少请求
- 不支持权重,在容量规划时,不能通过权重把压力导向一台机器压测容量
- ConsistentHash
-
- 一致性Hash,相同参数的请求总是发到同一提供者,当某一台提供者挂时,原本发往该提供者的请求,基于虚拟节点,平摊到其它提供者,不会引起剧烈变动
- 压力分摊不均
- 路由规则
-
- 条件路由
-
- 基于条件表达式的路由规则,功能简单易用
- 有些复杂多分支条件情况,规则很难描述
- 脚本路由
-
- 基于脚本引擎的路由规则,功能强大
- 没有运行沙箱,脚本能力过于强大,可能成为后门
- 容器
-
- Spring
-
- 自动加载META-INF/spring目录下的所有Spring配置
- Jetty
-
- 启动一个内嵌Jetty,用于汇报状态
- 大量访问页面时,会影响服务器的线程和内存
- Log4j
-
- 自动配置log4j的配置,在多进程启动时,自动给日志文件按进程分目录
- 用户不能控制log4j的配置,不灵活
- monitor( 监控层)
-
- RPC调用次数和调用时间监控
- 以Statistics为中心,扩展接口为MonitorFactory, Monitor, MonitorService
- protocol( 远程调用层)
-
- 封装RPC调用
- 以Invocation, Result为中心,扩展接口为Protocol, Invoker, Exporter
- 选择
-
- Dubbo协议
-
- 采用NIO复用单一长连接,并使用线程池并发处理请求,减少握手和加大并发效率,性能较好(推荐使用)
- 适合于小数据量大并发的服务调用,以及服务消费者机器数远大于服务提供者机器数的情况
- Dubbo缺省协议不适合传送大数据量的服务,比如传文件,传视频等,除非请求量很低
- Dubbo协议缺省每服务每提供者每消费者使用单一长连接,如果数据量较大,可以使用多个连接
- 为防止被大量连接撑挂,可在服务提供方限制大接收连接数,以实现服务提供方自我保护
- 在大文件传输时,单一连接会成为瓶颈
- 总结
-
- 连接个数:单连接
- 连接方式:长连接
- 传输协议:TCP
- 传输方式:NIO异步传输
- 序列化:Hessian二进制序列化
- 适用范围:传入传出参数数据包较小(建议小于100K),消费者比提供者个数多,单一消费者无法压满提供者,尽量不要用dubbo协议传输大文件或超大字符串。
- 适用场景:常规远程服务方法调用
- Rmi协议
-
- 可与原生RMI互操作,基于TCP协议
- 偶尔会连接失败,需重建Stub
- Hessian协议
-
- 可与原生Hessian互操作,基于HTTP协议
- 需hessian.jar支持,http短连接的开销大
- Hessian协议用于集成Hessian的服务,Hessian底层采用Http通讯,采用Servlet暴露服务,Dubbo缺省内嵌Jetty作为服务器实现
- 可以和原生Hessian服务互操作
-
- 提供者用Dubbo的Hessian协议暴露服务,消费者直接用标准Hessian接口调用
- 或者提供方用标准Hessian暴露服务,消费方用Dubbo的Hessian协议调用
- 基于Hessian的远程调用协议
- 总结
-
- 连接个数:多连接
- 连接方式:短连接
- 传输协议:HTTP
- 传输方式:同步传输
- 序列化:Hessian二进制序列化
- 适用范围:传入传出参数数据包较大,提供者比消费者个数多,提供者压力较大,可传文件
- 适用场景:页面传输,文件传输,或与原生hessian服务互操作
- 约束
-
- 参数及返回值需实现Serializable接口
- 参数及返回值不能自定义实现List, Map, Number, Date, Calendar等接口,只能用JDK自带的实现,因为hessian会做特殊处理,自定义实现类中的属性值都会丢失
- exchange( 信息交换层)
-
- 封装请求响应模式,同步转异步
- 以Request, Response为中心,扩展接口为Exchanger, ExchangeChannel, ExchangeClient, ExchangeServer
- transport( 网络传输层)
-
- 抽象mina和netty为统一接口
- 以Message为中心,扩展接口为Channel, Transporter, Client, Server, Codec
- 选择
-
- Netty
-
- 性能较好(推荐使用)
- 一次请求派发两种事件,需屏蔽无用事件
- Mina
-
- 老牌NIO框架,稳定
- 待发送消息队列派发不及时,大压力下,会出现FullGC
- Grizzly
-
- Sun的NIO框架,应用于GlassFish服务器中
- 线程池不可扩展,Filter不能拦截下一Filter
- serialize( 数据序列化层)
-
- 可复用的一些工具
- 扩展接口为Serialization, ObjectInput, ObjectOutput, ThreadPool
- 选择
-
- Hessian
-
- 性能较好,多语言支持(推荐使用)
- Hessian的各版本兼容性不好,可能和应用使用的Hessian冲突,Dubbo内嵌了hessian3.2.1的源码
- Dubbo
-
- 通过不传送POJO的类元信息,在大量POJO传输时,性能较好
- 当参数对象增加字段时,需外部文件声明
- Json
-
- 纯文本,可跨语言解析,缺省采用FastJson解析
- 性能较差
- Java
-
- Java原生支持
- 性能较差
- 关系说明
-
- 在RPC中,Protocol是核心层,也就是只要有Protocol + Invoker + Exporter就可以完成非透明的RPC调用,然后在Invoker的主过程上Filter拦截点。
- 图中的Consumer和Provider是抽象概念,只是想让看图者更直观的了解哪些类分属于客户端与服务器端,不用Client和Server的原因是Dubbo在很多场景下都使用Provider, Consumer, Registry, Monitor划分逻辑拓普节点,保持统一概念。
- 而Cluster是外围概念,所以Cluster的目的是将多个Invoker伪装成一个Invoker,这样其它人只要关注Protocol层Invoker即可,加上Cluster或者去掉Cluster对其它层都不会造成影响,因为只有一个提供者时,是不需要Cluster的。
- Proxy层封装了所有接口的透明化代理,而在其它层都以Invoker为中心,只有到了暴露给用户使用时,才用Proxy将Invoker转成接口,或将接口实现转成Invoker,也就是去掉Proxy层RPC是可以Run的,只是不那么透明,不那么看起来像调本地服务一样调远程服务。
- 而Remoting实现是Dubbo协议的实现,如果你选择RMI协议,整个Remoting都不会用上,Remoting内部再划为Transport传输层和Exchange信息交换层,Transport层只负责单向消息传输,是对Mina,Netty,Grizzly的抽象,它也可以扩展UDP传输,而Exchange层是在传输层之上封装了Request-Response语义。
- Registry和Monitor实际上不算一层,而是一个独立的节点,只是为了全局概览,用层的方式画在一起
- Dubbo模块分包
-
- 模块
-
- dubbo-common 公共逻辑模块,包括Util类和通用模型。
- dubbo-remoting 远程通讯模块,相当于Dubbo协议的实现,如果RPC用RMI协议则不需要使用此包。
- dubbo-rpc 远程调用模块,抽象各种协议,以及动态代理,只包含一对一的调用,不关心集群的管理。
- dubbo-cluster 集群模块,将多个服务提供方伪装为一个提供方,包括:负载均衡, 容错,路由等,集群的地址列表可以是静态配置的,也可以是由注册中心下发。
- dubbo-registry 注册中心模块,基于注册中心下发地址的集群方式,以及对各种注册中心的抽象。
- dubbo-monitor 监控模块,统计服务调用次数,调用时间的,调用链跟踪的服务。
- dubbo-config 配置模块,是Dubbo对外的API,用户通过Config使用Dubbo,隐藏Dubbo所有细节。
- dubbo-container 容器模块,是一个Standlone的容器,以简单的Main加载Spring启动,因为服务通常不需要Tomcat/JBoss等Web容器的特性,没必要用Web容器去加载服务
- 与分层的不同点在于
-
- container为服务容器,用于部署运行服务,没有在层中画出。
- protocol层和proxy层都放在rpc模块中,这两层是rpc的核心,在不需要集群时(只有一个提供者),可以只使用这两层完成rpc调用。
- transport层和exchange层都放在remoting模块中,为rpc调用的通讯基础。
- serialize层放在common模块中,以便更大程度复用
- 模型
-
- Protocol是服务域,它是Invoker暴露和引用的主功能入口,它负责Invoker的生命周期管理
- Invoker是实体域,它是Dubbo的核心模型,其它模型都向它靠扰,或转换成它,它代表一个可执行体,可向它发起invoke调用,它有可能是一个本地的实现,也可能是一个远程的实现,也可能一个集群实现
- Invocation是会话域,它持有调用过程中的变量,比如方法名,参数等
- 基本原则
-
- 采用Microkernel + Plugin模式,Microkernel只负责组将Plugin,Dubbo自身的功能也是通过扩展点实现的,也就是Dubbo的所有功能点都可被用户自定义扩展所替换
- 采用URL作为配置信息的统一格式,所有扩展点都通过传递URL携带配置信息
- 扩展点加载
-
- Dubbo的扩展点加载从JDK标准的SPI(Service Provider Interface)扩展点发现机制加强而来
- 在扩展类的jar包内,放置扩展点配置文件:META-INF/dubbo/接口全限定名,内容为:配置名=扩展实现类全限定名,多个实现类用换行符分隔
- 注意:这里的配置文件是放在你自己的jar包内,不是dubbo本身的jar包内,Dubbo会全ClassPath扫描所有jar包内同名的这个文件,然后进行合并
- Provider暴露服务的过程
-
- 具体服务到Invoker的转换
-
- ServiceConfig:ref对外提供服务实际类
- ProxyFactory:getInvoker()
-
- JavassistProxyFactory
- JdkProxyFactory
- Invoker转换为Exporter
-
- Invoker:AbstractProxyInvoker的实例
- Protocal:export()
-
- DubboProtocol
-
- Dubbo协议的Invoker转为Exporter发生在DubboProtocol类的export方法,它主要是打开socket侦听服务,并接收客户端发来的各种请求,通讯细节由Dubbo自己实现
- HessianProtocol
- InjvmProtocol
-
- 它通过Spring或Dubbo或JDK来实现RMI服务,通讯细节这一块由JDK底层来实现,这就省了不少工作量
- RmiProtocol
- WebServiceProtocol
- Export
- Consumer消费服务的过程
-
- 把远端服务转为Invoker
-
- ReferenceConfig
- Protocol:refer()
-
- DubboProtocol
- HessianProtocol
- InjvmProtocol
- RmiProtocol
- WebServiceProtocol
- 把Invoker转为客户端需要的接口
-
- Invoker
-
- DubboInvoker
- HessianInvoker
- InjvmInvoker
- RmiInvoker
- WebServiceInvoker
- ProxyFactory:getProxy()
-
- JavassistProxyFactory
- JdkProxyFactory
- ref
- 过程:首先ReferenceConfig类的init方法调用Protocol的refer方法生成Invoker实例(如上图中的红色部分),这是服务消费的关键。接下来把Invoker转换为客户端需要的接口
- 无处不在的Invoker
-
- 由于Invoker是Dubbo领域模型中非常重要的一个概念,很多设计思路都是向它靠拢
- 服务消费者Invoker
-
- 用户代码通过这个proxy调用其对应的Invoker(DubboInvoker、 HessianRpcInvoker、 InjvmInvoker、 RmiInvoker、 WebServiceInvoker中的任何一个),而该Invoker实现了真正的远程服务调用
- 服务提供者Invoker
-
- 被封装成为一个AbstractProxyInvoker实例,并新生成一个Exporter实例。这样当网络通讯层收到一个请求后,会找到对应的Exporter实例,并调用它所对应的AbstractProxyInvoker实例,从而真正调用了服务提供者的代码
- 线程模型
-
- 过程
-
- Proxy
- Client
-
- Transporter
-
- Header -> Codec
- Body -> Serialization
- Server
- Dispatcher
- ThreadPool
- Implementation
- Dispatcher
-
- all 所有消息都派发到线程池,包括请求,响应,连接事件,断开事件,心跳等
- direct 所有消息都不派发到线程池,全部在IO线程上直接执行
- message 只有请求响应消息派发到线程池,其它连接断开事件,心跳等消息,直接在IO线程上执行
- execution 只请求消息派发到线程池,不含响应,响应和其它连接断开事件,心跳等消息,直接在IO线程上执行
- connection 在IO线程上,将连接断开事件放入队列,有序逐个执行,其它消息派发到线程池
- ThreadPool
-
- fixed 固定大小线程池,启动时建立线程,不关闭,一直持有。(缺省)
- cached 缓存线程池,空闲一分钟自动删除,需要时重建
- limited 可伸缩线程池,但池中的线程数只会增长不会收缩。(为避免收缩时突然来了大流量引起的性能问题)
4,增强功能
- 并发控制
- 连接控制: 连接数控制
- 分组聚合: 分组聚合返回值,用于菜单聚合等服务
- 泛化引用: 泛化调用,无需业务接口类进行远程调用,用于测试平台,开放网关桥接等
- 异步调用
- 延迟暴露: 延迟暴露服务,用于等待应用加载warmup数据,或等待spring加载完成
- 延迟连接: 延迟建立连接,调用时建立
- 隐私传参: 附加参数
5,Dubbo扩展
- 方法
-
- OSGI
-
- Equinox
- Eclipse, HSF
- META-INF/MANIFEST.MF
- IoC
-
- Spring
- META-INF/spring/beans.xml
- SPI
-
- java.util.ServiceProvider
- JDBC, MessageDigest, ScriptEngine
- META-INF/services/com.xx.Xxx
- Dubbo SPI
-
- Microkernel & SPI
- Protocol & ProxyFactory & Filter
- Cluster & Directory & Router & LoadBalance
- Transporter & Serialization & ThreadPool
- TelnetHandler & StatusChecker
6,Dubbo设计原则
- 模块分包原则
-
- 复用度
-
- 包中的类应该有同样的重用可能性
- 紧密协作的类应该放在一个包
- 对于变化因子,包中的类应全改或全不改
- 变化应在包内终止,而不传播到其它包
- 发布的粒度和复用度相同
- 稳定度
-
- 被依赖的包应该总是比依赖者更稳定
- 不要让一个稳定的包依赖于不稳定包
- 单向依赖,无环依赖
- 抽象度
-
- 越稳定的包应该越抽象
- 稳定的包不抽象将导致扩展性极差
- 抽象的包不稳定将导致其依赖包跟随变化
- 框架扩展原则
-
- 微核 +插件体系
-
- OSGI
- IoC
- SPI
- 平等对待第三方
-
- Dogfooding
-
- 框架自己的功能也要扩展点实现
- 甚至微核的加载方式也可以扩展
- Autowire
-
- 装配逻辑由扩展点之间互助完成
- 杜绝硬编码的桥接和中间代码
- Cascading
-
- 层叠扩展粒度,逐级细分
- 由大的扩展点加载小的扩展点
- Law of Demeter
-
- 只与触手可及的扩展点交互,间接转发
- 保持行为单一,输入输出明确
- 外置生命周期
-
- API传入参数,SPI扩展点实例
- 尽量引用外部对象的实例,而不类元
-
- 正确:userInstance.xxx()
- 错误:Class.forName(userClass).newInstance().xxx()
- 尽量使用IoC注入,减少静态工厂方法调用
-
- 正确:setXxx(xxx)
- 错误:XxxFactory.getXxx();applicationContext.getBean(“xxx”)
- 最少化概念模型
- 一致性数据模型
-
- Dubbo统一URL模型
-
- 所有配置信息都转换成URL的参数
- 所有的元信息传输都采用URL
- 所有接口都可以获取到URL
- 领域划分原则
-
- 服务域
-
- 指产品主要功能入口,同时负责实体域和会话域的生命周期管理。
- Velocity的Engine
- Spring的BeanFactory
- 实体域
-
- 表示你要操作的对象模型,不管什么产品,总有一个核心概念,大家都绕围它转。
- Velocity的Template
- Spring的Bean
- 会话域
-
- 表示每次操作瞬时状态,操作前创建,操作后销毁。
- Velocity的Context
- Spring的Invocation
- 领域模型划分优势
-
- 结构清晰,可直接套用
- 充血模型,实体域带行为
- 可变与不可变状态分离,可变状态集中
- 所有领域线程安全,不需要加锁
- 领域模型线程安全性
-
- 服务域
-
- 通常服务域是无状态,或者只有启动时初始化不变状态,所以天生线程安全,只需单一实例运行
- 实体域
-
- 通常设计为不变类,所有属性只读,或整个类引用替换,所以是线程安全的
- 会话域
-
- 保持所有可变状态,且会话域只在线程栈内使用,即每次调用都在线程栈内创建实例,调用完即销毁,没有竞争,所以线程安全
- 接口分离原则
-
- API & SPI
-
- 声明式API(Dubbo API):描述需要什么
-
- ServiceConfig
- ReferenceConfig
- RpcContext
- 过程式SPI(Dubbo SPI):描述怎么实现
-
- Protocol
- Transporter
- LoadBalance
- API可配置,一定可编程
-
- 配置用于简化常规使用
- 编程接口用于框架集成
- API区分命令与查询
-
- 命令:无返回值表示命令,有副作用
- 查询:有返回值表示查询,保持幂等,无副作用
- 组件协作原则
-
- 管道 v.s. 派发
-
- 管道
-
- 组合行为
- 主功能以截面实现
- 比如:Servlet
- 派发
-
- 策略行为
- 主功能以事件实现
- 比如: Swing
- 分布 v.s. 共享
-
- 分布
-
- 在行为交互为主的系统是适用
- 状态通过行为传递
- 共享
-
- 在以管理状态为主的系统中适用
- 状态通过仓库共享
- 主过程拦截
-
- Web框架的请求响应流
- ORM框架的SQL执行
- Service框架的调用过程
- 反例:IBatis2在SQL执行过程中没有设拦截点,导致添加安全或日志拦截,执行前修改分页SQL等,不得不hack源代码
- 事件派发
-
- 过程
-
- 执行前后
- 触发附带非关键行为
- 状态
-
- 值的变化
- 触发状态观察者行为
- 关键路径
-
- 关键路径
-
- 采用拦截链分离职责
- 保持截面功能单一,不易出问题
- 非关键路径
-
- 采用后置事件派发
- 确保派发失败,不影响主过程运行
- 协作防御
-
- 可靠性分离
-
- 可靠操作
- 不可靠操作 (尽量缩小)
- 状态分离
-
- 无状态
- 有状态 (尽量缩小)
- 不可变类 (尽量final)
- 状态验证
-
- 尽早失败
- 前置断言 + 后置断言 + 不变式
- 异常防御,但不忽略异常
-
- 异常信息给出解决方案
- 日志信息包含环境信息
- 降低修改时的误解性,不埋雷
-
- 避免基于异常类型的分支流程
- 保持null和empty语义一致
- 功能演进原则
-
- 开闭原则
-
- 对扩展开放
- 对修改关闭
- 软件质量的下降,来源于修改
- 替换整个实现类,而不是修改其中的某行
- 增量式 v.s.扩充式
-
- Dubbo增量式扩展
-
- Remoting
-
- Transport:
-
- 单向消息发送,抽象Mina/Netty
- Exchange:
-
- 封装Request-Respose语义
- 调用两次单向消息发送完成
- RPC
-
- Portocol:
-
- 协议实现,不透明,点对点
- Cluster:
-
- 将集群中多个提供者伪装成一个
- Proxy:
-
- 透明化接口,桥接动态代理
- 在高阶附加功能
-
- 尽可能少的依赖低阶契约,用最少的抽象概念实现功能
- 当低阶切换实现时,高阶功能可以继续复用
7,Dubbo编码约定
- 异常和日志:
-
- 尽可能携带完整的上下文信息,比如出错原因,出错的机器地址,调用对方的地址,连的注册中心地址,使用Dubbo的版本等。
- 尽量将直接原因写在最前面,所有上下文信息,在原因后用键值对显示。
- 抛出异常的地方不用打印日志,由最终处理异常者决定打印日志的级别,吃掉异常必需打印日志。
- 打印ERROR日志表示需要报警,打印WARN日志表示可以自动恢复,打印INFO表示正常信息或完全不影响运行。
- 建议应用方在监控中心配置ERROR日志实时报警,WARN日志每周汇总发送通知。
- RpcException是Dubbo对外的唯一异常类型,所有内部异常,如果要抛出给用户,必须转为RpcException。
- RpcException不能有子类型,所有类型信息用ErrorCode标识,以便保持兼容。
- 配置和URL:
-
- 配置对象属性首字母小写,多个单词用驼峰命名(Java约定)。
- 配置属性全部用小写,多个单词用"-"号分隔(Spring约定)。
- URL参数全部用小写,多个单词用"."号分隔(Dubbo约定)。
- 尽可能用URL传参,不要自定义Map或其它上下文格式,配置信息也转成URL格式使用。
- 尽量减少URL嵌套,保持URL的简洁性。
- 单元和集成测试:
-
- 单元测试统一用JUnit和EasyMock,集成测试用TestNG,数据库测试用DBUnit。
- 保持单元测试用例的运行速度,不要将性能和大的集成用例放在单元测试中。
- 保持单元测试的每个用例都用try...finally或tearDown释放资源。
- 减少while循环等待结果的测试用例,对定时器和网络的测试,用以将定时器中的逻辑抽为方法测试。
- 对于容错行为的测试,比如failsafe的测试,统一用LogUtil断言日志输出。
- 扩展点基类与AOP:
-
- AOP类都命名为XxxWrapper,基类都命名为AbstractXxx。
- 扩展点之间的组合将关系由AOP完成,ExtensionLoader只负载加载扩展点,包括AOP扩展。
- 尽量采用IoC注入扩展点之间的依赖,不要直接依赖ExtensionLoader的工厂方法。
- 尽量采用AOP实现扩展点的通用行为,而不要用基类,比如负载均衡之前的isAvailable检查,它是独立于负载均衡之外的,不需要检查的是URL参数关闭。
- 对多种相似类型的抽象,用基类实现,比如RMI,Hessian等第三方协议都已生成了接口代理,只需将将接口代理转成Invoker即可完成桥接,它们可以用公共基类实现此逻辑。
- 基类也是SPI的一部分,每个扩展点都应该有方便使用的基类支持。
- 模块与分包:
-
- 基于复用度分包,总是一起使用的放在同一包下,将接口和基类分成独立模块,大的实现也使用独立模块。
- 所有接口都放在模块的根包下,基类放在support子包下,不同实现用放在以扩展点名字命名的子包下。
- 尽量保持子包依赖父包,而不要反向。
8,Dubbo高性能之道
- 参考文章“【总结】Netty(RPC高性能之道)原理剖析 ”
相关推荐
在这个"阿里巴巴开源RPC框架dubbo的hello world实例"中,我们将深入理解dubbo的基本工作原理和如何创建一个简单的应用。 首先,我们需要了解dubbo的核心概念。dubbo提供服务提供者(Provider)、服务消费者...
总结来说,Dubbo作为一款强大的RPC框架,它的设计和实现涉及到了服务治理的多个重要方面。通过对Dubbo的深入学习和源码分析,我们可以提升分布式系统的设计和运维能力,为构建高可用、高并发的微服务架构打下坚实...
本篇文章将深入探讨基于Dubbo实现的RPC框架,以及其在JAVA开发中的应用。 首先,我们了解RPC的基本原理。RPC框架的核心思想是通过网络通信技术,将远程服务器上的方法调用封装成本地调用的形式,使得开发者可以忽略...
总结起来,这个“分布式框架Dubbo学习小案例”旨在帮助你理解如何使用Dubbo构建分布式系统,并结合Zookeeper实现服务的注册与发现。通过实践,你可以更深入地掌握Dubbo的核心特性和工作原理,为今后的分布式系统开发...
《Dubbo源码分析》是一套深入探讨Apache Dubbo这一著名Java开源框架的书籍,旨在帮助开发者更好地理解和应用Dubbo。Dubbo是一个高性能、轻量级的服务治理框架,广泛应用于微服务架构中,以实现服务的发布、发现、...
【阿里分布式框架dubbo学习】 Dubbo是阿里巴巴开源的一款高性能、轻量级的Java服务治理框架,它专注于服务之间的远程调用,旨在提高系统间的解耦和可扩展性。Dubbo的核心组件包括服务提供者(Provider)、服务消费...
《Dubbo源码分析系列》是一份深入探讨Java开源框架Dubbo核心原理和技术细节的资料。Dubbo,作为阿里巴巴的一款高性能、轻量级的服务治理框架,它为分布式系统提供了服务发现、调用、负载均衡、容错等关键功能。这份...
本项目旨在通过深入研究Netty和Zookeeper来构建一个类似Dubbo的RPC框架,从而帮助开发者更好地理解和实践分布式服务调用。 Netty是一个高性能、异步事件驱动的网络应用框架,用于快速开发可维护的高性能协议服务器...
Dubbo的主要目标是提供一个高性能、透明化的RPC(远程过程调用)框架,使得服务消费方可以像调用本地方法一样调用远程服务。它具备服务注册与发现、负载均衡、容错、调用链跟踪等核心功能,实现了服务之间的高效通信...
综上所述,Dubbo作为一个强大的RPC框架,不仅提供了高效的服务调用,还具备高度的灵活性和扩展性。通过深入学习和实践,开发者可以更好地驾驭分布式系统的复杂性,构建出更加健壮和高效的微服务架构。
总结,这份"服务框架 Dubbo文档资料"涵盖了Dubbo的核心特性和使用方法,对于开发者来说,无论是初学者还是经验丰富的专业人员,都是深入理解和服务于Dubbo的重要参考资料。通过学习和实践,可以有效地提升分布式系统...
分布式服务框架Dubbo是阿里巴巴开源的一款高性能、轻量级的服务治理框架,旨在提高微服务架构下的服务调用效率,提供服务发现、流量控制、容错重试等核心功能。本调研报告将深入探讨Dubbo的核心特性、设计理念以及...
Java服务框架Dubbo是阿里巴巴开源的一款高性能、轻量级的分布式服务治理框架,它主要解决的是企业内部微服务之间的通信问题。本压缩包"基于Java的服务框架 Dubbo.zip"包含了与Dubbo相关的各类资料,旨在帮助开发者更...
在这个"最简单的RPC框架源码"中,我们可以深入理解RPC的基本原理和实现机制。本文将详细讲解RPC框架的关键组成部分以及它们在Java中的应用。 首先,我们要明白RPC的核心思想:本地调用的感觉。在RPC框架中,客户端...
Java服务框架Dubbo是阿里巴巴开源的一款高性能、轻量级的服务治理平台,主要应用于分布式环境中的服务调用。它提供了一套完整的服务注册、发现、负载均衡、监控和故障转移等功能,帮助企业构建微服务架构。本压缩包...
总结,Minidubbo作为一个基于Netty的RPC框架,其设计思路清晰,易于理解和实践,特别适合初学者学习RPC原理。通过深入研究Minidubbo,开发者可以更好地掌握分布式系统的设计与实现,为未来的大型项目打下坚实的基础...
此外,了解其他开源RPC框架如Hessian、RMI、gRPC等,可以帮助对比分析各种框架的优缺点,选择最适合项目需求的解决方案。 总之,Dubbo不仅是一个RPC框架,更是一个全面的服务框架,它在微服务架构中扮演着关键角色...
在IT行业中,分布式服务框架Dubbo以及Remote Procedure Call(RPC)技术是构建大规模高并发系统的关键组件。这里我们将深入探讨这两个主题,以及它们在实际应用中的角色和原理。 首先,让我们了解一下Dubbo。Dubbo...