`

dubbo相关

 
阅读更多

画的图不错,http://study.163.com/course/introduction/1003828012.htm

Dubbo缺省协议采用单一长连接和NIO异步通讯。当然客户端可配置对每个提供者建立长连接数(默认配置0,即共享一个长连接,详情查询DubboProtocol.java),另外在Transporters.java中可看到建立连接通过Netty、Mina、Grizzly。

 

单一长连接:其实就是只有一个长连接做所有操作。那么如何处理发送端client多线程并发请求呢?其实每个线程将请求方法、参数、唯一ID等封装一个object,然后放到ConcurentHashMap中,将object放到request对象通过单一连接发送到服务端后,加锁wait,即done.await(timeout, TimeUnit.MILLISECONDS)。一个连接数可以支持70Mbype的网络流量。

协议:缺省协议,使用基于netty3.2.2+hessian3.2.1交互

java扩展实现:跟SPI机制很像,比如扩展Filter等。实现原理比如接口AService,有默认实现DefaultAService,要想实现自定义,可先写个MyAService,在META-INF下放一个com.alibaba.dubbo.xxx.A命名的文件,文件内容为xxxAService=com.xxx.MyAService即可。然后实例获取实现类可以简单理解为读取配置指定的class即可。

Container实现:使用了@SPI阿里自定义注解,其子类SpringContainer是含有ClassPathXmlApplicationContext的ioc容器,通过ExtensionLoader来生成对象。其中有JettyContainer、Log4jContainer。

 

 

源码:

dubbo底层嵌套使用了jetty,用于汇报状态。

dubbo-common 公共逻辑模块,包括Util类和通用模型。

dubbo-remoting 远程通讯模块,相当于Dubbo协议的实现,如果RPC用RMI协议则不需要使用此包。

dubbo-rpc 远程调用模块,抽象各种协议,以及动态代理,只包含一对一的调用,不关心集群的管理。

dubbo-cluster 集群模块,将多个服务提供方伪装为一个提供方,包括:负载均衡, 容错,路由等,集群的地址列表可以是静态配置的,也可以是由注册中心下发。

dubbo-registry 注册中心模块,基于注册中心下发地址的集群方式,以及对各种注册中心的抽象。

dubbo-monitor 监控模块,统计服务调用次数,调用时间的,调用链跟踪的服务。

dubbo-config 配置模块,是Dubbo对外的API,用户通过Config使用Dubbo,隐藏Dubbo所有细节。

dubbo-container 容器模块,是一个Standlone的容器,以简单的Main加载Spring启动,因为服务通常不需要Tomcat/JBoss等Web容器的特性,没必要用Web容器去加载服务

 

关系说明:

Protocol:在RPC中,Protocol是核心层,也就是只要有Protocol + Invoker + Exporter就可以完成非透明的RPC调用,然后在Invoker的主过程上Filter拦截点。Protocol是远程服务协议接口,具体实现有多个,比如DubboPrptpcpl、HttpProtocol等,其中Dubbo和RMI协议基于TCP实现,Hessian和WebService基于HTTP实现。

remoting-http中:remoting-netty同理,有一个Map<Integer, HttpHandler>,端口号对应处理器,HttpHandler有三种(HessianProtocol、WebServiceProtocol、HttpProtocol)。Remoting实现是Dubbo协议的实现,如果你选择RMI协议,整个Remoting都不会用上,Remoting内部再划为Transport传输层和Exchange信息交换层,Transport层只负责单向消息传输,是对Mina,Netty,Grizzly的抽象,它也可以扩展UDP传输,而Exchange层是在传输层之上封装了Request-Response语义。

Cluster:外围概念,所以Cluster的目的是将多个Invoker伪装成一个Invoker,这样其它人只要关注Protocol层Invoker即可,加上Cluster或者去掉Cluster对其它层都不会造成影响,因为只有一个提供者时,是不需要Cluster的。

Proxy层:封装了所有接口的透明化代理,而在其它层都以Invoker为中心,只有到了暴露给用户使用时,才用Proxy将Invoker转成接口,或将接口实现转成Invoker,也就是去掉Proxy层RPC是可以Run的,只是不那么透明,不那么看起来像调本地服务一样调远程服务。Javassist和jdk动态代理:JavassistProxyFactory、JdkProxyFactory两个类很简单。生成服务的客户端Stub和服务器端Skeleton。

 

 

模型:

Protocol是服务域,它是Invoker暴露和引用的主功能入口,它负责Invoker的生命周期管理

Invoker是实体域,它是Dubbo的核心模型,其它模型都向它靠扰,或转换成它,它代表一个可执行体,可向它发起invoke调用,它有可能是一个本地的实现,也可能是一个远程的实现,也可能一个集群实现

Invocation是会话域,它持有调用过程中的变量,比如方法名,参数等

 

另外:

dubbo处理TCP拆包粘包问题:由于TCP包的缓存大小限制,每次请求数据有可能不在一个TCP包里面,或者也可能多个请求的数据在一个TCP包里面。NettyCodecAdapter是对dubbo协议解析的入口,里面包含decoder和encoder两部分,而TCP的拆包和粘包主要是decoder部分。在NettyCodecAdapter中的decoder是由InternalDecoder来实现,它的父类是Netty的SimpleChannelUpstreamHandler可以接受所有inbound消息,那么就可以对接受的消息进行decode。这里需要说明一下对于某一个Channel都有一个私有的InternalDecoder对象,并不是和其他的

Channel共享,这里就避免了并发问题。

粘包拆包问题解决:http://blog.csdn.net/scythe666/article/details/51996268

1、发送端给每个数据包添加包首部,首部中应该至少包含数据包的长度,这样接收端在接收到数据后,通过读取包首部的长度字段,便知道每一个数据包的实际长度了。

2、发送端将每个数据包封装为固定长度(不够的可以通过补0填充),这样接收端每次从接收缓冲区中读取固定长度的数据就自然而然的把每个数据包拆分开来。

3、可以在数据包之间设置边界,如添加特殊符号,这样,接收端通过这个边界就可以将不同的数据包拆分开。

 

 

题外话:dubbo.jar包

 

迁移数据工具kettle:

分享到:
评论

相关推荐

    dubbo相关官方文档

    《Dubbo相关官方文档》包含了三个重要的组成部分:《dubbo-user-book》、《dubbo-dev-book》和《dubbo-admin-book》,这些都是深入了解和使用Dubbo框架必不可少的参考资料。接下来,我们将详细探讨这些文档中涉及的...

    Dubbo相关学习资料

    Dubbo是中国阿里巴巴开源的一款高性能、轻量级的Java RPC框架,它提供了丰富的功能,包括服务注册与发现、负载均衡、容错、监控等,旨在提高微服务架构中的服务治理效率。Dubbo在分布式系统设计中扮演着至关重要的...

    dubbo相关文件 dubbo-admin consumer-demo provider-demo

    dubbo相关文件 1.apache-tomcat-6.0.35.tar.gz 安装dubbo管理控制台的容器 2.dubbo-admin-2.4.1.war 管理控制台项目 3.dubbo-demo-consumer-2.1.5-assembly.tar.gz dubbo消费者示例项目 4.dubbo-demo-provider-2.1.5...

    dubbo 相关jar包

    这个“dubbo 相关jar包”显然包含了运行和开发基于Dubbo应用程序所需的库文件。以下是对Dubbo及其相关jar包的详细解释。 Dubbo是一个高性能、轻量级的服务框架,它主要关注服务的发布、发现、调用和治理。在分布式...

    Java面试资料之Dubbo相关

    【Java面试资料之Dubbo相关】的详细知识点解析: 1. **Dubbo是什么?** Dubbo是一个由阿里巴巴开源的高性能Java RPC框架,现已成为Apache基金会的孵化项目。它提供了服务治理、负载均衡、容错机制等核心功能,旨在...

    dubbo示例+dubbo官方配置文档+dubbo培训ppt

    此外,`d01373f082025aaf111c708cfbedab64034f1a4e.jpg`可能是与Dubbo相关的示例图或者架构图,它能直观地展示Dubbo的组件间交互,帮助我们更好地理解Dubbo的工作流程。 总的来说,掌握Dubbo的关键在于理解其核心...

    dubbo框架标签dubbo.xsd

    在Dubbo框架中,`dubbo.xsd`是一个专门定义Dubbo服务配置的XML Schema文件,包含了所有Dubbo相关的标签和属性定义,如服务提供者、消费者、协议、注册中心、监控中心等配置元素。 当我们需要在XML配置文件中使用...

    dubbo 视频下载

    【压缩包子文件的文件名称列表】中的"**dubbo网盘下载.txt**"可能是包含下载链接或提取码的文本文件,用于从115网盘获取Dubbo相关的视频教程。下载这个文件并按照指示操作,可以获取到完整的视频学习资料,进一步...

    dubbo入门demo样例

    同样,在pom.xml中也需要引入Dubbo相关依赖,以及可能的业务库依赖。启动服务提供者后,它会将自己的服务注册到指定的注册中心。 在使用Dubbo时,一个关键的概念是服务注册与发现。通常,我们会使用ZooKeeper作为...

    分布式RPC框架Apache Dubbo

    五、Dubbo相关配置说明 Dubbo提供了丰富的配置选项,例如服务版本、分组、超时时间、重试次数、负载均衡策略等。开发者可以根据实际需求调整这些配置,以优化服务性能和稳定性。例如,`dubbo.protocol.name`用于指定...

    dubbo的约束文件

    在Dubbo的场景下,dubbo.xsd定义了所有与Dubbo相关的XML元素和属性,这些元素和属性用于配置Dubbo服务、消费者、协议、注册中心等关键组件。 在Spring配置文件中,我们通常会看到类似这样的引用: ```xml xmlns:...

    dubbo资源 dubbo-admin dubbo demo

    【标题】"dubbo资源 dubbo-admin dubbo demo" 提供的是关于Apache Dubbo的相关素材,主要包括了Dubbo-admin的管理和示例项目。Dubbo是一个高性能、轻量级的开源Java RPC框架,它提供了丰富的服务治理功能,是阿里...

    搭建简单的dubbo示例与dubbo.xsd

    - 配置Maven或Gradle依赖,引入Dubbo相关的库。 - 配置Spring或Spring Boot,启动Dubbo服务。 - 测试服务调用,确保服务提供者和消费者能够正常通信。 总的来说,"搭建简单的dubbo示例与dubbo.xsd"涵盖了Java分布式...

    dubbo相关文件

    【Dubbo核心概念与原理】 Dubbo是一款由阿里巴巴开源的高性能、轻量级的服务框架,它致力于提供一种简单、高效的服务治理解决方案。Dubbo的核心设计理念是面向接口编程,通过服务暴露和服务引用,实现服务间的远程...

    dubbo+zookeeper实例

    2. "dubbo.xsd" - 这是Dubbo的XML Schema定义文件,用于验证和解析Dubbo相关的XML配置文件。 3. "dubbo.provider" - 可能是Dubbo服务提供者的配置文件或项目目录,包含服务提供者的相关代码和服务配置。 4. "dubbo....

    与dubbo 相关的源码

    《Dubbo源码解析:深度探索服务治理框架的内在机制》 Dubbo,作为阿里巴巴开源的一款高性能、轻量级的服务治理框架,它在分布式系统中扮演着至关重要的角色。通过深入学习Dubbo的源码,我们可以更透彻地理解其设计...

    一个最简单的 dubbo开发实例

    在`test-dubbo-provider`和`test-dubbo-consumer`中,我们通常会看到Dubbo相关的配置文件,例如`dubbo.xml`。这些配置文件定义了服务的元数据,包括服务接口、版本、分组、协议、端口等,并且可以配置消费者和服务...

    dubbo管理员手册

    - **版本兼容性**:在升级 Dubbo 或其相关组件时,应注意版本兼容性问题,防止引起服务不稳定。 - **安全加固**:由于 Dubbo 服务暴露在互联网中,需要对其进行安全加固,例如设置访问控制、配置加密连接等。 - **...

    dubbo-admin 2.5.3源码编译,alibaba-dubbo-dependency和opensesame类库

    `alibaba-dubbo-dependency` 是阿里巴巴提供的 Dubbo 依赖集合,包含了一系列 Dubbo 相关的 Maven 或 Gradle 依赖,如核心模块、协议扩展、监控工具等。通过引入这个依赖库,开发者可以轻松地将 Dubbo 集成到他们的...

    18-Dubbo相关知识点1

    下面我们将深入探讨Dubbo的相关知识点。 首先,我们要了解Dubbo的通信协议。Dubbo提供了多种通信协议供用户选择,每种协议都有其特定的应用场景: 1. **Dubbo 默认协议**:基于单一长连接的NIO异步通信。这种协议...

Global site tag (gtag.js) - Google Analytics