`
jieke_ZJ
  • 浏览: 44823 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

dubbo底层之Netty

 
阅读更多

背景

  1. Java线程:由开始的单线程,到通过new Thread()创建的多线程,再到现如今的线程池,Java多线程编程的效率和性能有了很大的提升
  2. Reactor模型:基于事件驱动,适合处理海量I/O事件

    1)  单线程模型,所有的IO操作都在一个NIO线程上完成

    存在性能和可靠性上的问题

    2)  多线程模型,有一组NIO线程处理IO操作

    有一个专门的NIO线程-Acceptor线程用于监听服务端,接收客户端的TCP连接请求;

    有一个NIO线程池,负责消息的读取、发送、编码、解码;

    一个NIO线程能负责N条链路,一条链路只能由一个线程负责(防止发生并发操作问题)

    3)  主从多线程模型

    添加主线程池用于处理客户端的连接请求,一旦链路建立成功(经过握手、认证等过程),就将链路注册到从线程池的IO线程上,由IO线程负责后续的IO操作

Netty线程模型

  1.线程模型分类

    1)  服务端线程模型,类似于Reactor的多线程模型

    2)  客户端线程模型:由客户端创建SocketChannel,发起连接,线程池判断连接结果,如果连接成功,则监听读操作位,否则监听连接操作位,一旦连接成功就监听读操作位

  2.Reactor线程NioEventLoop

    1)  作为服务端Acceptor线程,处理客户端的连接请求

    2)  作为客户端的connector,注册监听连接操作位,判断异步连接结果

    3)  作为IO线程,监听读操作位,负责从SorcketChannel中读取报文

    4)  作为IO线程,监听写操作位,负责向SocketChannel写入报文发送给对方

    5)  作为定时线程,执行定时任务(链路空闲检测,心跳检测)

    6)  作为线程执行器,可以执行普通的任务线程

  3.NioEventLoop设计原理

    1)  串行化设计理念:NioEventLoop线程池中有若干个NioEventLoop线程,每一个NioEventLoop线程串行执行Handler链;每当有一个客户端接入,从线程池中获取一个可用的NioEventLoop线程,当数组到达上限之后,从0开始(负载均衡);每个客户端连接一个线程,这样保证了数据的安全性(避免多个线程同时访问)

    2)  定时任务和时间轮算法:客户端连接超时,链路空闲检测

    Netty的定时任务调度就是基于时间轮调度算法,首先查看任务队列中是否有超时的定时任务或者普通任务,有则执行(按照时间片原则分配运行时间),没有就等待定时任务中延迟最小的任务(即即将第一个超时的任务)的延迟时间,然后将扫描定时任务,将超时的定时任务加入任务队列,在任务执行时,Netty每执行64个定时任务就检测一次是否达到执行时间上限,达到则退出,如果没有执行完就放到下次轮询时再处理。

    3)  Netty是个异步高性能NIO框架,不是业务处理容器,不需要也不应该提供业务容器和业务线程,,只需要提供和管理NIO线程,关于业务层模型由用户自己集成。

Netty结构

 

Dubbo通信层(利用Netty)的实现过程

 

分享到:
评论

相关推荐

    dubbo+netty打造高性能的RPC

    3. **netty**:在底层通信层面,Netty的高性能、非阻塞I/O模型使得大规模并发请求得以高效处理。 4. **http**:用于构建Web服务的基础协议,提供无状态的请求-响应模型,方便客户端与服务器间的信息交换。 5. **...

    dubbo协议、netty框架总结

    在Dubbo框架中,Netty作为底层通信引擎,负责处理网络IO,如接受和发送数据,以及管理线程模型,以优化资源利用。 设计一个私有的RPC框架,需要考虑以下几个关键点: 1. 消息边界:通过固定长度的协议头来定义消息...

    dubbo-remoting-netty4:dubbo项目的netty远程模块

    在实际开发中,Dubbo-Remoting-Netty4的使用者通常无需关心底层通信细节,只需要按照Dubbo的API规范进行服务暴露和服务引用。Netty4的强大性能在大型分布式系统中尤其明显,它可以有效地处理高并发请求,保证服务间...

    深入浅析Netty 在 Dubbo 中是如何应用的

    Dubbo是一个高性能、基于Java的RPC框架,它使用Netty作为网络通信的底层实现。本文将详细讲解Netty在Dubbo中的应用,包括Dubbo的Consumer如何使用Netty、Netty在Dubbo中的应用机制等。 一、Dubbo的Consumer如何使用...

    dubbo——rpc的原理和netty1

    总的来说,Dubbo的RPC机制简化了分布式服务的调用,而Netty则提供了高效的网络通信基础,两者结合可以构建出高性能的分布式系统。理解这两个技术的原理,对于优化和开发分布式应用程序具有重要的实践意义。

    minidubbo:基于Netty的完整RPC框架

    通过使用Netty作为底层通信框架,Minidubbo实现了高效的网络通信能力。 三、Minidubbo关键组件 1. 服务提供者(Provider):服务提供者将自身服务注册到注册中心,供其他服务消费者调用。 2. 服务消费者(Consumer...

    springboot和dubbo、netty的集成,redis mongodb的nosql模板, kafka roc.zip

    相比于传统的Java NIO,Netty提供了更高级别的API,使得开发者能够更专注于业务逻辑而不是底层的网络编程细节。 当我们谈论数据库时,Redis和MongoDB都是NoSQL数据库的代表。Redis是一个内存数据存储,支持多种数据...

    dubbo2.5.3.rar

    1. **高性能RPC**:Dubbo采用基于Netty的NIO框架,实现了轻量级的网络通信,提供高效的客户端和服务端连接,降低了网络通信延迟,从而提高了服务调用的性能。 2. **服务注册与发现**:通过Zookeeper、Eureka等注册...

    java聊天源码,springboot2聊天源码,dubbo聊天源码,netty聊天源码,java即时通信源码.zip

    数据库技术是软件开发中的必备技能,咱们从数据库基本操作到掌握数据库设计的能力,层层深入学习数据库设计思想,一个软件项目的底层逻辑中,数据的存储结构是重中之重,因此,数据库技术也是面试中常被面试官拿来...

    dubbo需要的架包

    1. **高性能**:Dubbo采用了Netty作为底层通信框架,提供了高效的RPC调用。 2. **灵活的路由规则**:Dubbo支持基于配置和服务接口的动态路由策略,可以根据不同的业务场景进行灵活的路由决策。 3. **负载均衡**:...

    Dubbo源代码(2.8.4)

    - **Remoting**:Dubbo采用了Netty作为底层通信框架,实现了高效的异步非阻塞IO,确保了服务间的高效通信。 - **RPC**:Dubbo通过接口调用的方式,隐藏了远程调用的复杂性,使得调用远程服务如同调用本地方法一样...

    dubbo2.0源码解读

    - **RPC调用**:Dubbo使用Netty作为底层通信框架,实现了基于HTTP、TCP等多种协议的通信。调用过程涉及接口代理、序列化、请求分发等环节。 - **负载均衡**:Dubbo提供了多种负载均衡策略,如随机、轮询、权重等,...

    dubbo最新全面深度解读

    Dubbo采用Netty作为底层通信库,Netty基于NIO模型,提供了高效的异步事件驱动网络通信框架,极大地提升了系统的并行处理能力。 7. **序列化(Serialization)** 序列化是远程调用中必不可少的一环,Dubbo支持多种...

    dubbo源码解析

    在通信层面,Dubbo默认使用了Netty作为底层网络库。Netty是一个异步事件驱动的网络应用程序框架,用于快速开发可维护的高性能协议服务器和客户端。在Dubbo中,Netty是如何处理dubbo协议的粘包和拆包问题呢?Netty...

    Dubbo 3 深度剖析 - 透过源码认识你

    《Dubbo 3 深度剖析 - 透过源码认识你》这本书或者教程,主要...通过对《Dubbo 3 深度剖析 - 透过源码认识你》的学习,开发者能够从底层理解Dubbo 3的工作机制,从而更好地利用这一框架构建健壮、高效的分布式应用。

    Netty权威指南中文版PDF

    Netty广泛应用于分布式系统、游戏服务器、流媒体服务、微服务框架等领域,例如 Dubbo 和 Spring Cloud 的部分组件就采用了Netty作为底层通信框架。 7. **学习Netty的重要性** 掌握Netty能够帮助开发者构建高效率...

    dubbo2.5.8源码包

    2. **远程调用机制**:Dubbo使用Netty作为底层通信框架,研究其Remoting层可以理解如何实现高效的RPC调用。 3. **负载均衡策略**:Dubbo提供了多种负载均衡算法,如随机、轮询、最少活跃调用数等,源码中可以学习...

    mic面试文档(九月份已更新).pdf

    3. Dubbo 底层使用 Netty 框架,基于 TCP 协议传输,配合 Hession 序列化完成 RPC 通信 4. Spring Cloud 是基于 Http 协议+Rest 接口调用远程过程的通信 Dubbo 是一个高性能、轻量级的开源 RPC 框架,提供了分布式...

    dubbo-snapshot

    7. **通信协议与序列化**:Dubbo 使用 Netty 作为底层通信框架,提供了多种序列化方式,如 Hessian、protobuf 等,以实现高效的远程调用。 8. **Spring 集成**:Dubbo 可以无缝集成到 Spring 框架中,利用 Spring ...

    dubbo源码解析 1 pdf2.0

    4. Java RPC机制:了解Java RPC机制,如rmi、hessian、thrift、webservice等,这些是理解Dubbo底层通信机制的关键。 5. Java其他内容:涉及序列化、SPI、代理、Classloader、ScriptEngine等Java高级特性。 在了解...

Global site tag (gtag.js) - Google Analytics