Netty架构总览
Netty的buffer实现
ByteBuffer的问题?
ChannelBuffer解决方式?
- 如果需要,允许使用自定义的缓冲类型。
- 复合缓冲类型中内置的透明的零拷贝实现。
- 开箱即用的动态缓冲类型,具有像StringBuffer一样的动态缓冲能力。
- 不再需要调用的flip()方法。
- 正常情况下具有比ByteBuffer更快的响应速度。
统一的NIO API
传统的Java I/O API在应对不同的传输协议时需要使用不同的类型和方法。例如:java.net.Socket 和 java.net.DatagramSocket它们并不具有相同的超类型,因此,这就需要使用不同的调用方式执行socket操作。
这种模式上的不匹配使得在更换一个网络应用的传输协议时变得繁杂和困难。由于(Java I/O API)缺乏协议间的移植性,当你试图在不修改网络传输层的前提下增加多种协议的支持,这时便会产生问题。并且理论上讲,多种应用层协议可运行在多种传输层协议之上例如TCP/IP,UDP/IP,SCTP和串口通信。
让这种情况变得更糟的是,Java新的I/O(NIO)API与原有的阻塞式的I/O(OIO)API并不兼容,NIO.2(AIO)也是如此。由于所有的API无论是在其设计上还是性能上的特性都与彼此不同,在进入开发阶段,你常常会被迫的选择一种你需要的API。
例如,在用户数较小的时候你可能会选择使用传统的OIO(Old I/O) API,毕竟与NIO相比使用OIO将更加容易一些。然而,当你的业务呈指数增长并且服务器需要同时处理成千上万的客户连接时你便会遇到问题。这种情况下你可能会尝试使用NIO,但是复杂的NIO Selector编程接口又会耗费你大量时间并最终会阻碍你的快速开发。
Netty有一个叫做Channel的统一的异步I/O编程接口,这个编程接口抽象了所有点对点的通信操作。也就是说,如果你的应用是基于Netty的某一种传输实现,那么同样的,你的应用也可以运行在Netty的另一种传输实现上。Netty提供了几种拥有相同编程接口的基本传输实现:
- NIO-based TCP/IP transport (See org.jboss.netty.channel.socket.nio),
- OIO-based TCP/IP transport (See org.jboss.netty.channel.socket.oio),
- OIO-based UDP/IP transport, and
- Local transport (See org.jboss.netty.channel.local).
切换不同的传输实现通常只需对代码进行几行的修改调整,例如选择一个不同的ChannelFactory实现。
此外,你甚至可以利用新的传输实现没有写入的优势,只需替换一些构造器的调用方法即可,例如串口通信。而且由于核心API具有高度的可扩展性,你还可以完成自己的传输实现。
Filter的Event模型
一个定义良好并具有扩展能力的事件模型是事件驱动开发的必要条件。Netty具有定义良好的I/O事件模型。由于严格的层次结构区分了不同的事件类型,因此Netty也允许你在不破坏现有代码的情况下实现自己的事件类型。这是与其他框架相比另一个不同的地方。很多NIO框架没有或者仅有有限的事件模型概念;在你试图添加一个新的事件类型的时候常常需要修改已有的代码,或者根本就不允许你进行这种扩展。
在一个ChannelPipeline内部一个ChannelEvent被一组ChannelHandler处理。这个管道是拦截过滤器 模式的一种高级形式的实现,因此对于一个事件如何被处理以及管道内部处理器间的交互过程,你都将拥有绝对的控制力。例如,你可以定义一个从socket读取到数据后的操作:
public class MyReadHandler implements SimpleChannelHandler { public void messageReceived(ChannelHandlerContext ctx, MessageEvent evt) { Object message = evt.getMessage(); // Do something with the received message. ... // And forward the event to the next handler. ctx.sendUpstream(evt); } }
同时你也可以定义一种操作响应其他处理器的写操作请求:
public class MyReadHandler implements SimpleChannelHandler { public void messageReceived(ChannelHandlerContext ctx, MessageEvent evt) { Object message = evt.getMessage(); // Do something with the received message. ... // And forward the event to the next handler. ctx.sendUpstream(evt); } }
有关事件模型的更多信息,请参考API文档ChannelEvent和ChannelPipeline部分。
适用快速开发的高级组件
就像“1.8. 使用POJO代替ChannelBuffer”一节所展示的那样,从业务逻辑代码中分离协议处理部分总是一个很不错的想法。然而如果一切从零开始便会遭遇到实现上的复杂性。你不得不处理分段的消息。一些协议是多层的(例如构建在其他低层协议之上的协议)。一些协议过于复杂以致难以在一台主机(single state machine)上实现。
因此,一个好的网络应用框架应该提供一种可扩展,可重用,可单元测试并且是多层的codec框架,为用户提供易维护的codec代码。
Netty提供了一组构建在其核心模块之上的codec实现,这些简单的或者高级的codec实现帮你解决了大部分在你进行协议处理开发过程会遇到的问题,无论这些协议是简单的还是复杂的,二进制的或是简单文本的。
不同于传统阻塞式的I/O实现,在NIO模式下支持SSL功能是一个艰难的工作。你不能只是简单的包装一下流数据并进行加密或解密工作,你不得不借助于javax.net.ssl.SSLEngine,SSLEngine是一个有状态的实现,其复杂性不亚于SSL自身。你必须管理所有可能的状态,例如密码套件,密钥协商(或重新协商),证书交换以及认证等。此外,与通常期望情况相反的是SSLEngine甚至不是一个绝对的线程安全实现。
在Netty内部,SslHandler封装了所有艰难的细节以及使用SSLEngine可能带来的陷阱。你所做的仅是配置并将该SslHandler插入到你的ChannelPipeline中。同样Netty也允许你实现像StartTlS 那样所拥有的高级特性,这很容易。
HTTP实现
HTTP无疑是互联网上最受欢迎的协议,并且已经有了一些例如Servlet容器这样的HTTP实现。因此,为什么Netty还要在其核心模块之上构建一套HTTP实现?
与现有的HTTP实现相比Netty的HTTP实现是相当与众不同的。在HTTP消息的低层交互过程中你将拥有绝对的控制力。这是因为Netty的HTTP实现只是一些HTTP codec和HTTP消息类的简单组合,这里不存在任何限制——例如那种被迫选择的线程模型。你可以随心所欲的编写那种可以完全按照你期望的工作方式工作的客户端或服务器端代码。这包括线程模型,连接生命期,快编码,以及所有HTTP协议允许你做的,所有的一切,你都将拥有绝对的控制力。
由于这种高度可定制化的特性,你可以开发一个非常高效的HTTP服务器,例如:
- 要求持久化链接以及服务器端推送技术的聊天服务(e.g. Comet )
- 需要保持链接直至整个文件下载完成的媒体流服务(e.g. 2小时长的电影)
- 需要上传大文件并且没有内存压力的文件服务(e.g. 上传1GB文件的请求)
- 支持大规模mash-up应用以及数以万计连接的第三方web services异步处理平台
Google Protocol Buffers
Google Protocol Buffers是快速实现一个高效的二进制协议的理想方案。通过使用ProtobufEncoder和ProtobufDecoder,你可以把Google Protocol Buffers 编译器 (protoc)生成的消息类放入到Netty的codec实现中。请参考“LocalTime ”实例,这个例子也同时显示出开发一个由简单协议定义 的客户及服务端是多么的容易。
总述
在这一章节,我们从功能特性的角度回顾了Netty的整体架构。Netty有一个简单却不失强大的架构。这个架构由三部分组成——缓冲(buffer),通道(channel),事件模型(event model)——所有的高级特性都构建在这三个核心组件之上。一旦你理解了它们之间的工作原理,你便不难理解在本章简要提及的更多高级特性。
你可能对Netty的整体架构以及每一部分的工作原理仍旧存有疑问。如果是这样,最好的方式是告诉我们 应该如何改进这份指南。
相关推荐
Netty 是一个高性能、异步事件驱动的网络应用程序框架,用于快速开发可维护的高性能协议服务器和客户端。这个"Netty-4.1.17.Final.jar"是Netty框架的一个发行版本,它适用于Java 8及以上版本,这意味着它可以充分...
5. **SocketIO事件**:文档会详细介绍SocketIO的各种事件,如连接建立、断开、消息接收和发送等,以及如何注册监听器来处理这些事件。 6. **数据编码与解码**:Netty-SocketIO提供了编码器和解码器来处理SocketIO的...
4. README.md - 项目介绍和使用说明。 学习这个项目,你可以深入理解Netty如何与Socket.IO协同工作,以及如何在Java中构建实时通信应用。同时,这也提供了一个实践机会,让你掌握网络编程、事件驱动编程和实时通信...
主要简介是Netty-SocketIO技术的使用和介绍,实时推送技术的介绍
3. 文档:可能包括README文件,介绍了如何构建、运行和使用该项目,以及可能存在的配置选项。 4. 构建脚本:例如`build.gradle`或`pom.xml`,用于使用Gradle或Maven构建和打包项目。 5. 配置文件:可能包含服务器...
Netty介绍 - **Netty定义**:Netty是一个高性能、轻量级的全异步事件驱动的NIO(Non-Blocking IO)网络应用框架,它使得开发高性能的网络应用变得简单快捷。 - **适用人群**: - 对于**新手**来说,Netty提供了...
文件可能会介绍如何在 Netty 中使用 Selectors 监听多个 Channel 的事件,以及如何通过 Channels 进行非阻塞的数据读写。 最后,`Netty04-优化与源码.md` 可能涉及 Netty 的性能调优技巧以及源码分析。这可能包括...
4. **README.md**:项目介绍和使用指南。 5. **LICENSE**:开源许可证文件,说明项目的授权方式。 通过这个插件,开发者可以: 1. **配置S3仓库**:在Maven的settings.xml中添加S3仓库的配置信息。 2. **部署到S3**...
文档还会介绍如何进行连接管理、读写操作、心跳检测、流量控制等网络编程的关键技术。 在实际开发中,了解并掌握Netty的API和设计理念,不仅可以提高网络应用的性能,还能极大地提升开发效率,降低维护成本。因此,...
总的来说,“netty-api-4.1 中文版”文档是学习和掌握 Netty 的重要参考资料,它详细介绍了各个类和接口的功能,以及如何使用它们来构建高效、可靠的网络应用。通过阅读和实践,开发者可以深入理解 Netty 的设计理念...
介绍 支持TCP长连接消息转发到Spring容器 支持自定义消息枚举类( CommandController , CommandMapping ) 支持自定义通信协议解析( ProtocolProcessor ) 支持不同系统事件通知机制( EventHandler ) 用例 使用...
10. **文档**:虽然没有明确提及,但一个完整的开源项目通常会有README文件或其他形式的文档,介绍项目的目的、如何运行和配置等信息。 综上所述,“netty-websocket-proxy-1.3.0.zip”可能是一个实现WebSocket代理...
#### 1.2 Netty介绍 - **构成部分**:Netty由多个组件构成,包括`Bootstrap`、`Channel`、`ChannelHandler`、`EventLoop`等。 - **关于本书**:本书旨在为读者提供全面深入地了解Netty框架的机会,包括如何使用Netty...
《Netty实战》是Java网络编程领域的一本权威著作,主要介绍了Netty框架的使用和原理。Netty是一个高性能、异步事件驱动的网络应用程序框架,用于快速开发可维护的高性能协议服务器和客户端。这本书通过丰富的示例...
《Netty-3.2.5终极手册》是一本全面介绍Netty 3.2.5版本的指南书籍,旨在为开发者提供快速开发网络应用的方法与技巧。本书不仅涵盖了Netty的基本概念和入门教程,还深入探讨了其架构设计原理及高级特性。 #### 二、...
通过以上内容的介绍,我们可以看出Netty不仅仅是一个简单的网络库,它还包含了大量高级特性和优化方案,使得开发者能够构建出既高效又可靠的网络应用程序。无论是新手还是有经验的开发者,都能够从Netty中获益良多。
下面将详细介绍这些技术及其在项目中的应用。 **Spring Boot**: Spring Boot是Spring框架的一个子项目,旨在简化Spring应用的初始搭建以及开发过程。它集成了大量常用的第三方库配置,如JPA、Thymeleaf、WebSocket...