最近参与实现底层高并发处理的项目,接收socket客户端的连接请求,然后调用主机服务进行通讯。系统需要满足100TPS(吞吐量(tps)=活动的用户数/响应时间)的性能要求。
通过查阅相关的文献及网上的资料,最终采用java NIO技术方案来实现。系统上线后各方面性能表现不错,也给我们技术团队更多的信心。以下分享一下Java NIO这块的程序,希望对各位有帮助。
Java NIO:提供多路(non-bloking) 非阻塞式的高伸缩性网络I/O 。
Java NIO非堵塞技术实际是采取Reactor模式,或者说是Observer模式为我们监察I/O端口,如果有请求过来,会自动通知监听服务,不需要开启多个线程一直监听请求,从外界看,实现了流畅的I/O读写,不堵塞了。
机制的实现是通过它的Selector当发现某个channel有数据时,会通过SelectorKey来告知我们,从而实现事件和handler的绑定。
以下是代码部分,出于项目隐私,相关的业务处理已注释掉,但不影响运行。
服务器端:
import java.io.IOException;
import java.net.InetSocketAddress;
import java.net.ServerSocket;
import java.nio.ByteBuffer;
import java.nio.channels.SelectionKey;
import java.nio.channels.Selector;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;
import java.nio.charset.Charset;
import java.util.Set;
/**
* @author think
*
*/
public class NIOServer implements Runnable{
private int port = 7070;
// 解码buffer
private Charset cs = Charset.forName("gbk");
private static Selector selector;
public NIOServer() {
}
/**
* 启动服务器端,配置为非阻塞,绑定端口,注册accept事件ACCEPT事件:当服务端收到客户端连接请求时,触发该事件
* @throws IOException
*/
private void initchannel(){
try{
//初始化SOCKET通道
ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
serverSocketChannel.configureBlocking(false);
ServerSocket serverSocket = serverSocketChannel.socket();
serverSocket.bind(new InetSocketAddress(port));
selector = Selector.open();
serverSocketChannel.register(selector, SelectionKey.OP_ACCEPT);
System.out.println("Init NIOServer listening port:" + port);
} catch (Exception e) {
System.out.println("Init NIOServer failed! error:"+e.getMessage());
}
}
/**
* 服务器端轮询监听,select方法会一直阻塞直到有相关事件发生或超时
*/
private void listen() {
//初始化SOCKET通道
initchannel();
while (true) {
try {
selector.select();// 返回值为本次触发的事件数
Set<SelectionKey> selectionKeys = selector.selectedKeys();
for (SelectionKey key : selectionKeys) {
//处理客户端请求
handle(key);
}
selectionKeys.clear();// 清除处理过的事件
} catch (Exception e) {
System.out.println("Exit listen port:"+this.port+" error:"+e.getMessage());
}
}
}
/**
* 处理不同的事件
*/
private void handle(SelectionKey selectionKey) throws IOException {
ServerSocketChannel server = null;
SocketChannel client = null;
if (selectionKey.isAcceptable()) {
/*
* 客户端请求连接事件 serversocket为该客户端建立socket连接,将此socket注册READ事件,监听客户端输入
* READ事件:当客户端发来数据,并已被服务器控制线程正确读取时,触发该事件
*/
server = (ServerSocketChannel) selectionKey.channel();
client = server.accept();
//System.out.println("Client IP:"+client.getRemoteAddress().toString());
client.configureBlocking(false);
client.register(selector, SelectionKey.OP_READ);
} else if (selectionKey.isReadable()) {
ByteBuffer sBuffer = ByteBuffer.allocate(1024);
/*
* READ事件,收到客户端发送数据,读取数据后继续注册监听客户端
*/
client = (SocketChannel) selectionKey.channel();
sBuffer.clear();
int n = -1;
try {
n = client.read(sBuffer);
//log.info("输入字节数:" + n);
} catch (Exception e) {
n=-1;
client.close();
selectionKey.cancel();
}
if (n > 0) {
sBuffer.flip();
String receiveText = String.valueOf(cs.decode(sBuffer).array());
//实际业务处理部分忽略
channelWriteBytes(client,"Server:" +receiveText);
}
}
}
@Override
public void run() {
//线程开启SOCKET监听
listen();
}
/**
* 结果回写
*/
public void channelWriteBytes(SocketChannel socketChannel,String result){
ByteBuffer byBuffer = ByteBuffer.allocate(10240);
byBuffer.put((result).getBytes(Charset.forName("gbk")));
byBuffer.flip();
// 输出到通道
try {
socketChannel.write(byBuffer);
} catch (IOException e) {
System.out.println("NIOServer write back failed:"+e.getMessage());
}
}
public static void main(String[] args) throws IOException {
NIOServer server = new NIOServer();
server.listen();
}
}
客户端进行调用即可:
import java.net.Socket;
/**
* @author think
*/
public class Client{
public static void main(String[] args) {
try {
Socket socket = new Socket("127.0.0.1", 7070);
String res = null;
try {
String request = "NIO Test...";
byte[] bts = request.getBytes();
socket.getOutputStream().write(bts);
socket.getOutputStream().flush();
byte[] resb = new byte[60000];
socket.getInputStream().read(resb);
res = new String(resb);
System.out.println(res);
} catch (Exception e) {
e.printStackTrace();
}
} catch (Exception e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}
其实实现系统优异的高并发性能,还涉及到更多的方面去学习。例如并发锁的控制,及线程安全的问题。有时间和大家共同学习和探讨。
分享到:
相关推荐
01-Java NIO-课程简介.mp4 05-Java NIO-Channel-FileChannel详解(一).mp4 06-Java NIO-Channel-FileChannel详解(二).mp4 08-Java NIO-Channel-ServerSocketChannel.mp4 09-Java NIO-Channel-SocketChannel.mp4 ...
Java NIO实战之聊天室功能详解 Java NIO实战之聊天室功能详解主要介绍了Java NIO实战之聊天室功能,结合实例形式详细分析了Java NIO聊天室具体的服务端、客户端相关实现方法与操作注意事项。 Java NIO概述 Java ...
Java NIO,全称为Non-Blocking Input/Output(非阻塞输入/输出),是Java标准库提供的一种替代传统I/O模型的新技术。在Java 1.4版本中引入,NIO提供了一种全新的I/O编程方式,使得Java开发者能够更高效地处理I/O操作...
#资源达人分享计划# java nio从入门到精通的代码详解 主要结合博文进行学习 详情可配合我的博客进行学习 https://blog.csdn.net/weixin_47872288/article/details/120342049
《Java开发实战经典》这本书是Java开发者的重要参考资料,它涵盖了Java编程语言的核心技术和实践应用。以下将详细解析这本书可能涉及的知识点。 1. **Java基础知识**:书中首先会介绍Java的基础概念,包括Java的...
### Java NIO (New IO) 详解 #### 1. 引言 在Java的世界里,I/O(Input/Output)操作是程序与外部环境进行交互的重要方式之一。随着技术的发展,传统I/O模型逐渐显露出一些局限性,特别是在处理高并发场景下,其...
Java NIO,全称为Non-...书中应该涵盖了理论知识、实例解析以及实战技巧,帮助Java开发者更好地掌握这一关键技术。无论是网络编程、文件操作还是服务器开发,NIO都能提供强大的支持,是Java开发者的必备技能之一。
学习Java还要涉及IO流和NIO(New IO)系统,用于读写文件和网络通信。 对于进阶学习者,线程和并发编程是提升程序性能的关键。Java提供了强大的线程管理机制,包括同步和锁机制,使多个线程能够同时执行任务。此外...
5. **IO流与NIO**:Java的IO流系统提供了读写文件、网络通信等功能,而NIO(非阻塞I/O)是Java 1.4引入的新特性,能提高程序的效率,书中会对比分析两者的差异和使用场景。 6. **多线程编程**:Java提供了丰富的多...
同时,读者还能学习到Java的IO和NIO(非阻塞IO)框架,以及XML和JSON的处理,这些都是数据交换和网络通信中的常见需求。 为了更好地理解和应用这些知识,本书还包含了大量的实战项目,涵盖Web开发、数据库操作、...
Java NIO(New Input/Output)是Java标准库中提供的一种I/O模型,与传统的BIO(Block I/O)模型相比,NIO具有...对于Java和J2ME开发者来说,这是一个很好的实战案例,能够深入理解NIO机制以及如何将其应用于实际项目。
本书将介绍Java如何读写文件,处理流,以及使用NIO(New IO)进行高效的数据传输。同时,网络编程的知识也有所涉及,包括套接字通信和HTTP客户端/服务器实现。 数据库连接和操作也是Java开发中常见任务。书中会讲解...
Java NIO(New IO)框架是Java平台中用于处理I/O操作的一种非阻塞I/O模型,相较于传统的IO模型,NIO提供了更高性能和更灵活的编程方式。Netty是基于Java NIO构建的一个高性能、异步事件驱动的网络应用程序框架,它极...
Java SpringBoot 整合Mina框架,涉及到的核心技术主要包括Java NIO(非阻塞I/O)、Mina框架以及SpringBoot的集成应用。本教程旨在帮助开发者深入理解和掌握这些技术,并提供了一个可直接使用的基础平台框架。 Java ...
《Java开发实战1200例》是一部全面且深入的Java编程教程,旨在通过大量实例帮助读者掌握实际的开发技能。尽管我们仅能探讨其中的第20至60个例子,但这些案例覆盖的范围广泛,涵盖了Java编程的基础到进阶知识。 首先...
4. **IO与NIO**:Java的输入/输出(IO)和新输入/输出(NIO)系统提供了读写文件、网络通信等功能。学习这部分内容有助于开发者实现数据的高效传输和存储。 5. **多线程编程**:Java内置了强大的多线程支持,允许...
905.4-2014协议,是交通运输部公路科学研究院起草定制的一个协议标准,它也是基于TCP之上的一个应用层传输协议。 第2章,介绍在Socket编程过程中一些基础知识,让大家建立起对这块知识...想通过实战入门NIO、Netty。
5. **IO与NIO**:Java的输入输出系统(IO)和新IO(NIO)也是重要的章节,书中详细阐述了文件操作、字节流、字符流、缓冲区以及选择器的概念,为处理数据输入输出提供了强大的工具。 6. **多线程**:Java的并发编程...
《Java开发实战经典》是一本深受开发者欢迎的Java编程教程,尤其对于初学者而言,它提供了深入浅出的讲解和丰富的实例,旨在帮助读者掌握Java编程的基础与实战技巧。本书的核心内容围绕Java语言的面向对象特性展开,...