- 浏览: 115701 次
- 性别:
- 来自: 深圳
文章分类
最新评论
-
SSB4455:
嗯 应该是这样
java线程学习之Thread.sleep() 和 Thread.yield() 区别 -
wishlee:
不详细啊
Java中23种设计模式详解 -
Vin-G:
正在学习,我想修改成:在主屏中不能长按和拖拉,不知道能不能实现 ...
android2.2源码在eclipse中的配置与分析 -
star_887012:
qq16881699 写道LZ的文章就是海量数据。。。。
常见的海量数据处理方法 -
I清晰:
看来头疼啊
常见的海量数据处理方法
java nio 开发实例
最近一直在研究java nio,提出一点浅见,希望能和大家分享!!!废话不多说了,直接进入主题!
首先了解下所谓的java nio是个什么东西!
传统的并发型服务器设计是利用阻塞型网络I/O 以多线程的模式来实现的,然而由
于系统常常在进行网络读写时处于阻塞状态,会大大影响系统的性能;自Java1. 4 开始引入
了NIO(新I/O) API,通过使用非阻塞型I/O,实现流畅的网络读写操作,为开发高性能并发
型服务器程序提供了一个很好的解决方案。这就是java nio
首先来看下传统的阻塞型网络 I/O的不足
Java 平台传统的I/O 系统都是基于Byte(字节)和Stream(数据流)的,相应的I/O 操
作都是阻塞型的,所以服务器程序也采用阻塞型I/O 进行数据的读、写操作。本文以TCP
长连接模式来讨论并发型服务器的相关设计,为了实现服务器程序的并发性要求,系统由一
个单独的主线程来监听用户发起的连接请求,一直处于阻塞状态;当有用户连接请求到来时,
程序都会启一个新的线程来统一处理用户数据的读、写操作。
这种模式的优点是简单、实用、易管理;然而缺点也是显而易见的:由于是为每一个客
户端分配一个线程来处理输入、输出数据,其线程与客户机的比例近似为1:1,随着线程
数量的不断增加,服务器启动了大量的并发线程,会大大加大系统对线程的管理开销,这将
成为吞吐量瓶颈的主要原因;其次由于底层的I/O 操作采用的同步模式,I/O 操作的阻塞管
理粒度是以服务于请求的线程为单位的,有可能大量的线程会闲置,处于盲等状态,造成I/O
资源利用率不高,影响整个系统的性能。
对于并发型服务器,系统用在阻塞型I/O 等待和线程间切换的时间远远多于CPU 在内
存中处理数据的时间,因此传统的阻塞型I/O 已经成为制约系统性能的瓶颈。Java1.4 版本
后推出的NIO 工具包,提供了非阻塞型I/O 的异步输入输出机制,为提高系统的性能提供
了可实现的基础机制。
NIO 包及工作原理
针对传统I/O 工作模式的不足,NIO 工具包提出了基于Buffer(缓冲区)、Channel(通
道)、Selector(选择器)的新模式;Selector(选择器)、可选择的Channel(通道)和
SelectionKey(选择键)配合起来使用,可以实现并发的非阻塞型I/O 能力。
NIO 工具包的成员
Buffer(缓冲器)
Buffer 类是一个抽象类,它有7 个子类分别对应于七种基本的数据类型:ByteBuffer、
CharBuffer、DoubleBuffer、FloatBuffer、IntBuffer、LongBuffer 和ShortBuffer。每一个Buffer
对象相当于一个数据容器,可以把它看作内存中的一个大的数组,用来存储和提取所有基本
类型(boolean 型除外)的数据。Buffer 类的核心是一块内存区,可以直接对其执行与内存有关
的操作,利用操作系统特性和能力提高和改善Java 传统I/O 的性能。
Channel(通道)
Channel 被认为是NIO 工具包的一大创新点,是(Buffer)缓冲器和I/O 服务之间的通道,
具有双向性,既可以读入也可以写出,可以更高效的传递数据。我们这里主要讨论
ServerSocketChannel 和SocketChannel,它们都继承了SelectableChannel,是可选择的通道,
分别可以工作在同步和异步两种方式下(这里的可选择不是指可以选择两种工作方式,而是
指可以有选择的注册自己感兴趣的事件)。当通道工作在同步方式时,它的功能和编程方法
与传统的ServerSocket、Socket 对象相似;当通道工作在异步工作方式时,进行输入输出处
理不必等到输入输出完毕才返回,并且可以将其感兴趣的(如:接受操作、连接操作、读出
操作、写入操作)事件注册到Selector 对象上,与Selector 对象协同工作可以更有效率的支
持和管理并发的网络套接字连接。
Selector(选择器)和SelectionKey(选择键)
各类 Buffer 是数据的容器对象;各类Channel 实现在各类Buffer 与各类I/O 服务间传输
数据。Selector 是实现并发型非阻塞I/O 的核心,各种可选择的通道将其感兴趣的事件注册
到Selector 对象上,Selector 在一个循环中不断轮循监视这各些注册在其上的Socket 通道。
SelectionKey 类则封装了SelectableChannel 对象在Selector 中的注册信息。当Selector 监测
到在某个注册的SelectableChannel 上发生了感兴趣的事件时,自动激活产生一个SelectionKey
对象,在这个对象中记录了哪一个SelectableChannel 上发生了哪种事件,通过对被激活的
SelectionKey 的分析,外界可以知道每个SelectableChannel 发生的具体事件类型,进行相应的
处理。
NIO 工作原理
通过上面的讨论,我们可以看出在并发型服务器程序中使用NIO,实际上是通过网络事
件驱动模型实现的。我们应用Select 机制,不用为每一个客户端连接新启线程处理,而是将
其注册到特定的Selector 对象上,这就可以在单线程中利用Selector 对象管理大量并发的网
络连接,更好的利用了系统资源;采用非阻塞I/O 的通信方式,不要求阻塞等待I/O 操作完
成即可返回,从而减少了管理I/O 连接导致的系统开销,大幅度提高了系统性能。
当有读或写等任何注册的事件发生时,可以从Selector 中获得相应的
SelectionKey , 从SelectionKey 中可以找到发生的事件和该事件所发生的具体的
SelectableChannel,以获得客户端发送过来的数据。由于在非阻塞网络I/O 中采用了事件触
发机制,处理程序可以得到系统的主动通知,从而可以实现底层网络I/O 无阻塞、流畅地读
写,而不像在原来的阻塞模式下处理程序需要不断循环等待。使用NIO,可以编写出性能更
好、更易扩展的并发型服务器程序。
并发型服务器程序的实现代码
应用 NIO 工具包,基于非阻塞网络I/O 设计的并发型服务器程序与以往基于阻塞I/O 的
实现程序有很大不同,在使用非阻塞网络I/O 的情况下,程序读取数据和写入数据的时机不
是由程序员控制的,而是Selector 决定的。下面便给出基于非阻塞网络I/O 的并发型服务器
程序的核心代码片段:
import java.io.*; //引入Java.io包
import java.net.*; //引入Java.net包
import java.nio.channels.*; //引入Java.nio.channels包
import java.util.*; //引入Java.util包
public class TestServer implements Runnable
{
/**
* 服务器Channel对象,负责接受用户连接
*/
private ServerSocketChannel server;
/**
* Selector对象,负责监控所有的连接到服务器的网络事件的发生
*/
private Selector selector;
/**
* 总的活动连接数
*/
private int activeSockets;
/**
* 服务器Channel绑定的端口号
*/
private int port ;
/**
*
* 构造函数
*/
public TestServer()throws IOException
{
activeSockets=0;
port=9999;//初始化服务器Channel绑定的端口号为9999
selector= Selector.open();//初始化Selector对象
server=ServerSocketChannel.open();//初始化服务器Channel对象
ServerSocket socket=server.socket();//获取服务器Channel对应的//ServerSocket对象
socket.bind(new InetSocketAddress(port));//把Socket绑定到监听端口9999上
server.configureBlocking(false);//将服务器Channel设置为非阻塞模式
server.register(selector,SelectionKey.OP_ACCEPT);//将服务器Channel注册到
Selector对象,并指出服务器Channel所感兴趣的事件为可接受请求操作
}
public void run()
{
while(true)
{
try
{
/**
*应用Select机制轮循是否有用户感兴趣的新的网络事件发生,当没有
* 新的网络事件发生时,此方法会阻塞,直到有新的网络事件发生为止
*/
selector.select();
}
catch(IOException e)
{
continue;//当有异常发生时,继续进行循环操作
}
/**
* 得到活动的网络连接选择键的集合
*/
Set<SelectionKey> keys=selector.selectedKeys();
activeSockets=keys.size();//获取活动连接的数目
if(activeSockets==0)
{
continue;//如果连接数为0,则继续进行循环操作
}
/**
/**
* 应用For—Each循环遍历整个选择键集合
*/
for(SelectionKey key :keys)
{
/**
* 如果关键字状态是为可接受,则接受连接,注册通道,以接受更多的*
事件,进行相关的服务器程序处理
*/
if(key.isAcceptable())
{
doServerSocketEvent(key);
continue;
}
/**
* 如果关键字状态为可读,则说明Channel是一个客户端的连接通道,
* 进行相应的读取客户端数据的操作
*/
if(key.isReadable())
{
doClientReadEvent(key);
continue;
}
/**
* 如果关键字状态为可写,则也说明Channel是一个客户端的连接通道,
* 进行相应的向客户端写数据的操作
*/
if(key.isWritable())
{
doClinetWriteEvent(key);
continue;
}
}
}
}
/**
* 处理服务器事件操作
* @param key 服务器选择键对象
*/
private void doServerSocketEvent(SelectionKey key)
{
SocketChannel client=null;
try
{
ServerSocketChannel server=(ServerSocketChannel)key.channel();
client=server.accept();
if(client==null)
{
return;
}
client.configureBlocking(false);//将客户端Channel设置为非阻塞型
/**
/**
* 将客户端Channel注册到Selector对象上,并且指出客户端Channel所感
* 兴趣的事件为可读和可写
*/
client.register(selector,SelectionKey.OP_READ|SelectionKey.OP_READ);
}catch(IOException e)
{
try
{
client.close();
}catch(IOException e1){}
}
}
/**
* 进行向客户端写数据操作
* @param key 客户端选择键对象
*/
private void doClinetWriteEvent(SelectionKey key)
{
代码实现略;
}
/**
* 进行读取客户短数据操作
* @param key 客户端选择键对象
*/
private void doClientReadEvent(SelectionKey key)
{
代码实现略;
}
}
从上面对代码可以看出,使用非阻塞性I/O进行并发型服务器程序设计分三个部分:1.
向Selector对象注册感兴趣的事件;2.从Selector中获取所感兴趣的事件;3.根据不同的事件进
行相应的处理。
结语
通过使用NIO 工具包进行并发型服务器程序设计,一个或者很少几个Socket 线程就可
以处理成千上万个活动的Socket 连接,大大降低了服务器端程序的开销;同时网络I/O 采取
非阻塞模式,线程不再在读或写时阻塞,操作系统可以更流畅的读写数据并可以更有效地向
CPU 传递数据进行处理,以便更有效地提高系统的性能。
发表评论
-
Java Map遍历速度最优解
2011-12-09 13:01 1632HashMap的遍历有两种常用的方法,那就是使用key ... -
LinkedHashSet源码带来的思考
2011-09-01 21:45 11071、LinkedHashSet具有可预知迭代顺序的Set接口的 ... -
移动互联网时代已经来临,天下将是谁的?谁能笑到最后?
2011-08-27 17:20 95280年代末90年代初,是通 ... -
JAVA连接各种数据库
2011-07-27 21:05 8021、Oracle8/8i/9i数据库(thin模式) ... -
java(多线程)实现高性能数据同步
2011-06-23 22:36 2477需要将生产环境上Infoxmix里的数据原封不动的Co ... -
分布式系统数据同步解决方案
2011-06-23 21:52 1761Web Service 现如今已经成为 SOA ... -
常见的海量数据处理方法
2011-06-22 20:40 24751. 给定a、b两个文件, ... -
中文繁体和简体相互转换tranditional.txt文件
2011-06-13 10:35 2625啊阿埃挨哎唉哀皚癌藹 ... -
中文繁体和简体相互转换simplified.txt文件
2011-06-13 10:34 2989啊阿埃挨哎唉哀皑癌蔼 ... -
词性标注程序探讨
2011-03-07 20:39 1114程序设计主要分为五个部分,即词频统计和词性符号 ... -
初探Java 7异常处理功能增强
2011-03-07 20:35 836Java异常处理语法是指是Java开发者最为头疼的事情,也是 ... -
Java中堆内存与栈内存分配浅析
2011-03-07 20:30 816原文出处:http://soft.chin ... -
Unable to read TLD “META-INF/c.tld” from JAR file
2010-11-20 23:16 1536Unable to read TLD “META-INF/ ... -
Java NIO与IO的区别和比较
2010-10-29 17:37 1018Java NIO与IO的区别和比较 导读 J2SE1. ... -
全面总结java操作符
2010-10-21 11:13 1351java操作符共分为 ... -
详细解说关于Java.io的使用
2010-09-30 08:50 968Java的核心库java.io提供了全面的IO接口,包 ... -
Java线程学习笔记之Executor
2010-09-14 15:37 971Java线程学习笔记之Executor 并发编程的一种 ... -
java线程学习之Thread.sleep() 和 Thread.yield() 区别
2010-09-14 15:14 3555Thread.sleep() 和 Thread.yield() ... -
迅雷最新(2010.8.19)面试试题
2010-08-20 08:30 1083昨天去了深圳迅雷 ... -
java api学习(一)
2010-08-19 08:21 1313jdk1.6大概包含202个包,共3777个类,学好j ...
相关推荐
本资料"JavaNIO服务器实例Java开发Java经验技巧共6页"可能是某个Java开发者或讲师分享的一份关于如何在Java中构建NIO服务器的教程,涵盖了6个关键页面的内容。尽管具体的细节无法在此直接提供,但我们可以根据Java ...
Java NIO,全称为Non-Blocking Input/Output(非阻塞输入/输出),是Java从1.4版本开始引入的一种新的I/O模型,它为Java应用程序提供了更高效的数据传输...学习和理解NIO,对于开发高并发、高性能的Java应用至关重要。
NIO套接字是Java NIO库中用于网络通信的关键组件,它们允许程序非阻塞地读写数据,这对于开发高性能的服务器应用尤其有用。 描述中的“java nio 编程一个实例子.服务端程序”提示我们,这个实例是一个服务器端的...
"Java项目开发实例"是一个集合了多个实际案例的资源包,旨在帮助开发者通过真实的代码来学习和理解Java编程语言的应用。这个压缩包包含了丰富的源码,使得学习者可以深入研究每个项目的实现细节,提升自己的编程技能...
[第4节] JavaNIO流-通道1.flv [第5节] Java NIO流-通道2.flv [第6节] Java NIO流-socket通道操作.flv [第7节] Java NIO流-文件通道操作.flv [第8节] Java NIO流-选择器 .flv [第9节] Java NIO流-选择器操作.flv...
Java NIO,全称为Non-Blocking Input/Output(非阻塞输入/输出),是Java平台在JDK 1.4版本引入的一种新的I/O模型,...无论是网络编程、文件操作还是服务器开发,NIO都能提供强大的支持,是Java开发者的必备技能之一。
### Java NIO 原理与使用详解 #### 一、Java NIO 概述 在深入了解 Java NIO 的工作原理及其使用之前,我们首先来了解一下什么是 Java NIO(New I/O...掌握 Java NIO 的原理和使用对于开发高性能的应用程序至关重要。
在尚硅谷的12讲课程中,这些知识点将通过实例演示和详细解释,让学习者掌握Java NIO的精髓,并能够实际应用到项目开发中,提升系统的性能和并发处理能力。通过系统学习,开发者将更好地理解Java NIO的优势,并能在...
Java NIO,全称为New Input/Output,是Java在1.4版本引入的一...理解并熟练掌握NIO的使用,对于开发高并发、高性能的网络应用至关重要。通过分析NIO源码,我们可以深入了解其内部工作原理,进一步优化和调试相关代码。
Netty是一个基于NIO的高性能、异步事件驱动的网络应用程序框架,它极大地简化了网络编程,包括TCP和UDP协议的服务器和客户端应用开发。 在Java NIO中,核心组件包括通道(Channel)、缓冲区(Buffer)和选择器...
总的来说,Java NIO是一种现代的I/O编程模型,它为开发人员提供了更高效、更灵活的方式来处理I/O操作,特别是在构建高性能、高并发的网络应用时。理解和熟练掌握NIO,对于提升Java应用程序的性能和可扩展性至关重要...
本文首先概述了NIO的基本组件,然后分析了非阻塞通信的工作机制,并通过一个具体的网络应用实例展示了如何实现非阻塞通信。 #### 引言 传统的Java I/O系统基于字节流和字符流的操作模式,存在处理速度较慢的问题。...
标题中的"NIO实例"指的是Java中的非阻塞I/O(Non-blocking Input/Output)技术,它是Java从1.4版本开始引入的一种I/O模型,旨在提高网络编程的效率和性能。与传统的IO(BIO)相比,NIO具有异步、非阻塞的特点,能够...
在实际开发中,Java NIO 2(从Java 7开始引入)进一步增强了NIO的功能,提供了文件系统API和文件通道等特性,使其在文件操作方面也变得更为强大。 在IntelliJ IDEA中,开发者可以方便地使用Java IO和NIO编写和测试...
通过这段多线程NIO客户端实例代码,我们可以看到Java NIO框架如何利用多线程和非阻塞I/O来构建高性能的网络应用。在实际开发中,这种设计模式可以大大提高客户端的响应速度和处理能力,尤其是在高并发场景下。然而,...
在这个“java网络开发实例”压缩包中,我们可能会发现一系列的程序代码,这些代码可以帮助我们深入理解和实践Java在网络编程中的应用。以下是其中可能涉及的一些核心知识点: 1. **Socket编程**:Java的Socket类是...
Java NIO(New IO)是Java 从JDK 1.4版本开始引入的一个新特性,它提供了非阻塞I/O操作的能力,极大地提升了Java在处理...而Apache Mina这样的框架则进一步简化了开发过程,使得Java NIO在实际应用中更加便捷和高效。