java 提供了读写缓存api。
byte:java.io.BufferedInputStream 、 java.io.BufferedOutputStream
char: java.io.BufferedReader、java.io.BufferedWriter
好处:
1、可以避免一次性写入大量的数据,这样可能瞬间造成内存占用太多,导致系统不稳定。
2、可以对写入较少的数据进行缓冲,避免写入输入承载终端太过频繁。
缺点:几乎没有。
所以几乎任何时候我们都有必要使用缓存的流进行包装。
记得刚学习java io时,听到缓存,感觉很神秘。其实java提供的缓存实现的数据结构就是数组,java 缓存 api都是建立在byte[] 和 char[]基础之上的,也即是:先write(read) 数据到 byte[](char[])里,然后一旦缓存数据满,再一次性读取(写入)。
源码分析:
package java.io;
import java.util.concurrent.atomic.AtomicReferenceFieldUpdater;
/**
* BufferedInputStream 继承自 FilterInputStream,所以其本身需要一个 internal InputStream 来承载数据的读取源头
* 其缓存实现的本质是:byte[] 对数据的缓存。
*/
public class BufferedInputStream extends FilterInputStream {
private static int defaultBufferSize = 8192;
/**
* 缓存数据存储的地方,必要时候可以改变大小(当然也不是原来的buf数组了)
*/
protected volatile byte buf[];
/**
* Atomic updater to provide compareAndSet for buf. This is
* necessary because closes can be asynchronous. We use nullness
* of buf[] as primary indicator that this stream is closed. (The
* "in" field is also nulled out on close.)
*/
private static final
AtomicReferenceFieldUpdater<BufferedInputStream, byte[]> bufUpdater =
AtomicReferenceFieldUpdater.newUpdater
(BufferedInputStream.class, byte[].class, "buf");
/**
* 缓存的有效字节数
*/
protected int count;
/**
* 下一个可读的字节在数组中的位置
*/
protected int pos;
/**
* 最近一次mark的位置
*/
protected int markpos = -1;
/**
* The maximum read ahead allowed after a call to the
* <code>mark</code> method before subsequent calls to the
* <code>reset</code> method fail.
* Whenever the difference between <code>pos</code>
* and <code>markpos</code> exceeds <code>marklimit</code>,
* then the mark may be dropped by setting
* <code>markpos</code> to <code>-1</code>.
*
* @see java.io.BufferedInputStream#mark(int)
* @see java.io.BufferedInputStream#reset()
*/
protected int marklimit;
/**
*底层的流是否已关闭
*/
private InputStream getInIfOpen() throws IOException {
InputStream input = in;
if (input == null)
throw new IOException("Stream closed");
return input;
}
private byte[] getBufIfOpen() throws IOException {
byte[] buffer = buf;
if (buffer == null)
throw new IOException("Stream closed");
return buffer;
}
public BufferedInputStream(InputStream in) {
this(in, defaultBufferSize);
}
public BufferedInputStream(InputStream in, int size) {
super(in);
if (size <= 0) {
throw new IllegalArgumentException("Buffer size <= 0");
}
buf = new byte[size];
}
/**
* Fills the buffer with more data, taking into account
* shuffling and other tricks for dealing with marks.
* Assumes that it is being called by a synchronized method.
* This method also assumes that all data has already been read in,
* hence pos > count.
*/
private void fill() throws IOException {
byte[] buffer = getBufIfOpen();
if (markpos < 0) //如果没有设置mark,那么pos的位置设置为0。(因为没有mark,算是全部读取新数据)
pos = 0; /* no mark: throw away the buffer */
else if (pos >= buffer.length) /* 缓冲里没有空闲空间,并且有mark设置 */
if (markpos > 0) { /* 此种情况必须保留markpos之后的数据 */
int sz = pos - markpos;
System.arraycopy(buffer, markpos, buffer, 0, sz);
pos = sz; //pos 在新的buffer里的位置是sz
markpos = 0; //markpos 在新的buffer里面为 0,所以必须需要设置为0
} else if (buffer.length >= marklimit) { //出错啦,这种情况不该出现的
markpos = -1; /* buffer got too big, invalidate mark */
pos = 0; /* drop buffer contents */
} else { /* 增长buffer */
int nsz = pos * 2;
if (nsz > marklimit)//但是不能超过marklimit
nsz = marklimit;
byte nbuf[] = new byte[nsz];
System.arraycopy(buffer, 0, nbuf, 0, pos);
if (!bufUpdater.compareAndSet(this, buffer, nbuf)) {
// Can't replace buf if there was an async close.
// Note: This would need to be changed if fill()
// is ever made accessible to multiple threads.
// But for now, the only way CAS can fail is via close.
// assert buf == null;
throw new IOException("Stream closed");
}
buffer = nbuf;
}
count = pos;
int n = getInIfOpen().read(buffer, pos, buffer.length - pos);
if (n > 0)
count = n + pos;
}
/**
* 读取一个字节
*/
public synchronized int read() throws IOException {
if (pos >= count) {//如果到了缓冲的最大索引位置,那么去fill数据
fill();
if (pos >= count) //fill之后如果pos>=count,那么说明 underlying stream 里已经没有数据
return -1;
}
return getBufIfOpen()[pos++] & 0xff; //正常返回
}
/**
* Read characters into a portion of an array, reading from the underlying
* stream at most once if necessary.
*/
private int read1(byte[] b, int off, int len) throws IOException {
int avail = count - pos;
if (avail <= 0) {
if (len >= getBufIfOpen().length && markpos < 0) { //如果没有多余的缓存数据,并且没有设置mark标记,并且流里剩余的数据不足len长度,那么直接从数据流里读取,直接返回。
return getInIfOpen().read(b, off, len);
}
fill(); //其他情况则去填充数据
avail = count - pos; //查看缓存中剩下的数据
if (avail <= 0) return -1; //如果缓存里没有新数据(即:fill没有添加新数据)。
}
int cnt = (avail < len) ? avail : len; //取剩下的数据和len的较小值
System.arraycopy(getBufIfOpen(), pos, b, off, cnt); //把数据读取 到b数组里。
pos += cnt;//改变当前字节的位置
return cnt;
}
/**
* 读取流数据到b数组里,从b[off]开始放数据,长度为len
*/
public synchronized int read(byte b[], int off, int len)throws IOException
{
getBufIfOpen(); // Check for closed stream
if ((off | len | (off + len) | (b.length - (off + len))) < 0) { //如果 off<0 或者 len <0 或者 (off + len) <0 或者 b.length - (off + len) <0
throw new IndexOutOfBoundsException();
} else if (len == 0) { //len =0,直接返回
return 0;
}
int n = 0; //记录已经读到的总byte数
for (;;) {
int nread = read1(b, off + n, len - n);
if (nread <= 0) //如果没有读到数据,那么直接返回
return (n == 0) ? nread : n;
n += nread;
if (n >= len) //如果已经到len 那么返回n(注意:事实上n=len,而不会n>len)
return n;
// if not closed but no bytes available, return
InputStream input = in;
if (input != null && input.available() <= 0) //每次读过之后判断 input 是否还有多余的可读,如果没有那么直接返回
return n;
}
}
/**
* 跳过n字节
*/
public synchronized long skip(long n) throws IOException {
getBufIfOpen(); // Check for closed stream
if (n <= 0) {
return 0;
}
long avail = count - pos;
if (avail <= 0) { //如果缓存的数据已读完
// If no mark position set then don't keep in buffer
if (markpos <0) //如果没有设置mark,那么直接调用 underlying stream 的skip方法
return getInIfOpen().skip(n);
// 填充数据
fill();
avail = count - pos;
if (avail <= 0) //如果avail<=0,说明underlying stream 中也没有剩余数据
return 0;
}
long skipped = (avail < n) ? avail : n; //最avail 和 n 的最小值
pos += skipped; //调整pos 是skip方法的本质
return skipped;
}
/**
* 返回可以的字节数。
* <p>
* This method returns the sum of the number of bytes remaining to be read in
* the buffer (<code>count - pos</code>) and the result of calling the
* {@link java.io.FilterInputStream#in in}.available().
*
* @return an estimate of the number of bytes that can be read (or skipped
* over) from this input stream without blocking.
* @exception IOException if this input stream has been closed by
* invoking its {@link #close()} method,
* or an I/O error occurs.
*/
public synchronized int available() throws IOException {
return getInIfOpen().available() + (count - pos);
}
/**
* 打标记
* markpos:把当前位置记录为标记
* readlimit:在mark变的无线之前运行读取的最大字节数
*/
public synchronized void mark(int readlimit) {
marklimit = readlimit;
markpos = pos;
}
/**
* 重置操作。
* 如果没有mark过,调用reset方法会抛出:IOException
*
*/
public synchronized void reset() throws IOException {
getBufIfOpen(); // Cause exception if closed
if (markpos < 0)
throw new IOException("Resetting to invalid mark");
pos = markpos; //重置的效果是:下一次read读取继续从上次打标记的地方读取。
}
/**
* 支持回溯操作
*/
public boolean markSupported() {
return true;
}
/**
* 关闭此流,并释放与此流相关的任何系统资源
* 一旦close流后,任何 read(), available(), reset()将抛出异常
*/
public void close() throws IOException {
byte[] buffer;
while ( (buffer = buf) != null) {
if (bufUpdater.compareAndSet(this, buffer, null)) { //将buf设置为空,如果失败则循环知道buf 为空为止。因为close 不是线程安全的,所以适用原子类bufUpdater 配合操作。
InputStream input = in;
in = null;
if (input != null)
input.close();
return;
}
// Else retry in case a new buf was CASed in fill()
}
}
}
分享到:
相关推荐
在探讨Java.nio与Java.io之间的比较时,我们首先需要理解这两个包在Java编程语言中的核心作用和它们各自的优势。Java.io和Java.nio是Java中处理输入/输出操作的两个主要框架,它们各自拥有独特的特性和应用场景。 #...
Java IO包是Java标准库中的核心组件之一,主要用于处理输入和输出操作。这个包包含了大量类和接口,它们提供了各种输入输出流、字符编码、数据转换以及文件操作等功能。Java IO的设计采用了Decorator模式,使得在不...
import java.io.BufferedInputStream; import java.io.BufferedOutputStream; import java.io.File; import java.io.FileNotFoundException; import java.io.FileOutputStream; import java.io.IOException; import ...
在标题"org.apache.commons.io的jar包大全"中,我们可以理解这是一个包含Apache Commons IO所有版本或核心功能的jar包集合,可能包括不同版本的更新和修复。 在描述中提到"少了啥欢迎补充",这表明该压缩包可能是...
Java.io包是Java编程语言中的核心包之一,它包含了用于输入/输出操作的类和接口。这个包在Java中扮演着至关重要的角色,因为它提供了处理数据流、字符流、对象序列化、文件读写以及与操作系统交互的各种工具。在本...
在Java编程语言中,`java.io`包是核心部分之一,它包含了用于输入/输出(I/O)操作的各种类和接口。北大青鸟的课程中,`java.io`的经典例子通常会涵盖基本的文件读写、流的使用、数据转换等关键概念。以下是基于这个...
在Java编程语言中,`java.io`包是用于输入/输出(I/O)操作的基础部分,包含了许多类和接口,使得开发者能够处理数据流、字符流、对象序列化、磁盘文件以及网络连接等任务。本篇文章将深入探讨`java.io`包中的关键概念...
`org.apache.commons.io`是这个库的核心包,包含了许多与文件、流、过滤器、读写操作相关的类和工具。 1. **文件操作**: `FileUtils` 类提供了大量的静态方法,用于执行文件和目录的操作,如复制、移动、删除、创建...
- Java.IO流库提供了处理输入和输出数据的类,允许程序读取和写入数据到各种源和目的地,如文件、网络连接、内存缓冲区等。 - **输入流**(InputStream)用于读取数据,而**输出流**(OutputStream)用于写入数据...
22. **java.io.BufferedInputStream**和**java.io.BufferedOutputStream**:对字节流进行缓冲,提高性能。 23. **java.net.URL**和**java.net.URLConnection**:处理网络资源的类,可用于下载或上传文件。 24. **...
### Java IO流详解 #### 一、Java IO流概述 Java IO流是Java标准库中的一个重要组成部分,主要用于处理数据的输入输出操作。根据处理的数据类型不同,Java IO流被分为两大类:字节流(byte streams)和字符流...
Java IO(输入输出)是Java平台中的核心概念,主要用于数据的读取和写入操作。在Java SE中,IO框架提供了丰富的类库,使得开发者能够处理各种类型的数据流,包括文件、网络、内存等。本资源"java_IO.rar"包含了关于...
java.io.InputStream java.io.OutputStream java.io.Reader java.io.Writer 4. FileInputStream和FileOutputStream是什么? 这是在拷贝文件操作的时候,经常用的两个类。在处理小文件的时候,它们的性能还不错,在大...
- 实现类:如 `java.io.FileInputStream` 和 `java.io.FileOutputStream` 用于文件读写,`java.io.BufferedInputStream` 和 `java.io.BufferedOutputStream` 提供缓冲功能以提升效率。 2. 字符流: - 抽象基类:`...
import java.io.BufferedInputStream; import java.io.BufferedReader; import java.io.File; import java.io.FileInputStream; import java.io.InputStreamReader; import java.io.Reader; /** * @author...
在Java中,实现文件拷贝可以通过使用`java.io`包中的`FileInputStream`和`FileOutputStream`类来完成。这两个类分别代表了文件的输入流和输出流。以下是一个简单的文件拷贝程序示例: ```java import java.io.*; ...
Java通过`java.io`包提供了一系列强大的API来支持各种I/O操作。本文旨在为新手提供一个全面的Java I/O教程,帮助读者理解Java I/O的基本概念、架构以及如何使用这些API。 #### 二、Java I/O概述 Java中的I/O系统...
### Java IO 类层次结构解析 #### 一、概述 Java IO(Input/Output)系统是Java平台中的一个重要组成部分,用于处理程序与外部设备之间的数据交换。Java IO系统提供了丰富的类来支持不同类型的输入输出操作,包括...
Java IO 操作是Java编程中不可或缺的一部分,它涵盖了文件的读写、追加、删除、移动和复制等多种功能。在Java中,IO流(Input/Output Stream)是处理输入输出的主要方式,它允许数据从一个源(如硬盘或网络)传输到...
在Java中,我们可以使用`java.io.FileInputStream`和`java.io.FileOutputStream`来实现这个功能。我们先打开源文件的输入流,然后创建目标文件的输出流,接着通过循环读取源文件的字节并写入目标文件,最后关闭流。 ...