`

源码剖析之java.io.BufferedInputStream

阅读更多
java 提供了读写缓存api。
byte:java.io.BufferedInputStream 、 java.io.BufferedOutputStream
char: java.io.BufferedReader、java.io.BufferedWriter

好处:
1、可以避免一次性写入大量的数据,这样可能瞬间造成内存占用太多,导致系统不稳定。
2、可以对写入较少的数据进行缓冲,避免写入输入承载终端太过频繁。

缺点:几乎没有。

所以几乎任何时候我们都有必要使用缓存的流进行包装。

记得刚学习java io时,听到缓存,感觉很神秘。其实java提供的缓存实现的数据结构就是数组,java 缓存 api都是建立在byte[] 和 char[]基础之上的,也即是:先write(read) 数据到 byte[](char[])里,然后一旦缓存数据满,再一次性读取(写入)。


源码分析:

package java.io;
import java.util.concurrent.atomic.AtomicReferenceFieldUpdater;

/**
 * BufferedInputStream 继承自 FilterInputStream,所以其本身需要一个 internal InputStream 来承载数据的读取源头
 * 其缓存实现的本质是:byte[] 对数据的缓存。
 */
public class BufferedInputStream extends FilterInputStream {

    private static int defaultBufferSize = 8192;

    /**
     * 缓存数据存储的地方,必要时候可以改变大小(当然也不是原来的buf数组了)
     */
    protected volatile byte buf[];

    /**
     * Atomic updater to provide compareAndSet for buf. This is
     * necessary because closes can be asynchronous. We use nullness
     * of buf[] as primary indicator that this stream is closed. (The
     * "in" field is also nulled out on close.)
     */
    private static final 
        AtomicReferenceFieldUpdater<BufferedInputStream, byte[]> bufUpdater = 
        AtomicReferenceFieldUpdater.newUpdater
        (BufferedInputStream.class,  byte[].class, "buf");

    /**
     * 缓存的有效字节数
     */
    protected int count;

    /**
     * 下一个可读的字节在数组中的位置
     */
    protected int pos;
    
    /**
     * 最近一次mark的位置
     */
    protected int markpos = -1;

    /**
     * The maximum read ahead allowed after a call to the 
     * <code>mark</code> method before subsequent calls to the 
     * <code>reset</code> method fail. 
     * Whenever the difference between <code>pos</code>
     * and <code>markpos</code> exceeds <code>marklimit</code>,
     * then the  mark may be dropped by setting
     * <code>markpos</code> to <code>-1</code>.
     *
     * @see     java.io.BufferedInputStream#mark(int)
     * @see     java.io.BufferedInputStream#reset()
     */
    protected int marklimit;

    /**
     *底层的流是否已关闭
     */
    private InputStream getInIfOpen() throws IOException {
        InputStream input = in;
	if (input == null)
	    throw new IOException("Stream closed");
        return input;
    }

    private byte[] getBufIfOpen() throws IOException {
        byte[] buffer = buf;
	if (buffer == null)
	    throw new IOException("Stream closed");
        return buffer;
    }

  
    public BufferedInputStream(InputStream in) {
	this(in, defaultBufferSize);
    }

    public BufferedInputStream(InputStream in, int size) {
	super(in);
        if (size <= 0) {
            throw new IllegalArgumentException("Buffer size <= 0");
        }
	buf = new byte[size];
    }

    /**
     * Fills the buffer with more data, taking into account
     * shuffling and other tricks for dealing with marks.
     * Assumes that it is being called by a synchronized method.
     * This method also assumes that all data has already been read in,
     * hence pos > count.
     */
    private void fill() throws IOException {
        byte[] buffer = getBufIfOpen();
				if (markpos < 0) //如果没有设置mark,那么pos的位置设置为0。(因为没有mark,算是全部读取新数据)
				    pos = 0;		/* no mark: throw away the buffer */
				else if (pos >= buffer.length)	/* 缓冲里没有空闲空间,并且有mark设置 */
				  if (markpos > 0) {	/* 此种情况必须保留markpos之后的数据 */
					int sz = pos - markpos;
					System.arraycopy(buffer, markpos, buffer, 0, sz);
					pos = sz; //pos 在新的buffer里的位置是sz
					markpos = 0; //markpos 在新的buffer里面为 0,所以必须需要设置为0
				  } else if (buffer.length >= marklimit) { //出错啦,这种情况不该出现的
					markpos = -1;	/* buffer got too big, invalidate mark */
					pos = 0;	/* drop buffer contents */
				  } else {		/* 增长buffer */
					int nsz = pos * 2;
					if (nsz > marklimit)//但是不能超过marklimit
					    nsz = marklimit;
					byte nbuf[] = new byte[nsz];
					System.arraycopy(buffer, 0, nbuf, 0, pos);
			                if (!bufUpdater.compareAndSet(this, buffer, nbuf)) {
			                    // Can't replace buf if there was an async close.
			                    // Note: This would need to be changed if fill()
			                    // is ever made accessible to multiple threads.
			                    // But for now, the only way CAS can fail is via close.
			                    // assert buf == null;
			                    throw new IOException("Stream closed");
			                }
			                buffer = nbuf;
				    }
			        count = pos;
				int n = getInIfOpen().read(buffer, pos, buffer.length - pos);
			        if (n > 0)
			            count = n + pos;
    }

    /**
     * 读取一个字节
     */
    public synchronized int read() throws IOException {
			if (pos >= count) {//如果到了缓冲的最大索引位置,那么去fill数据
			    fill();
			    if (pos >= count) //fill之后如果pos>=count,那么说明 underlying stream 里已经没有数据
				return -1;
			}
			return getBufIfOpen()[pos++] & 0xff; //正常返回
    }

    /**
     * Read characters into a portion of an array, reading from the underlying
     * stream at most once if necessary.
     */
    private int read1(byte[] b, int off, int len) throws IOException {
			int avail = count - pos;
			if (avail <= 0) {
			    if (len >= getBufIfOpen().length && markpos < 0) { //如果没有多余的缓存数据,并且没有设置mark标记,并且流里剩余的数据不足len长度,那么直接从数据流里读取,直接返回。
				    return getInIfOpen().read(b, off, len);
			    }
			    fill(); //其他情况则去填充数据
			    avail = count - pos; //查看缓存中剩下的数据
			    if (avail <= 0) return -1; //如果缓存里没有新数据(即:fill没有添加新数据)。
			}
			int cnt = (avail < len) ? avail : len; //取剩下的数据和len的较小值
			System.arraycopy(getBufIfOpen(), pos, b, off, cnt); //把数据读取 到b数组里。
			pos += cnt;//改变当前字节的位置
			return cnt;
    }

    /**
     * 读取流数据到b数组里,从b[off]开始放数据,长度为len
     */
    public synchronized int read(byte b[], int off, int len)throws IOException
    {
        getBufIfOpen(); // Check for closed stream
        if ((off | len | (off + len) | (b.length - (off + len))) < 0) { //如果 off<0 或者  len <0 或者  (off + len) <0 或者  b.length - (off + len) <0
	         throw new IndexOutOfBoundsException();
	      } else if (len == 0) { //len =0,直接返回
            return 0;
        }

	      int n = 0; //记录已经读到的总byte数
        for (;;) {
            int nread = read1(b, off + n, len - n);
            if (nread <= 0) //如果没有读到数据,那么直接返回
                return (n == 0) ? nread : n;
            n += nread;
            if (n >= len) //如果已经到len 那么返回n(注意:事实上n=len,而不会n>len)
                return n;
            // if not closed but no bytes available, return
            InputStream input = in;
            if (input != null && input.available() <= 0) //每次读过之后判断 input 是否还有多余的可读,如果没有那么直接返回
                return n;
        }
    }

    /**
     * 跳过n字节
     */
    public synchronized long skip(long n) throws IOException {
        getBufIfOpen(); // Check for closed stream
				if (n <= 0) {
				    return 0;
				}
				long avail = count - pos;
     
        if (avail <= 0) { //如果缓存的数据已读完
            // If no mark position set then don't keep in buffer
            if (markpos <0) //如果没有设置mark,那么直接调用 underlying stream  的skip方法
                return getInIfOpen().skip(n);
            
            // 填充数据
            fill();
            avail = count - pos;
            if (avail <= 0) //如果avail<=0,说明underlying stream 中也没有剩余数据
                return 0;
        }
        
        long skipped = (avail < n) ? avail : n; //最avail 和 n 的最小值
        pos += skipped; //调整pos 是skip方法的本质
        return skipped;
    }

    /**
     * 返回可以的字节数。
     * <p>
     * This method returns the sum of the number of bytes remaining to be read in
     * the buffer (<code>count - pos</code>) and the result of calling the
     * {@link java.io.FilterInputStream#in in}.available().
     *
     * @return     an estimate of the number of bytes that can be read (or skipped
     *             over) from this input stream without blocking.
     * @exception  IOException  if this input stream has been closed by
     *                          invoking its {@link #close()} method,
     *                          or an I/O error occurs.
     */
    public synchronized int available() throws IOException {
	     return getInIfOpen().available() + (count - pos);
    }

    /** 
     * 打标记
     * markpos:把当前位置记录为标记
     * readlimit:在mark变的无线之前运行读取的最大字节数
     */
    public synchronized void mark(int readlimit) {
			marklimit = readlimit;
			markpos = pos;
    }

    /**
     * 重置操作。
     * 如果没有mark过,调用reset方法会抛出:IOException
     *
     */
    public synchronized void reset() throws IOException {
        getBufIfOpen(); // Cause exception if closed
			if (markpos < 0)
			    throw new IOException("Resetting to invalid mark");
			pos = markpos; //重置的效果是:下一次read读取继续从上次打标记的地方读取。
    }

    /**
     * 支持回溯操作
     */
    public boolean markSupported() {
	     return true;
    }

    /**
     * 关闭此流,并释放与此流相关的任何系统资源
     
     * 一旦close流后,任何 read(), available(), reset()将抛出异常
     */
    public void close() throws IOException {
        byte[] buffer;
        while ( (buffer = buf) != null) {
            if (bufUpdater.compareAndSet(this, buffer, null)) { //将buf设置为空,如果失败则循环知道buf 为空为止。因为close 不是线程安全的,所以适用原子类bufUpdater 配合操作。
                InputStream input = in;
                in = null;
                if (input != null)
                    input.close();
                return;
            }
            // Else retry in case a new buf was CASed in fill()
        }
    }
}




分享到:
评论

相关推荐

    50丨装饰器模式:通过剖析JavaIO类库源码学习装饰器模式1

    在Java IO类库中,装饰器模式被广泛使用,以灵活地扩展类的功能,而避免了使用继承带来的复杂性。装饰器模式的核心在于,它定义了一个与组件接口相同的接口,因此可以在运行时动态地将责任附加到对象上。 在Java IO...

    INPUTSTREAM

    标签 "源码" 暗示这篇博客可能深入剖析了 `InputStream` 类的源代码,分析了其实现细节和设计思路。这可能包括类的构造函数、方法的实现逻辑以及与其他类的协作关系。 "工具" 标签可能意味着博客作者讨论了如何利用...

    58丨模板模式(上):剖析模板模式在JDK、Servlet、JUnit等中的应用1

    模板模式是一种行为设计模式,它在Java编程中...它在Java的多种场景中都有应用,包括IO流、Web服务和测试框架等,是理解和掌握设计模式的关键之一。通过熟练运用模板模式,开发者可以编写出更加灵活、易于维护的代码。

    《数据结构》(02331)基础概念

    内容概要:本文档《数据结构》(02331)第一章主要介绍数据结构的基础概念,涵盖数据与数据元素的定义及其特性,详细阐述了数据结构的三大要素:逻辑结构、存储结构和数据运算。逻辑结构分为线性结构(如线性表、栈、队列)、树形结构(涉及根节点、父节点、子节点等术语)和其他结构。存储结构对比了顺序存储和链式存储的特点,包括访问方式、插入删除操作的时间复杂度以及空间分配方式,并介绍了索引存储和散列存储的概念。最后讲解了抽象数据类型(ADT)的定义及其组成部分,并探讨了算法分析中的时间复杂度计算方法。 适合人群:计算机相关专业学生或初学者,对数据结构有一定兴趣并希望系统学习其基础知识的人群。 使用场景及目标:①理解数据结构的基本概念,掌握逻辑结构和存储结构的区别与联系;②熟悉不同存储方式的特点及应用场景;③学会分析简单算法的时间复杂度,为后续深入学习打下坚实基础。 阅读建议:本章节内容较为理论化,建议结合实际案例进行理解,尤其是对于逻辑结构和存储结构的理解要深入到具体的应用场景中,同时可以尝试编写一些简单的程序来加深对抽象数据类型的认识。

    【工业自动化】施耐德M580 PLC系统架构详解:存储结构、硬件配置与冗余设计

    内容概要:本文详细介绍了施耐德M580系列PLC的存储结构、系统硬件架构、上电写入程序及CPU冗余特性。在存储结构方面,涵盖拓扑寻址、Device DDT远程寻址以及寄存器寻址三种方式,详细解释了不同类型的寻址方法及其应用场景。系统硬件架构部分,阐述了最小系统的构建要素,包括CPU、机架和模块的选择与配置,并介绍了常见的系统拓扑结构,如简单的机架间拓扑和远程子站以太网菊花链等。上电写入程序环节,说明了通过USB和以太网两种接口进行程序下载的具体步骤,特别是针对初次下载时IP地址的设置方法。最后,CPU冗余部分重点描述了热备功能的实现机制,包括IP通讯地址配置和热备拓扑结构。 适合人群:从事工业自动化领域工作的技术人员,特别是对PLC编程及系统集成有一定了解的工程师。 使用场景及目标:①帮助工程师理解施耐德M580系列PLC的寻址机制,以便更好地进行模块配置和编程;②指导工程师完成最小系统的搭建,优化系统拓扑结构的设计;③提供详细的上电写入程序指南,确保程序下载顺利进行;④解释CPU冗余的实现方式,提高系统的稳定性和可靠性。 其他说明:文中还涉及一些特殊模块的功能介绍,如定时器事件和Modbus串口通讯模块,这些内容有助于用户深入了解M580系列PLC的高级应用。此外,附录部分提供了远程子站和热备冗余系统的实物图片,便于用户直观理解相关概念。

    某型自动垂直提升仓储系统方案论证及关键零部件的设计.zip

    某型自动垂直提升仓储系统方案论证及关键零部件的设计.zip

    2135D3F1EFA99CB590678658F575DB23.pdf#page=1&view=fitH

    2135D3F1EFA99CB590678658F575DB23.pdf#page=1&view=fitH

    agentransack文本搜索软件

    可以搜索文本内的内容,指定目录,指定文件格式,匹配大小写等

    Windows 平台 Android Studio 下载与安装指南.zip

    Windows 平台 Android Studio 下载与安装指南.zip

    Android Studio Meerkat 2024.3.1 Patch 1(android-studio-2024.3.1.14-windows-zip.zip.002)

    Android Studio Meerkat 2024.3.1 Patch 1(android-studio-2024.3.1.14-windows.zip)适用于Windows系统,文件使用360压缩软件分割成两个压缩包,必须一起下载使用: part1: https://download.csdn.net/download/weixin_43800734/90557033 part2: https://download.csdn.net/download/weixin_43800734/90557035

    4-3-台区智能融合终端功能模块技术规范(试行).pdf

    国网台区终端最新规范

    4-13-台区智能融合终端软件检测规范(试行).pdf

    国网台区终端最新规范

    【锂电池剩余寿命预测】Transformer-GRU锂电池剩余寿命预测(Matlab完整源码和数据)

    1.【锂电池剩余寿命预测】Transformer-GRU锂电池剩余寿命预测(Matlab完整源码和数据) 2.数据集:NASA数据集,已经处理好,B0005电池训练、B0006测试; 3.环境准备:Matlab2023b,可读性强; 4.模型描述:Transformer-GRU在各种各样的问题上表现非常出色,现在被广泛使用。 5.领域描述:近年来,随着锂离子电池的能量密度、功率密度逐渐提升,其安全性能与剩余使用寿命预测变得愈发重要。本代码实现了Transformer-GRU在该领域的应用。 6.作者介绍:机器学习之心,博客专家认证,机器学习领域创作者,2023博客之星TOP50,主做机器学习和深度学习时序、回归、分类、聚类和降维等程序设计和案例分析,文章底部有博主联系方式。从事Matlab、Python算法仿真工作8年,更多仿真源码、数据集定制私信。

    基于android的家庭收纳App的设计与实现.zip

    Android项目原生java语言课程设计,包含LW+ppt

    大学生入门前端-五子棋vue项目

    大学生入门前端-五子棋vue项目

    二手车分析完整项目,包含源代码和数据集,包含:XGBoost 模型,训练模型代码,数据集包含 10,000 条二手车记录的数据集,涵盖车辆品牌、型号、年份、里程数、发动机缸数、价格等

    这是一个完整的端到端解决方案,用于分析和预测阿联酋(UAE)地区的二手车价格。数据集包含 10,000 条二手车信息,覆盖了迪拜、阿布扎比和沙迦等城市,并提供了精确的地理位置数据。此外,项目还包括一个基于 Dash 构建的 Web 应用程序代码和一个训练好的 XGBoost 模型,帮助用户探索区域市场趋势、预测车价以及可视化地理空间洞察。 数据集内容 项目文件以压缩 ZIP 归档形式提供,包含以下内容: 数据文件: data/uae_used_cars_10k.csv:包含 10,000 条二手车记录的数据集,涵盖车辆品牌、型号、年份、里程数、发动机缸数、价格、变速箱类型、燃料类型、颜色、描述以及销售地点(如迪拜、阿布扎比、沙迦)。 模型文件: models/stacking_model.pkl:训练好的 XGBoost 模型,用于预测二手车价格。 models/scaler.pkl:用于数据预处理的缩放器。 models.py:模型相关功能的实现。 train_model.py:训练模型的脚本。 Web 应用程序文件: app.py:Dash 应用程序的主文件。 callback

    《基于YOLOv8的船舶航行违规并线预警系统》(包含源码、可视化界面、完整数据集、部署教程)简单部署即可运行。功能完善、操作简单,适合毕设或课程设计.zip

    资源内项目源码是来自个人的毕业设计,代码都测试ok,包含源码、数据集、可视化页面和部署说明,可产生核心指标曲线图、混淆矩阵、F1分数曲线、精确率-召回率曲线、验证集预测结果、标签分布图。都是运行成功后才上传资源,毕设答辩评审绝对信服的保底85分以上,放心下载使用,拿来就能用。包含源码、数据集、可视化页面和部署说明一站式服务,拿来就能用的绝对好资源!!! 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、大作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.txt文件,仅供学习参考, 切勿用于商业用途。

    《基于YOLOv8的工业布匹瑕疵分类系统》(包含源码、可视化界面、完整数据集、部署教程)简单部署即可运行。功能完善、操作简单,适合毕设或课程设计.zip

    资源内项目源码是来自个人的毕业设计,代码都测试ok,包含源码、数据集、可视化页面和部署说明,可产生核心指标曲线图、混淆矩阵、F1分数曲线、精确率-召回率曲线、验证集预测结果、标签分布图。都是运行成功后才上传资源,毕设答辩评审绝对信服的保底85分以上,放心下载使用,拿来就能用。包含源码、数据集、可视化页面和部署说明一站式服务,拿来就能用的绝对好资源!!! 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、大作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.txt文件,仅供学习参考, 切勿用于商业用途。

    CodeCount.exe

    此为代码审查工具 可查 文件数,字节数,总行数,代码行数,注释行数,空白行数,注释率等

    商业数据分析与Python实现:企业破产概率及抽样技术解析(复现论文或解答问题,含详细可运行代码及解释)

    内容概要:本文档涵盖了一项关于企业破产概率的详细分析任务,分为书面回答和Python代码实现两大部分。第一部分涉及对业务类型和破产状态的边际分布、条件分布及相对风险的计算,并绘制了相应的二维条形图。第二部分利用Python进行了数据处理和可视化,包括计算比值比、识别抽样技术类型、分析鱼类数据集以及探讨辛普森悖论。此外,还提供了针对鱼类和树木数据的统计分析方法。 适合人群:适用于有一定数学和编程基础的学习者,尤其是对统计学、数据分析感兴趣的大学生或研究人员。 使用场景及目标:①帮助学生掌握统计学概念如边际分布、条件分布、相对风险和比值比的实际应用;②教授如何用Python进行数据清洗、分析和可视化;③提高对不同类型抽样技术和潜在偏见的理解。 其他说明:文档不仅包含了理论知识讲解,还有具体的代码实例供读者参考实践。同时提醒读者在完成作业时需要注意提交格式的要求。

Global site tag (gtag.js) - Google Analytics