...文件映射有个需要注意的问题,就是你无法确保他被释放了。
也就是只有映射的内存被回收,文件才会被释放。否则其他进程访问就是被锁状态。
所以这个对于一个进程一个文件。如果多个进程访问一个文件,还是不是很适合。
最近看了文件内存映射。在NIO中,使用起来很方便。
文件通过内存映射以后,访问速度自然是提高了。
当然也有很多问题,现在我们来看看NIO中的内存映射文件。
public abstract class FileChannel extends
AbstractChannel implements ByteChannel, GatheringByteChannel, ScatteringByteChannel {
// This is a partial API listing
public abstract MappedByteBuffer map (MapMode mode, long position,long size)
public static class MapMode {
public static final MapMode READ_ONLY
public static final MapMode READ_WRITE
public static final MapMode PRIVATE
}
}
内存映射文件,是通过一个FileChannel来完成的,返回的MappedByteBuffer,也是一种ByteBuffer。这里有三种映射模式。主要针对这三种映射模式的差异说说。
根据map函数,我们得知,我们可以映射部分文件,也可以全部映射。
如果请求的大小,size超出文件,那么文件会相应的增长以对应映射。如果是Integer.MAX_VALUE,那么文件就会达到2.1GB
当然,如果你请求的只是一个只读文件,而你的size超出文件大小,那么就会抛出IOException。
对于 MapMode的前两种,READ_ONLY和READ_WRITE来说,都很好理解。要注意的而是,如果在一个只读文件上使用READ_WRITE,是要抛出NonWritableChannelException异常的。
MapMode.PRIVATE模式很有意思,称为“写时拷贝”(copy-on-write)的映射。这是操作系统中常用的技术。比如创建一个子进程时,子进程共享父进程的地址空间,当子进程修改空间的时候,才会拷贝要修改的部分。对于PRIVATE模式来说,只有使用put函数的时候,才会去拷贝。可能拷贝某一页或者几页。假设此时有其他的映射,是看不到本次put后的改变的。也就是说,私有的。
注意,没有unmap函数,也就是说,一旦map成功,那么即使FileChannel被关闭,映射依然存在,只有映射对应的MappedByteBuffer内存被回收,映射才算取消。
MappedByteBuffer直接反应磁盘文件,如果磁盘文件结构或大小改变,那么可能就无法访问文件。
MappedByteBuffer 直接内存访问,并不占用虚拟机内存。
MappedByteBuffer 也是ByteBuffer,所以可以用于SocketChannel之类的通道读写。
对于MappedByteBuffer还有几个函数可以介绍下。
public abstract class MappedByteBuffer extends ByteBuffer {
// This is a partial API listing
public final MappedByteBuffer load( )
public final boolean isLoaded( )
public final MappedByteBuffer force( )
}
load函数用于从磁盘文件加载到内存。这个操作将会引起大量系统调用。慎用。一旦加载完成,再次访问文件,就和访问内存一样快。但是,这些都起决于操作系统底层调用。
isLoaded函数是用来判断文件是否完全加载到内存。
force则是强制同步内存文件到磁盘。也就是把MappedByteBuffer中的更改应用到磁盘中。这里包括了文件的元数据(最近一次访问,作者,创建时间等)。当然,如果是READ_ONLY或者PRIVATE模式,则不起作用。
下面这个例子,使用内存映射文件,生成一个HTTP应答格式的文件。我们来看看这个例子:
package shaoxin.nio;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.net.URLConnection;
import java.nio.ByteBuffer;
import java.nio.MappedByteBuffer;
import java.nio.channels.FileChannel;
import java.nio.channels.FileChannel.MapMode;
/***
* Dummy HTTP server using MappedByteBuffer.
* Given a filename on the command line, pretend to be
* a web server and generate an HTTP response containing
* the file content preceded by appropriate headers The
* data is send with a gathering write.
*
* @author Ron Hitchens (ron@ronsoft.com)
*
*/
public class MappedHttp {
private static final String OUTPUT_FILE="MappedHttp.out";
private static final String LINE_SEP = "\r\n";
private static final String SERVER_ID = "Server: Ronsoft Dummy Server";
private static final String HTTP_HDR =
"HTTP/1.0 200 OK" + LINE_SEP + SERVER_ID + LINE_SEP;
private static final String HTTP_404_HDR =
"HTTP/1.0 404 Not Found" + LINE_SEP + SERVER_ID + LINE_SEP;
private static final String MSG_404 = "Cound not open file: ";
public static void main(String[] args) throws Exception{
if(args.length < 1){
System.err.println("Usage:filename");
return;
}
String file = args[0];
ByteBuffer header = ByteBuffer.wrap(bytes(HTTP_HDR));
ByteBuffer dynhdrs = ByteBuffer.allocate(128);
ByteBuffer[] gather = {header,dynhdrs,null};
String contentType = "unknown/unknown";
long contentLength = -1;
try{
FileInputStream fis = new FileInputStream(file);
FileChannel fc = fis.getChannel();
MappedByteBuffer filedata =
fc.map(MapMode.READ_ONLY, 0, fc.size());
gather[2] = filedata;
contentLength = fc.size();
contentType = URLConnection.guessContentTypeFromName(file);
}catch(IOException e){
//file could not be opend; report problem
ByteBuffer buf = ByteBuffer.allocate(128);
String msg = MSG_404 + LINE_SEP;
buf.put(bytes(msg));
buf.flip();
//Use the HTTP error response
gather[0] = ByteBuffer.wrap(bytes(HTTP_404_HDR));
gather[2] = buf;
contentLength = msg.length();
contentType = "text/plain";
}
StringBuffer sb = new StringBuffer();
sb.append("Content-Length: " + contentLength);
sb.append(LINE_SEP);
sb.append("Content-Type: ").append(contentType);
sb.append(LINE_SEP).append(LINE_SEP);
dynhdrs.put(bytes(sb.toString()));
dynhdrs.flip();
FileOutputStream fos = new FileOutputStream(OUTPUT_FILE);
FileChannel out = fos.getChannel();
// All the buffers have been prepared , write them out
while(out.write(gather) > 0){
//Empty body; loop until all buffers are empty
}
out.close();
System.out.println("output written to "+ OUTPUT_FILE);
}
//Convert a String to its constituent bytes
//from the ASCII character set
private static byte[] bytes(String string)throws Exception {
return (string.getBytes("US-ASCII"));
}
}
这里结合使用了scatter/gather技术。
分享到:
相关推荐
内容概要:美国大学生数学建模竞赛(MCM/ICM)由美国数学及其应用联合会主办,旨在提高学生运用数学知识和计算机技术解决实际问题的能力,培养团队合作精神和创新思维。竞赛始于1985年,至今已有近40年历史,是全球最具影响力的数学建模竞赛之一。竞赛分为MCM和ICM两部分,涵盖多个领域,参赛队伍需在4天内完成题目的分析、建模、求解和论文撰写。竞赛面向全球在校大学生,设有多个奖项,获奖对学生的升学和就业有积极影响。参赛队伍应提前学习数学建模知识,掌握常用软件工具,如MATLAB、Python等,同时加强团队协作和时间管理能力。; 适合人群:全球范围内的在校大学生,特别是对数学建模感兴趣的学生。; 使用场景及目标:①提高学生运用数学知识和计算机技术解决实际问题的能力;②培养团队合作精神和创新思维;③为升学和就业积累宝贵经验。; 阅读建议:参赛队伍应提前做好充分准备,学习相关数学建模知识,熟悉常用软件工具,加强团队协作和时间管理能力,以应对竞赛的挑战。
内容概要:本文详细介绍了光伏三相并网逆变器的MATLAB仿真过程,涵盖了从光伏板输出直流电经过MPPT升压、三相桥逆变成交流,再到LCL滤波器滤波并网的全过程。具体包括MPPT算法(如扰动观察法)、坐标变换(Clarke变换和Park变换)、锁相环(采用二阶广义积分器SOGI)、电流内环PI控制以及SPWM调制和LCL滤波器的设计。每个环节都有详细的代码实现和调试技巧,确保并网电流的质量和稳定性。 适合人群:具备电力电子和控制系统基础知识的研究人员、工程师和技术爱好者。 使用场景及目标:适用于希望深入了解光伏并网逆变器工作原理及其仿真的技术人员。目标是掌握从光伏板到并网的完整控制流程,能够独立进行相关仿真和优化。 其他说明:文中提供了大量实用的代码片段和调试经验,帮助读者更好地理解和应用这些技术。同时强调了实际调试过程中可能遇到的问题及解决方案。
内容概要:本文详细介绍了永磁同步电机采用高频方波注入方法进行低速带载启动的仿真模型及其优化。首先,文章阐述了高频方波注入的基本原理,包括选择2.5kHz的注入频率以及在旋转坐标系下的d轴方向进行方波注入的原因。接着,文章深入探讨了状态机设计,将整个流程分为三个阶段:转子预定位、高频注入阶段和平滑切换到反电势观测器。此外,还讨论了电流环参数的计算方法,强调了根据电机参数精确计算PI调节器参数的重要性。同时,文章详细解释了锁相环(PLL)的实现,指出PLL带宽应设为高频信号频率的1/10以避免震荡。最后,文章分享了一些调试技巧,如处理逆变器死区补偿和合理设置注入电压幅值。 适合人群:从事永磁同步电机控制研究与开发的工程师和技术人员,尤其是对高频方波注入技术和无感控制感兴趣的读者。 使用场景及目标:适用于希望深入了解永磁同步电机高频方波注入技术的工程师,帮助他们掌握从仿真建模到实际应用的全过程,确保在低速带载启动过程中实现稳定可靠的控制效果。 其他说明:文中提供了详细的代码片段和调试建议,有助于读者更好地理解和实践相关技术。同时,附带的文档和参考文献也为进一步研究提供了丰富的资料。
内容概要:本文详细探讨了永磁同步电机(PMSM)在全速度范围内实现无位置传感器控制的方法和技术难点。主要内容涵盖高速段采用超螺旋滑模(Super Twisting Sliding Mode)观测器进行位置估计,以及低速段利用高频方波注入(High Frequency Injection)方法获取转子位置信息。针对两者之间的平滑切换提出了基于滞环和置信度加权的软切换策略,并介绍了扩张状态观测器(ESO)的应用以提高系统的鲁棒性和稳定性。文中提供了具体的MATLAB/Simulink代码片段用于实现各个控制环节,强调了参数调节的重要性及其实践经验。 适合人群:从事电机控制系统研究的专业人士、研究生及以上学历的学生,尤其是对无位置传感器控制感兴趣的科研工作者。 使用场景及目标:适用于需要精确控制PMSM应用场景的研发项目,如电动汽车驱动系统、工业自动化设备等。主要目标是掌握PMSM无位置传感器控制的关键技术和实现方法,提升系统的可靠性和性能。 其他说明:文中不仅分享了理论知识,还包括大量实用的编程技巧和调试建议,有助于读者快速理解和应用所介绍的技术。此外,作者还特别指出了一些常见的错误和注意事项,帮助读者规避潜在的问题。
爬取淘宝京东(1)
solcx、web3搭配使用
内容概要:本文介绍了一种基于偏置场校正的改进模糊c-均值(FCM)聚类图像分割算法。传统的FCM算法在处理噪声较多的图像时表现不佳,为此,作者提出了引入偏置场校正项的方法,以提高算法的鲁棒性和分割精度。文中详细描述了算法的实现步骤,包括数据加载与预处理、目标函数的设计、迭代更新过程以及实验结果分析。实验结果显示,改进后的算法在噪声较多的图像上显著提高了分割效果。 适合人群:从事计算机视觉、图像处理领域的研究人员和技术人员,尤其是对模糊聚类算法和偏置场校正感兴趣的开发者。 使用场景及目标:适用于医学图像处理等领域,特别是在处理带有噪声和强度不均匀性的图像时,能够有效改善分割质量,提供更精确的图像分析工具。 其他说明:本文不仅提供了详细的理论解释,还附有MATLAB代码实现,便于读者理解和实践。此外,文中还分享了一些实用的经验和技巧,如参数选择、性能优化等,有助于读者更好地掌握和应用该算法。
内容概要:本文详细介绍了CSR公司BlueCore3-Flash芯片,这款2004年推出的蓝牙单芯片解决方案集成了射频前端、基带处理和6Mbit闪存。文章首先回顾了其硬件架构,包括RF前端、ARM7 TDMI处理器、DSP协处理器及其存储管理。接着深入探讨了DSP协处理器对CVSD编码的优化以及RF部分的天线匹配和寄存器配置技巧。文中还提到了Flash分区管理和一些有趣的细节,如复活节彩蛋代码和通过GPIO模拟I2C控制EEPROM的方法。此外,作者分享了许多实用的经验教训,如Flash编程时序要求、寄存器配置陷阱等。最后强调了800页逆向分析报告的价值,特别是在射频校准方面的指导意义。 适合人群:从事蓝牙开发的工程师和技术爱好者,尤其是对早期蓝牙技术和硬件设计感兴趣的读者。 使用场景及目标:帮助读者深入了解BlueCore3-Flash芯片的工作原理和设计思路,掌握射频调试、DSP优化等关键技术,避免常见错误,提高开发效率。 其他说明:尽管BlueCore3-Flash已停产多年,但其设计理念和技术细节仍然值得借鉴,对于理解和优化现代蓝牙低能耗(BLE)系统具有重要参考价值。
内容概要:本文深入探讨了自动泊车系统中平行泊车路径规划的关键技术,特别是五次多项式曲线的应用及其优化方法。首先介绍了五次多项式的基本概念和数学模型,展示了如何利用六阶多项式来精确描述车辆从初始位置到最终入库位置的完整运动过程。接着详细解释了路径规划过程中面临的挑战,如狭窄车位、复杂环境等因素的影响,并提出了相应的解决方案,包括曲率优化、碰撞检测以及路径分段处理等。最后通过具体实例演示了优化前后路径性能的变化,证明了经过改进的五次多项式能够显著提高泊车的成功率和平顺性。 适合人群:对自动驾驶技术感兴趣的工程师和技术爱好者,尤其是从事智能交通系统研究的专业人士。 使用场景及目标:适用于希望深入了解自动泊车算法内部机制的研究人员,帮助他们掌握五次多项式在路径规划中的应用技巧,从而提升相关项目的开发效率和技术水平。 其他说明:文中提供了大量Python代码片段用于辅助理解和实践,同时也分享了一些实际项目中遇到的问题及解决经验,对于想要快速入门并应用于实际工作的读者非常有价值。
内容概要:本文档详细介绍了GitHub的使用方法,从基础概念到高级功能,帮助用户全面掌握GitHub的操作。首先解释了GitHub作为基于Git的代码托管平台的功能,包括支持多人协作开发、提供Web界面管理代码仓库、issue跟踪、Wiki文档和自动化工作流等特性。接着,逐步指导用户完成入门操作,如注册账号、创建仓库、安装Git以及配置账户信息。文档还列举了核心操作命令,涵盖基础工作流(克隆、添加、提交、推送)、分支管理和常用辅助命令。对于团队协作,文中描述了邀请协作者、使用Fork和Pull Request的方式,以及Issue跟踪机制。最后,介绍了GitHub的高级功能,如GitHub Pages、GitHub Actions、Wiki和Project看板,并提供了学习资源和遇到问题时的解决途径。 适合人群:适用于初学者及有一定编程经验但不熟悉GitHub的开发者。 使用场景及目标:①帮助个人或团队快速搭建并管理代码仓库;②提高代码版本控制能力,确保项目开发流程顺畅;③利用GitHub提供的协作工具提升团队合作效率。 阅读建议:由于文档内容详尽,建议初次接触GitHub的读者按照章节顺序逐步学习,同时动手实践每个操作步骤,遇到问题时参考提供的学习资源或求助于社区。
基于MATLAB的多层膜光学计算算法(转移矩阵法)源码+使用说明文档.zip 一个基于MATLAB的多层膜光学计算算法。当光束击中具有不同折射率的多层系统时,它会被反射、折射和吸收,这可以通过菲涅尔方程来推导。但随着层数的增加,数学计算变得越来越复杂。这个项目提供了一个基于传输矩阵方法的MATLAB算法,用于计算多层膜系统的光学特性。 主要功能点 基于传输矩阵方法的多层膜光学特性计算 包括反射率、透射率和吸收率的计算 支持任意数量的层数 技术栈 MATLAB
跨阻放大器设计for高速光通信
1、文件说明: Centos8操作系统textern-0.8-1.el8.rpm以及相关依赖,全打包为一个tar.gz压缩包 2、安装指令: #Step1、解压 tar -zxvf textern-0.8-1.el8.tar.gz #Step2、进入解压后的目录,执行安装 sudo rpm -ivh *.rpm
1、文件说明: Centos8操作系统texlive-xstring-7:20180414-23.el8.rpm以及相关依赖,全打包为一个tar.gz压缩包 2、安装指令: #Step1、解压 tar -zxvf texlive-xstring-7:20180414-23.el8.tar.gz #Step2、进入解压后的目录,执行安装 sudo rpm -ivh *.rpm
内容概要:本文详细介绍了基于Simulink平台构建的电动汽车仿真模型,涵盖了行驶阻力模型、工作模式切换逻辑以及驾驶员模型等多个方面。行驶阻力模型通过MATLAB函数实现了滚动阻力、空气阻力和坡度阻力的精确计算,揭示了不同车速下各阻力成分的变化规律。工作模式切换部分利用Stateflow状态机实现了纯电驱动、能量回收和混合动力之间的平滑过渡,确保了系统的稳定性和高效性。驾驶员模型则采用PID控制方法,优化了车速跟踪性能,特别是在CLTC工况下的表现更为突出。此外,文章还对比了NEDC和CLTC两种工况下的能耗差异,展示了CLTC工况下频繁启停对能耗的影响。 适合人群:从事电动汽车研究与开发的技术人员,尤其是熟悉Simulink和MATLAB的工程师。 使用场景及目标:帮助研究人员深入理解电动汽车的工作原理及其仿真建模方法,为实际产品设计提供理论支持和技术指导。 其他说明:文中提供了大量具体的代码片段和仿真结果,便于读者理解和复现相关实验。同时提醒读者关注实际路况与仿真环境之间的差异,强调仿真结果仅供参考。
串口AT操作调试程序
内容概要:本文详细介绍了基于空间矢量脉宽调制(SVPWM)的T型三电平LCL型并网逆变器在Matlab/Simulink中的仿真方法及其优化技巧。首先,文章阐述了T型三电平逆变器的优点,如低开关损耗和高效抑制高频谐波的能力。接着,深入探讨了主电路建模、电流双闭环控制、SVPWM生成以及LCL滤波器的设计。针对常见的仿真问题,如代数环错误、谐振尖峰和波形震荡,提供了具体的解决方案。此外,还分享了一些实用的经验公式和调试技巧,确保模型在不同工况下的稳定性和性能。 适合人群:从事电力电子、新能源并网系统的工程师和技术人员,尤其是对T型三电平逆变器和SVPWM技术感兴趣的读者。 使用场景及目标:适用于光伏和储能系统的并网逆变器设计与仿真。主要目标是在THD和动态响应之间取得良好平衡,提高并网电流质量,降低谐波失真,确保系统稳定性。 其他说明:文中提供的代码片段和参数设置有助于快速搭建和调试仿真模型,同时附带的波形对比图直观展示了优化前后的效果。建议读者在实践中结合实际情况进行参数调整,以达到最佳性能。
1、文件说明: Centos8操作系统thrift-glib-0.13.0-2.el8.rpm以及相关依赖,全打包为一个tar.gz压缩包 2、安装指令: #Step1、解压 tar -zxvf thrift-glib-0.13.0-2.el8.tar.gz #Step2、进入解压后的目录,执行安装 sudo rpm -ivh *.rpm
内容概要:本文详细介绍了基于PLC(可编程逻辑控制器)的四层电梯系统的组态画面设计与实现。首先解释了PLC的基本概念及其在工业控制中的重要性,然后深入探讨了电梯控制的具体实现方法,如楼层呼叫响应、按钮互锁、轿厢动画平滑移动以及紧急停止等功能的编程技巧。文章还分享了一些调试过程中遇到的问题及解决方案,强调了组态画面作为电梯系统‘仪表盘’的重要性和其实现细节。 适合人群:对工业自动化控制感兴趣的工程师和技术爱好者,尤其是有一定PLC编程基础的人群。 使用场景及目标:适用于希望深入了解PLC编程和组态画面设计的技术人员。目标是掌握如何利用PLC实现复杂逻辑控制,并通过组态画面直观展示电梯运行状态,提高系统的可靠性和用户体验。 其他说明:文中不仅提供了具体的编程示例,还分享了许多实用的经验和技巧,帮助读者更好地理解和应用相关技术。此外,作者还提到了一些常见的陷阱和注意事项,有助于避免潜在的问题。
爬百度文库ppt(1)