使用jxl导出大数据量EXCEL时内存溢出的解决办法

POI或者JXL在导出大量数据的时候，由于它们将每一个单元格生都成一个Cell对象，所以很容易导致内存溢出。

1、通过jx1最新版本的采用临时文件写入EXCEL功能，设定临时文件的位置，可以有效的避免内存溢出：

           wbSetting.setUseTemporaryFileDuringWrite(true);   
           wbSetting.setTemporaryFileDuringWriteDirectory(new File(excelPath));//临时文件夹的位置

2、EXCEL获取的list集合先读取数据总行数，再通过ROWNUM进行控制，设定每次读取多少行数据，比如一个List设定为50000；

            WorkbookSettings wbSetting = new WorkbookSettings();   
            wbSetting.setUseTemporaryFileDuringWrite(true);   
            wbSetting.setTemporaryFileDuringWriteDirectory(new File(excelPath));//临时文件夹的位置
            workbook = Workbook.createWorkbook(new File(fullPath),wbSetting);
            int returnCount=0;
            if(null!=pager)
            {
                returnCount = BrasDatabase.getReturnCount(pager.getStartTime(),
                        pager.getEndTime(), pager);
            }

            if (returnCount > 0) {    
                pager.setPageSize(50000);
                pager.setTotalRows(returnCount);// 获取总行数
                pager.setNewTotalPages(pager.getTotalRows()); // 总页数
                for (int i = 1; i <= pager.getTotalPages(); i++) {
                    pager.setCurrentPage(i); // 当前页面d
                    List<BrasAuth> list = BrasDatabase
                            .getBrasAuthResultByIpToExcelList(pager
                                    .getStartTime(), pager.getEndTime(), pager);
                    this.createExcel(list,excelFilePath);
                    list.clear();
                }
            }


3、在写入EXCEL的时候，将读取的LIST分割，每50000条数据生成一个EXCEL的sheet（一个sheet最多能存储60000多行数据），再写入，写入的时候，如果设置了采用临时文件写入的话，jx1会自动采用生成临时文件的方式写入EXCEL：

       for(int i=1;i<=list.size();i++)
        {
            if(i%50000==0)
            {
                sheetName=format.format(new Date());
                toExcel(list.subList(reNum, i),sheetName);
                reNum=i;
            }
        }

------------------------------------------------------------------------------------------------------------------------------

写文本格式的Excel文件,而不是用POI等生成二进制的文件, 可以避免创建大批量的对象时内存溢出.代码如下可以作为参考:
第一种格式,CSV,最简单的,格式最差,最基本的行列,不能合并,不能设置着色, 
第二种,HTML格式的,如:"<TABLE>....</TABLE>"这样的文本,后辍名改为XLS就可以了,可以设置跨行列的合并,可以着色,图片没试过,估计是可以的,还可以设置单元格对齐,单元格的格式等

public static boolean createExcelFileByStream(String path, List list) { 
        try { 
         //定义表头
         String userxlsinfo = "序号\t用户ID\t姓名\t手机\t留言信息"; 
            File file = new File("c:\\streamExcel.xls"); 
            if (file.isFile()) { 
                file.mkdir(); 
            } 
            FileOutputStream out = new FileOutputStream(file); 
            OutputStreamWriter osw = new OutputStreamWriter(out, "GB2312"); 
            BufferedWriter bw = new BufferedWriter(osw); 
            // 创建表头  
            String sheader = userxlsinfo; 
            sheader += "\r\n"; 
            bw.write(sheader); 
            if (list != null) { 
             // List list 此处可以遍历list对象
                for (int i = 0; i < 5; i++) { 
                    StringBuffer mess = new StringBuffer(); 
                    // 用户信息  
                    mess.append((i + 1) + "\t"); 
                    mess.append((i + 1) + "\t"); 
                    mess.append((i + 1) + "\t"); 
                    mess.append((i + 1) + "\t"); 
                    mess.append((i + 1) + "\t"); 
                   
                    mess.append("\r\n");     
                    System.out.println(i); 
                    bw.write(mess.toString()); 
                } 
            } 
            bw.close(); 
            osw.close(); 
            out.close(); 
            return true; 
        } catch (FileNotFoundException e) { 
            e.printStackTrace(); 
        } catch (IOException e) { 
            e.printStackTrace(); 
        }
        return false; 
    } 



注意:表头部分和数据部分的间隔一定要用'\t ' 如果改用','号则导出文件用excel打开展示会有问题.

评论

1 楼 安静听歌 2015-08-04  

设置了.setUseTemporaryFileDuringWrite(true);   还是溢出了，，，