java导出大批量(百万以上)数据的excel文件
本文实例为大家分享了java导出百万以上数据的excel文件,供大家参考,具体内容如下
1.传统的导出方式会消耗大量的内存,2003每个sheet页最多65536条数据,2007每个sheet页可以达到100万条数据以上,2007会在生成Workbook时清理数据,所以2007导出量更大;
2.可以导出多个excel文件到某个目录中,然后打包下载;
3.导出excel格式的xml文件,这种方式可以分批导出数据,适用于大批量数据的导出,以下简单介绍这种方式:
代码如下:
package com.epay.utils; /** * 大数据量导出成EXCEL或XML * @author qad * 2017-04-22 */ import java.io.BufferedOutputStream; import java.io.DataOutputStream; import java.io.File; import java.io.FileNotFoundException; import java.io.FileOutputStream; import java.io.IOException; public class Test { public static void main(String[] args) { StringBuffer sb = new StringBuffer(); try { DataOutputStream rafs = new DataOutputStream( new BufferedOutputStream(new FileOutputStream(new File( "d://test.xls")))); sb.append("<?xml version=\"1.0\" encoding=\"GBK\" ?>"); sb.append("\n"); sb.append("<?mso-application progid=\"Excel.Sheet\"?>"); sb.append("\n"); sb.append("<Workbook xmlns=\"urn:schemas-microsoft-com:office:spreadsheet\""); sb.append("\n"); sb.append(" xmlns:o=\"urn:schemas-microsoft-com:office:office\""); sb.append("\n"); sb.append(" xmlns:x=\"urn:schemas-microsoft-com:office:excel\""); sb.append("\n"); sb.append(" xmlns:ss=\"urn:schemas-microsoft-com:office:spreadsheet\""); sb.append("\n"); sb.append(" xmlns:html=\"http://www.w3.org/TR/REC-html40\">"); sb.append("\n"); sb.append("<DocumentProperties xmlns=\"urn:schemas-microsoft-com:office:office\"> "); sb.append("\n"); sb.append(" <Styles>\n"); sb.append(" <Style ss:ID=\"Default\" ss:Name=\"Normal\">\n"); sb.append(" <Alignment ss:Vertical=\"Center\"/>\n"); sb.append(" <Borders/>\n"); sb.append(" <Font ss:FontName=\"宋体\" x:CharSet=\"134\" ss:Size=\"12\"/>\n"); sb.append(" <Interior/>\n"); sb.append(" <NumberFormat/>\n"); sb.append(" <Protection/>\n"); sb.append(" </Style>\n"); sb.append(" </Styles>\n"); int sheetcount = 0; int recordcount = 65535; int currentRecord = 0; int total = 100000; int col = 20; sb.append("<Worksheet ss:Name=\"Sheet0\">"); sb.append("\n"); sb.append("<Table ss:ExpandedColumnCount=\"" + col + "\" ss:ExpandedRowCount=\"" + total + "\" x:FullColumns=\"1\" x:FullRows=\"1\">"); sb.append("\n"); for (int i = 0; i < total; i++) { if ((currentRecord == recordcount || currentRecord > recordcount || currentRecord == 0) && i != 0) {// 一个sheet写满 currentRecord = 0; rafs.write(sb.toString().getBytes()); sb.setLength(0); sb.append("</Table>"); sb.append("<WorksheetOptions xmlns=\"urn:schemas-microsoft-com:office:excel\">"); sb.append("\n"); sb.append("<ProtectObjects>False</ProtectObjects>"); sb.append("\n"); sb.append("<ProtectScenarios>False</ProtectScenarios>"); sb.append("\n"); sb.append("</WorksheetOptions>"); sb.append("\n"); sb.append("</Worksheet>"); sb.append("<Worksheet ss:Name=\"Sheet" + i / recordcount + "\">"); sb.append("\n"); sb.append("<Table ss:ExpandedColumnCount=\"" + col + "\" ss:ExpandedRowCount=\"" + recordcount + "\" x:FullColumns=\"1\" x:FullRows=\"1\">"); sb.append("\n"); } sb.append("<Row>"); for (int j = 0; j < col; j++) { System.out.println(i); sb.append("<Cell><Data ss:Type=\"String\">111</Data></Cell>"); sb.append("\n"); } sb.append("</Row>"); if (i % 5000 == 0) { rafs.write(sb.toString().getBytes()); rafs.flush(); sb.setLength(0); } sb.append("\n"); currentRecord++; } rafs.write(sb.toString().getBytes()); sb.setLength(0); sb.append("</Table>"); sb.append("<WorksheetOptions xmlns=\"urn:schemas-microsoft-com:office:excel\">"); sb.append("\n"); sb.append("<ProtectObjects>False</ProtectObjects>"); sb.append("\n"); sb.append("<ProtectScenarios>False</ProtectScenarios>"); sb.append("\n"); sb.append("</WorksheetOptions>"); sb.append("\n"); sb.append("</Worksheet>"); sb.append("</Workbook>"); sb.append("\n"); rafs.write(sb.toString().getBytes()); rafs.flush(); rafs.close(); } catch (FileNotFoundException e) { e.printStackTrace(); } catch (IOException e) { e.printStackTrace(); } } }
导出xml文件之后直接修改后缀名为.xlsx就可以直接打开,弊端:无法导出.xls格式的excel文件.以上只是一种简单想法,留待以后具体实现.
扩展:既然可以使用xml文件导出excel,那么导出csv文件之后也可以直接改后缀名为.xls,目前只是一种想法,尚未证实可行性.
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持脚本之家。
相关文章
SpringBoot集成POI导出Execl表格之统一工具类
这篇文章主要为大家详细介绍了SpringBoot集成POI导出Execl表格之统一工具类,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下2022-09-09PowerJob AbstractSqlProcessor方法工作流程源码解读
这篇文章主要为大家介绍了PowerJob AbstractSqlProcessor方法工作流程源码解读,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪2024-01-01
最新评论