前言:
今天姐妹们对“java批量导入千万级excel”可能比较关怀,同学们都想要了解一些“java批量导入千万级excel”的相关文章。那么小编同时在网络上搜集了一些关于“java批量导入千万级excel””的相关内容,希望各位老铁们能喜欢,你们快快来了解一下吧!一、EasyExcel
EasyExcel是阿里巴巴开源poi插件之一,主要解决了poi框架使用复杂,sax解析模式不容易操作,数据量大起来容易OOM,解决了POI并发造成的报错。
主要解决方式:通过解压文件的方式加载,一行一行的加载,并且抛弃样式字体等不重要的数据,降低内存的占用。
EasyExcel优势
注解式自定义操作。输入输出简单,提供输入输出过程的接口支持一定程度的单元格合并等灵活化操作二、常用注解
@ExcelProperty
指定当前字段对应excel中的那一列。可以根据名字或者Index去匹配。当然也可以不写,默认第一个字段就是index=0,以此类推。千万注意,要么全部不写,要么全部用index,要么全部用名字去匹配。千万别三个混着用,除非你非常了解源代码中三个混着用怎么去排序的。如果您正在学习Spring Boot,推荐一个连载多年还在继续更新的免费教程:
@ExcelIgnore
默认所有字段都会和excel去匹配,加了这个注解会忽略该字段
@DateTimeFormat
日期转换,用String去接收excel日期格式的数据会调用这个注解。里面的value参照java.text.SimpleDateFormat
@NumberFormat
数字转换,用String去接收excel数字格式的数据会调用这个注解。里面的value参照java.text.DecimalFormat
@ExcelIgnoreUnannotated
默认不加ExcelProperty 的注解的都会参与读写,加了不会参与
三、依赖
<!-- easyexcel 主要依赖 这一个基本上就够了--><dependency> <groupId>com.alibaba</groupId> <artifactId>easyexcel</artifactId> <version>2.1.4</version></dependency><!-- servlet-api --><dependency> <groupId>javax.servlet</groupId> <artifactId>javax.servlet-api</artifactId> <version>4.0.1</version> <scope>provided</scope></dependency><dependency> <groupId>com.alibaba</groupId> <artifactId>fastjson</artifactId> <version>1.2.47</version></dependency>四、监听
/** * EasyExcel 导入监听 */public class ExcelListener extends AnalysisEventListener { //可以通过实例获取该值 private List<Object> datas = new ArrayList<Object>(); @Override public void invoke(Object o, AnalysisContext analysisContext) { datas.add(o);//数据存储到list,供批量处理,或后续自己业务逻辑处理。 doSomething(o);//根据自己业务做处理 } private void doSomething(Object object) { //1、入库调用接口 } public List<Object> getDatas() { return datas; } public void setDatas(List<Object> datas) { this.datas = datas; } @Override public void doAfterAllAnalysed(AnalysisContext analysisContext) { // datas.clear();//解析结束销毁不用的资源 }}五、接口导入Excel
try { //获取文件名 String filename = file.getOriginalFilename(); //获取文件流 InputStream inputStream = file.getInputStream(); //实例化实现了AnalysisEventListener接口的类 ExcelListener listener = new ExcelListener(); //传入参数 ExcelReader excelReader = new ExcelReader(inputStream, ExcelTypeEnum.XLS, null, listener); //读取信息 excelReader.read(new Sheet(1, 0, Test.class)); //获取数据 List<Object> list = listener.getDatas(); if (list.size() > 1) { for (int i = 0; i < list.size(); i++) { Testobj = (Test) list.get(i); JSONObject jo = new JSONObject(); } } } catch (Exception e) { System.out.println(e.getMessage()); }六、接口导出Excel
HttpServletResponse response, HttpServletRequest request
try { String filenames = "111111"; String userAgent = request.getHeader("User-Agent"); if (userAgent.contains("MSIE") || userAgent.contains("Trident")) { filenames = URLEncoder.encode(filenames, "UTF-8"); } else { filenames = new String(filenames.getBytes("UTF-8"), "ISO-8859-1"); } response.setContentType("application/vnd.ms-exce"); response.setCharacterEncoding("utf-8"); response.addHeader("Content-Disposition", "filename=" + filenames + ".xlsx"); EasyExcel.write(response.getOutputStream(), Test.class).sheet("sheet").doWrite(testList);} catch (Exception e) {}另外,如果您正在学习Spring Cloud,推荐一个连载多年还在继续更新的免费教程:七、本地导入、本地导出
List<Test> testList = new ArrayList<>();try { String strUrl = "C:\\Users\\Administrator\\Desktop\\json.xlsx"; File multipartFile = new File(strUrl); InputStream inputStream = new FileInputStream(multipartFile); //实例化实现了AnalysisEventListener接口的类 ExcelListener listener = new ExcelListener(); //传入参数 ExcelReader excelReader = new ExcelReader(inputStream, ExcelTypeEnum.XLS, null, listener); //读取信息 excelReader.read(new Sheet(1, 0, Test.class)); //获取数据 List<Object> list = listener.getDatas(); if (list.size() > 1) { for (int i = 0; i < list.size(); i++) { Testobj = (Test) list.get(i); } }} catch (Exception e) { System.out.println(e.getMessage());}try { String strUrl = "C:\\Users\\Administrator\\Desktop\\json"+System.currentTimeMillis()+".xlsx"; EasyExcel.write(strUrl,Test.class).sheet("sheet").doWrite(testList);} catch (Exception e) {}
以上就是EasyExcel的基础使用过程,欢迎点赞关注交流。
来源 |
更多好文
万字长文带你学习ElasticSearch
标签: #java批量导入千万级excel