锋盈数科-知识库 Logo
首页
软件开发
计算机基础
Hello Halo
新手必读
关于本知识库
登录 →
锋盈数科-知识库 Logo
首页 软件开发 计算机基础 Hello Halo 新手必读 关于本知识库
登录
  1. 首页
  2. 软件开发
  3. 遇见狂神说Apach POI,EasyExcel笔记

遇见狂神说Apach POI,EasyExcel笔记

0
  • 软件开发
  • 发布于 2024-08-19
  • 11 次阅读
黄健
黄健

【狂神说Java】POI及EasyExcel一小时搞定通俗易懂_哔哩哔哩_bilibili秦疆老师通俗易懂的POI及EasyExcel教学一个小时搞定 Java 操作 Excel,工作技能栈 + 1狂神说Java系列,努力打造通俗易懂的教程求点赞三连转发支持QQ交流群:664386224https://www.bilibili.com/video/BV1Ua4y1x7BK?spm_id_from=333.999.0.0

在开发中我们经常会涉及到excel的处理,如将用户信息导出为excel表格,将Excel表中的信息导入到数据库,大大缩减人工的录入工作。目前比较流行的是Apache POI和阿里巴的easyExcel来操作Excel表格。

1、什么是Apach POI?

1.1 简介:

Apache POI - the Java API for Microsoft Documentshttps://poi.apache.org/

注意:操作Excel主要用到的是HSSF和XSSF。

  • HSSF 对应 Excel 03 版本,最多支持65535行
  • XSSF对应 Excel 07 版本,行数无限制

1.2 创建项目

(1)创建maven项目,作为父项目 ,去掉src目录

(2)创建poi-study模块

(3)导入Apach POI操作相关依赖

<dependencies>
    <!--xLs(03)-->
    <dependency>
        <groupId>org.apache.poi</groupId>
        <artifactId>poi</artifactId>
        <version>4.1.2</version>
    </dependency>
    <!--xLsx(07)-->
    <dependency>
        <groupId>org.apache.poi</groupId>
        <artifactId>poi-ooxml</artifactId>
        <version>3.9</version>
    </dependency>
    <!--日期格式化工具-->
    <dependency>
        <groupId>joda-time</groupId>
        <artifactId>joda-time</artifactId>
        <version>2.10.1</version>
    </dependency>
    <!--test-->
    <dependency>
        <groupId>junit</groupId>
        <artifactId>junit</artifactId>
        <version>4.12</version>
    </dependency>
</dependencies>

(4)Excel表格中的几个概念:

2、POI-Excel写操作

直接创建测试类,编写测试即可:

public class ExcelWriteTest {
    //构建路径
    String path="H:\\kuang-poi\\";
    @Test
    public void testWrite03() throws Exception {
        //创建新的工作簿
        HSSFWorkbook workbook = new HSSFWorkbook();
        //在Excel工作簿中建一张表
        //Sheet sheet = workbook.createSheet();
        // 如要新建一名为"会员登录统计"的工作表,其语句为:
        Sheet sheet =workbook.createSheet("狂神观众统计表");

        //创建行(row1)
        Row row1 = sheet.createRow(0);
        //创建单元格(col1-1)
        Cell cell11 = row1.createCell(0);
        cell11.setCellValue("今日新增观众");
        //创建单元格(col1-2)
        Cell cell12 = row1.createCell(1);
        cell12.setCellValue(999);


        //创建行(row2)
        Row row2 = sheet.createRow(1);
        //创建单元格(col2-1)
        Cell cell21 = row2.createCell(0);
        cell21.setCellValue("统计时间");
        //创建单元格(col2-2)
        Cell cell22 = row2.createCell(1);
        String dateTime = new DateTime().toString("yyyy-MM-dd HH:mm:ss");
        cell22.setCellValue(dateTime);

        //新建一个输出文件流(注意先创建文件夹)
        FileOutputStream out = new FileOutputStream(path + "狂神观众统计表03.xls");
        //把相应的Excel工作簿存盘
        workbook.write(out);
        //操作结束,关闭文件
        out.close();
        System.out.println("文件生成成功");
    }
    @Test
    public void testWrite07() throws Exception{
        //创建新的工作簿,只有对象发生了变化
        XSSFWorkbook workbook = new XSSFWorkbook();
        // 如要新建一名为"会员登录统计"的工作表,其语句为:
        Sheet sheet =workbook.createSheet("狂神观众统计表");

        //创建行(row1)
        Row row1 = sheet.createRow(0);
        //创建单元格(col1-1)
        Cell cell11 = row1.createCell(0);
        cell11.setCellValue("今日新增观众");
        //创建单元格(col1-2)
        Cell cell12 = row1.createCell(1);
        cell12.setCellValue(999);


        //创建行(row2)
        Row row2 = sheet.createRow(1);
        //创建单元格(col2-1)
        Cell cell21 = row2.createCell(0);
        cell21.setCellValue("统计时间");
        //创建单元格(col2-2)
        Cell cell22 = row2.createCell(1);
        String dateTime = new DateTime().toString("yyyy-MM-dd HH:mm:ss");
        cell22.setCellValue(dateTime);

        //新建一个输出文件流(注意先创建文件夹)
        FileOutputStream out = new FileOutputStream(path + "狂神观众统计表07.xlsx");
        //把相应的Excel工作簿存盘
        workbook.write(out);
        //操作结束,关闭文件
        out.close();
        System.out.println("文件生成成功");
    }
}

2.1 大文件写HSSF

缺点:最多只能处理65536行,否则会抛出异常;

优点:过程中写入缓存,不操作磁盘,最后一次性写入磁盘,速度快;

    @Test
    public void testWrite03BigData() throws Exception{
        //记录开始时间
        long begin = System.currentTimeMillis();
        //创建一个HSSFWorkbook
        Workbook workbook = new HSSFWorkbook();
        //创建一个sheet
        Sheet sheet = workbook.createSheet();
        //xls文件最大支持65536行
        for (int rowNum = 0; rowNum < 65536; rowNum++) {
            //创建一个行
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum <10 ; cellNum++) {
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }
        System.out.println("done");
        FileOutputStream out = new FileOutputStream(path+"bigdata03.xls");
        workbook.write(out);
        // 操作结束,关闭文件
        out.close();
        //记录结束时间
        long end = System.currentTimeMillis();
        System.out.println((double)(end-begin)/1000);
    }

2.2 大文件写XSSF

优点:可以写较大的数据量,没有限制;

缺点:写数据时速度非常慢,非常耗内存,数据量过大时会发生内存溢出;

    @Test
    public void testWrite07BigData() throws Exception {
        //记录开始时间
        long begin = System.currentTimeMillis();
        //创建一个XSSFWorkbook
        Workbook workbook = new XSSFWorkbook();
        //创建一个sheet
        Sheet sheet = workbook.createSheet();
        //xls文件最大支持65536行
        for (int rowNum = 0; rowNum < 100000; rowNum++) {
        //创建一个行
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum < 10; cellNum++) {//创建单元格
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }
        System.out.println("done");
        FileOutputStream out = new FileOutputStream(path+"bigdata07.xlsx");
        workbook.write(out);
        // 操作结束,关闭文件
        out.close();
        //记录结束时间
        long end = System.currentTimeMillis();
        System.out.println((double)(end - begin)/1000);
    }

2.3 大文件写SXSSF

优点:可以写非常大的数据量,如100万条甚至更多条,写数据速度快,占用更少的内存;

缺点:过程中会产生临时文件,需要清理临时文件;

    @Test
    public void testWrite07BigDataFast() throws Exception {
        //记录开始时间
        long begin = System.currentTimeMillis();
        //创建一个SXSSFWorkbook
        Workbook workbook = new SXSSFWorkbook();
        //创建一个sheet
        Sheet sheet = workbook.createSheet();
        //xls文件最大支持65536行
        for (int rowNum = 0; rowNum < 100000; rowNum++) {
        //创建一个行
            Row row = sheet.createRow(rowNum);
            for (int cellNum = 0; cellNum < 10; cellNum++) {//创建单元格
                Cell cell = row.createCell(cellNum);
                cell.setCellValue(cellNum);
            }
        }
        System.out.println("done");
        FileOutputStream out = new FileOutputStream(path+"bigdata07-fast.xlsx");
        workbook.write(out);
        // 操作结束,关闭文件
        out.close();
        //清除临时文件
        ((SXSSFWorkbook)workbook).dispose();
        //记录结束时间
        long end = System.currentTimeMillis();
        System.out.println((double)(end - begin)/1000);
    }

运行上述操作结果如下:

3、POI-Excel读操作

3.1 Excel 03类型

public class ExcelReadTest {
    String path="H:\\kuang-poi\\";
    @Test
    public void testRead03() throws Exception{
        InputStream fileInputStream = new FileInputStream(path + "狂神观众统计表03.xls");
        Workbook workbook = new HSSFWorkbook(fileInputStream);
        Sheet sheet = workbook.getSheetAt(0);
        //读取第一行第一列
        Row row = sheet.getRow(0);
        Cell cell11 = row.getCell(0);
        //输出单元格内容
        System.out.println(cell11.getRichStringCellValue());
        //操作结束,关闭文件
        fileInputStream.close();
    }
}

3.2 Excel 07类型

     @Test
    public void testRead07() throws Exception{
        //获取文件流
        InputStream is = new FileInputStream(path+"/狂神观众统计表07.xlsx");
        //1、创建一个工作簿。使用 Excel能操作的这边都可以操作!
        Workbook workbook = new XSSFWorkbook(is);
        //2、得到表
        Sheet sheet = workbook.getSheetAt(0);
        //3、读取第一行第一列
        Row row = sheet.getRow(0);
        Cell cell = row.getCell(0);
        //4、输出单元内容
        //读取值的时候,一定要注意类型!getStringCellValue 字符串类型
        System.out.println(cell.getStringCellValue());
        // 操作结束,关闭文件
        is.close();
    }

3.3 读取不同类型

注意:读取不同的数据类型,是工作上的重点,这段类型匹配代码工作时可直接复制

    //读取不同类型
    @Test
    public void testTypeCell() throws Exception{
        //获取文件流
        InputStream is = new FileInputStream(path+"会员消费商品明细表.xls");
        //创建一个工作簿,使用 excel能操作的这边都可以操作
        Workbook workbook = new HSSFWorkbook(is);
        //得到表
        Sheet sheet = workbook.getSheetAt(0);

        //读取标题内容
        Row rowTitle = sheet.getRow(0);
        if (rowTitle!=null){
            //读取列,得到一行有多少列有数据
            int cellCount = rowTitle.getPhysicalNumberOfCells();
            for (int cellNum = 0; cellNum < cellCount; cellNum++) {
                Cell cell = rowTitle.getCell(cellNum);
                if (cell!=null){
                    String cellValue = cell.getStringCellValue();
                    System.out.print(cellValue+"|");
                }
            }
            System.out.println();
        }
        //获取表中的内容
        //获取表中有多少行有数据
        int rowCount = sheet.getPhysicalNumberOfRows();
        for (int rowNum = 1; rowNum < rowCount; rowNum++) {
            Row rowData = sheet.getRow(rowNum);
            if (rowData!=null){//如果行不为空
                //读取列
                int cellCount=rowTitle.getPhysicalNumberOfCells();
                for (int cellNum = 0; cellNum < cellCount; cellNum++) {
                    Cell cell = rowData.getCell(cellNum);
                    if (cell!=null){
                        //判断单元格类型
                        int cellType = cell.getCellType();
                        String cellValue="";
                        switch (cellType){
                            case HSSFCell.CELL_TYPE_STRING://字符串
                                cellValue=String.valueOf(cell.getStringCellValue());
                                break;
                            case HSSFCell.CELL_TYPE_BOOLEAN://布尔
                                cellValue = String.valueOf(cell.getBooleanCellValue());
                                break;
                            case HSSFCell.CELL_TYPE_BLANK://空
                                break;
                            case HSSFCell.CELL_TYPE_NUMERIC://数字(日期、普通数字)
                                if (HSSFDateUtil.isCellDateFormatted(cell)) {//日期
                                    Date date = cell.getDateCellValue();
                                    cellValue = new DateTime(date).toString("yyyy-MM-dd");
                                } else {// 不是日期格式,则防止当数字过长时以科学计数法显示
                                    cell.setCellType(HSSFCell.CELL_TYPE_STRING);//转换为字符串输出
                                    cellValue = cell.toString();
                                }
                                break;
                            case Cell.CELL_TYPE_ERROR:
                                System.out.print("【数据类型错误】");
                                break;
                        }
                        System.out.println(cellValue);
                    }
                }
            }
        }
        is.close();
    }

3.4 计算公式

    @Test
    public void  testFormula() throws Exception{
        InputStream is = new FileInputStream(path + "计算公式.xls");
        Workbook workbook = new HSSFWorkbook(is);
        Sheet sheet = workbook.getSheetAt(0);

        //读取第五行第一列
        Row row = sheet.getRow(4);
        Cell cell = row.getCell(0);

        //公式计算器
        FormulaEvaluator fFormulaEvaluator = new HSSFFormulaEvaluator((HSSFWorkbook) workbook);
        //输出单元格内容
        int cellType = cell.getCellType();
        switch (cellType) {
            case Cell.CELL_TYPE_FORMULA://2
                //得到公式
                String formula = cell.getCellFormula();
                System.out.println(formula);
                //计算
                CellValue evaluate = fFormulaEvaluator.evaluate(cell);
                String cellValue = evaluate.formatAsString();
                System.out.println(cellValue);
                break;
        }
    }

运行结果:

4、easyExcel

4.1 简介

Alibaba Easy Excel - 简单、省内存的Java解析Excel工具 | 首页 简单、省内存的Java解析Excel工具https://alibaba-easyexcel.github.io/

EasyExcel是阿里巴巴开源的一个excel处理框架,以使用简单,节约内存著称。它能大量减少占用内存的主要原因是在解析Excel时没有将文件数据一次性全部加载到内存中,而是从一个磁盘上一行行读取数据,逐个解析。

官方文档:EasyExcel · 语雀

4.2 导入依赖

注意:easyExcel依赖中包含POI相关依赖,有可能发生冲突,所以注释掉。

     <!--导入依赖-->
    <dependencies>
        <!--fastjson-->
        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>fastjson</artifactId>
            <version >1.2.62</version>
        </dependency>

        <!--easyexcel-->
        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>easyexcel</artifactId>
            <version >2.2.0-beta2</version>
        </dependency>
    <!--lombok-->
	<dependency>
		<groupId>org.projectlombok</groupId>
		<artifactId>lombok</artifactId>
		<version >1.18.12</version>
	</dependency>
    <!--&lt;!&ndash;xLs(03)&ndash;&gt;
    <dependency>
        <groupId>org.apache.poi</groupId>
        <artifactId>poi</artifactId>
        <version>3.9</version>
    </dependency>
    &lt;!&ndash;xLsx(07)&ndash;&gt;
    <dependency>
        <groupId>org.apache.poi</groupId>
        <artifactId>poi-ooxml</artifactId>
        <version>3.9</version>
    </dependency>-->
    <!--日期格式化工具-->
    <dependency>
        <groupId>joda-time</groupId>
        <artifactId>joda-time</artifactId>
        <version>2.10.1</version>
    </dependency>
    <!--test-->
    <dependency>
        <groupId>junit</groupId>
        <artifactId>junit</artifactId>
        <version>4.12</version>
    </dependency>
    </dependencies>

4.3 easyExcel读写操作

(1)写入操作

创建实体类 DemoData:

@Data
public class DemoData {
    @ExcelProperty("字符串标题")
    private String string;
    @ExcelProperty("日期标题")
    private Date date;
    @ExcelProperty("数字标题")
    private Double doubleData;
    /**
     * 忽略这个字段
     */
    @ExcelIgnore
    private String ignore;
}

具体操作:

public class EasyExcelTest {

    String path="H:\\kuang-poi\\";

    private List<DemoData> data() {
        List<DemoData> list = new ArrayList<DemoData>();
        for (int i = 0; i < 10; i++) {
            DemoData data = new DemoData();
            data.setString("字符串" + i);
            data.setDate(new Date());
            data.setDoubleData(0.56);
            list.add(data);
        }
        return list;
    }

    // 最简单的写
    @Test
    public void simpleWrite() {
        // 写法1
        String fileName = path+"EasyExcel.xlsx";
        // 这里 需要指定写用哪个class去写,然后写到第一个sheet,名字为模板 然后文件流会自动关闭
        // 如果这里想使用03 则 传入excelType参数即可
        EasyExcel.write(fileName, DemoData.class).sheet("模板").doWrite(data());
    }

}

(3)读取操作

创建实体类DemoDataListener:【监听器**】**

// 有个很重要的点 DemoDataListener 不能被spring管理,要每次读取excel都要new,然后里面用到spring可以构造方法传进去
public class DemoDataListener extends AnalysisEventListener<DemoData> {

    private static final Logger LOGGER = LoggerFactory.getLogger(DemoDataListener.class);
    /**
     * 每隔5条存储数据库,实际使用中可以3000条,然后清理list ,方便内存回收
     */
    private static final int BATCH_COUNT = 5;
    List<DemoData> list = new ArrayList<DemoData>();
    /**
     * 假设这个是一个DAO,当然有业务逻辑这个也可以是一个service。当然如果不用存储这个对象没用。
     */
    private DemoDAO demoDAO;
    public DemoDataListener() {
        // 这里是demo,所以随便new一个。实际使用如果到了spring,请使用下面的有参构造函数
        demoDAO = new DemoDAO();
    }
    /**
     * 如果使用了spring,请使用这个构造方法。每次创建Listener的时候需要把spring管理的类传进来
     *
     * @param demoDAO
     */
    public DemoDataListener(DemoDAO demoDAO) {
        this.demoDAO = demoDAO;
    }
    /**
     * 这个每一条数据解析都会来调用
     *
     * @param data
     *            one row value. Is is same as {@link AnalysisContext#readRowHolder()}
     * @param context
     */
    @Override
    public void invoke(DemoData data, AnalysisContext context) {
        System.out.println(JSON.toJSONString(data));
        list.add(data);
        System.out.println(list);
        // 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM
        if (list.size() >= BATCH_COUNT) {
            saveData();
            // 存储完成清理 list
            list.clear();
        }
    }
    /**
     * 所有数据解析完成了 都会来调用
     *
     * @param context
     */
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
        // 这里也要保存数据,确保最后遗留的数据也存储到数据库
        saveData();
        LOGGER.info("所有数据解析完成!");
    }
    /**
     * 加上存储数据库
     */
    private void saveData() {
        demoDAO.save(list);
    }
}

具体操作:

<1>持久层****DemoDAO :

/**
 * 假设这个是你的DAO存储。当然还要这个类让spring管理,当然你不用需要存储,也不需要这个类。
 **/
public class DemoDAO {
    public void save(List<DemoData> list) {
        // 如果是mybatis,尽量别直接调用多次insert,自己写一个mapper里面新增一个方法batchInsert,所有数据一次性插入
    }
}

<2>测试:

    // 最简单的读
    @Test
    public void simpleRead() {
        String fileName = path+"EasyExcel.xlsx";
        // 这里 需要指定读用哪个class去读,然后读取第一个sheet 文件流会自动关闭
        EasyExcel.read(fileName, DemoData.class, new DemoDataListener()).sheet().doRead();
    }

运行结果如下:

原文链接: https://blog.csdn.net/friggly/article/details/123914391

标签: #EasyExcel 1 #软件开发 1171
相关文章

万字:支付“核心系统”详解 2024-11-02 15:33

专栏作者:隐墨星辰 \| 主编:陈天宇宙 这篇文章也尝试化繁为简,探寻支付系统的本质,讲清楚在线支付系统最核心的一些概念和设计理念。 虽然支付行业已经过了风头最劲的时光,但跨境支付仍然在蓬勃发展,每年依然有很多新人进入这个行业,这篇文章尝试为这些刚入行的新人提供一点帮助。 文章只介绍一些支付行业十几

资深支付架构师视角:实战从问题定义到代码落地的完整套路 2024-11-02 15:33

前言 今天从一个实际案例入手,介绍站在架构师的角度,如何识别并定义问题,提炼需求,技术方案选型,再到详细设计,最后利用AI的能力协助写出核心的代码,验证与调优。 解决问题存在一定的模式,也可以称之为框架,总结出自己的思考和解题框架,以后再碰到同类型的问题就可以如庖丁解牛一样容易。 很多年前,我写代码

Spring 实现 3 种异步接口 2024-10-18 09:07

大家好,我是苏三~ 如何处理比较耗时的接口? 这题我熟,直接上异步接口,使用 Callable、WebAsyncTask 和 DeferredResult、CompletableFuture等均可实现。 但这些方法有局限性,处理结果仅返回单个值。在某些场景下,如果需要接口异步处理的同时,还持续不断地

重学SpringBoot3-集成Redis(五)之布隆过滤器 2024-10-08 11:24

更多SpringBoot3内容请关注我的专栏:《SpringBoot3》 期待您的点赞👍收藏⭐评论✍ 重学SpringBoot3-集成Redis(五)之布隆过滤器 1. 什么是布隆过滤器? * 基本概念 适用场景 2. 使用 Redis 实现布隆过滤器 * 项目依赖 Redis 配置

设计模式第16讲——迭代器模式(Iterator) 2024-10-08 11:24

一、什么是迭代器模式 迭代器模式是一种行为型设计模式,它提供了一种统一的方式来访问集合对象中的元素,而不是暴露集合内部的表示方式。简单地说,就是将遍历集合的责任封装到一个单独的对象中,我们可以按照特定的方式访问集合中的元素。 二、角色组成 抽象迭代器(Iterator):定义了遍历聚合对象所需的方法

vue2路由和vue3路由区别及原理 2024-10-08 11:24

一、Vue2 与 Vue3 路由的区别 1. 创建路由实例方式的不同 Vue 2 中,通过 Vue.use() 注册路由插件,并通过 new VueRouter() 来创建路由实例。 import Vue from 'vue';import VueRouter from 'vue-router';i

目录

IT 外包服务商

  • 意见投递
  • zyf6619

软件开发应用

主菜单

  • 首页
  • 软件开发
  • 计算机基础
  • Hello Halo
  • 新手必读
  • 关于本知识库
Copyright © 2024 your company All Rights Reserved. Powered by Halo.